Si se puede con mod rewrite, has un archivo con este contenido:
Código htaccess:
Ver originalRewriteEngine On
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule ^(.*)$ $1.html [L,QSA]
Lo guardas como .htaccess y lo subes a la raiz del servidor.
Saludo