no es necesario lo que haces... seguro!!
con tan solo colocar el código como puse... compruébalo....
Código:
RewriteCond %{REQUEST_URI} !-d
NOTA que no necesita parámetro alguno a la derecha del operador (-d)
lo único que si te pido.... es colócalo justo como la lógica exige... como es una condición debe ir antes de la re-escritura... suerte!