colocando el directorio en una regla extra, como lo hace CI:
Código Apache:
Ver originalRewriteCond $1 !^(index\.php|images|assets|robots\.txt)
no soy muy experto en la config de apache, en tal caso puedes buscar en su documentación, además el tema no compete a PHP
