Bueno te mando un link al manual de apache donde te muestran como utilizar las directivas allow, deny y order que hacen justamente lo que tu deseas. También decirte que puedes utilizarlas tanto para directorios como para ficheros, solo varia el </Directory> o </Files>
Toda esta información la tienes aqui:
http://httpd.apache.org/docs-2.0/mod...ess.html#allow http://httpd.apache.org/docs-2.0/mod/core.html#files
Si necesitas mas no dudes en contactar