Evitar q puedan acceder a determinados archivos del servidor conociendo su ubicacion

[sarverok007]

Hola tengo una duda,
vereis en mi servidor apache tengo un script que es un explorador para poder ver todos los ficheros que hay y poder guardar los ficheros seleccionados en la bd. Pero lo que quiero es que por ejemplo si hay ficheros de musica como MP3 o algun PDF o algun fichero .doc aunque el usuario sepa donde se encuentra ubicado gracias al explorador, hecho con PHP, que no pueda acceder directamente a ellos, ni descargarlos directamente, escribiendo la URL en el campo de direccion del navegador web.

Espero haberme explicado bien, como puedo hacerlo? hay alguna directiva apache que permita controlar esto?
Gracias, por la ayuda