No estás obligado a tener los archivos en el directorio de la aplicación y si que los puedes tener en C:\ (por ejemplo), simplemente desde tu aplicación puedes hacer referencia a la carpeta donde estén. Es como se hace y como se debe hacer para que no pasen cosas como las que te pasan a tí