| hay herramientas que permiten bajar sitios completos, dependiendo de los links que encuentre en el codigo HTML. Por otro lado algunos servicios de hosting te dan la opcion de "Indexado" si esta activado los archivos se muestran, sino sale un mensaje de Forbidden |