10/03/2004, 15:59
|
|
El archivo robots.txt indica basicamente lo que :
NO QUIERES que el buscador indexe.
en ese archivo, claramente se le pide al "robot" que visite el web, pero que no busque en esos directorios ni indexe determinados archivos.
Saludos. |