Cita:
Iniciado por chichote 
Disculpen el offtopic, pero el archivo Robots.txt no le impide "técnicamente" a google que ingrese e indexe información, es un archivo que depende de la voluntad de google. Google efectivamente respeta estos archivos?
El archivo—por definición—contienen directivas; las cuales no le impiden a Google llevar a cabo el rastreo e incluso listar las URLs en las SERP
