Tema: Consulta sobre robots.txt
Ver Mensaje Individual
  #2 (permalink)  
Antiguo 17/04/2007, 14:18
Avatar de Daniel Ulczyk
Daniel Ulczyk
Super Moderador
  
Fecha de Ingreso: febrero-2005
Ubicación: Buenos Aires
Mensajes: 9.264
Antigüedad: 19 años, 10 meses
Puntos: 2114
Re: Consulta sobre robots.txt
Con la primera ocurrencia, le estás dando instrucciones a los bots para que no entren a tu sitio y, con la segunda estarías logrando lo que vos querés.

A mi entender, la mejor fuente: robotstxt.org (FAQ)
__________________
—Somos lo que hacemos repetidamente. La excelencia, entonces, no es un acto sino un hábito. (Aristóteles dixit)