Cita:
Iniciado por lauser Porque no lo haces con robots.txt, aparte de denegar el que quieras puedes poner tiempo máximo que les permites rastrearte... Por ejemplo... aqui denegamos a baidu y al resto solo le permitimos 10s.
Gracias por responder, amigo
lauser. Mira,
aquí te muestro los detalles del cPanel sobre los robots en mi sitio.
Dos cosas más:
- Cómo le haríamos para denegar el acceso al robot identificado como *bot
- A qué te refieres con que al resto solo le permitimos 10s? Esto significa que si el robot entra a mi sitio, podrá bajar lo que guste en 10s?
Saludos!