Cita:
Iniciado por arrasia 
Como puedo hacer que las arañas de google y buscadores random, no me indexen parte de mi web que no me interesa (y que no aporta visitas)
He probado con <META name="robots" content="NOINDEX"> en la cabecera de esas web, pero aun así veo las ip de google haciendo de las suyas!!!
Prueba modificando el archvio robots.txt a algo parecido a esto:
Código:
User-agent: *
Disallow: /
Crawl-delay: 120
Si tienes un VPS o un dedicado se podrian mirar otrasa opciones.
Un saludo ;)