Cita:
Iniciado por zeuslife 
Yo veo más facil permitir de base solo yahoo y google (marcando esos dos en especial), y a continuacíon prohibir el resto (User-Agent: *)
tengo entendido que los robots de por si siempre rastrean el tema es bloquearlos y yo los estoy bloqueando...pero siguen igual
