Cita:
Iniciado por RBZ 
Métele un enlace con relevancia a una página bloqueada por robots.txt y verás el poco caso que le hace.
¿Te refieres por ejemplo a bloquear la home de alguna web o sección principal? ¿No hace caso? ¿Entonces no sirve para nada la acción "Disallow"?
Tengo mis dudas al respecto...