Ver Mensaje Individual
  #3 (permalink)  
Antiguo 04/08/2013, 05:46
Usuarios466
Invitado
 
Mensajes: n/a
Puntos:
Respuesta: Archivo robots.txt

Te recomiendo que sintetices el robots.txt y lo dejes tal que así:

Cita:
User-agent: *
Disallow: /administracion/
Sitemap: http://www.miweb.com/sitemap.xml
De esta forma estás diciendo a todos los bots que no indexen el contenido del directorio "administracion", ya que de la forma que tú lo pones, a pesar de hacer la misma función, pones muchos bots especificandolos, pudiéndolo dejar con una acción general para todos.