09/10/2011, 11:05
| |||
| |||
| robots.txt Hola! Quería saber si estoy teniendo algún problema con el robots.txt ya que google me lo indexo :S Es necesario dentro del .txt poner que no lo indexe o estoy haciendo algo mal? Mi robots.txt es: # robots.txt for http://www.misitio.com/ User-agent: * Disallow: /unaCarpeta/ Disallow: /404.html Disallow: /pagina.html Agrego Disallow: /robots.txt?? Gracias! :) Última edición por Daniel Ulczyk; 09/10/2011 a las 16:11 Razón: se remueve URL del enlace - error 404 |
|
09/10/2011, 16:21
| ||||
| ||||
| Respuesta: robots.txt Por definición, Google no debiera estar indexando el archivo que contiene las directivas de restricción. Sin embargo, esto que comentás... no es el primer caso que veo  si llevás a cabo la consulta en Google robots.txt ves varios más  ¡incluso el propio sitio de Google! en la #8 posición 
__________________ —Somos lo que hacemos repetidamente. La excelencia, entonces, no es un acto sino un hábito. (Aristóteles dixit) |
|
09/10/2011, 20:18
| |||
| |||
| Respuesta: robots.txt Cita:
Iniciado por rapuig  Hola! Quería saber si estoy teniendo algún problema con el robots.txt ya que google me lo indexo :S Es necesario dentro del .txt poner que no lo indexe o estoy haciendo algo mal? Mi robots.txt es: # robots.txt for http://www.misitio.com/ User-agent: * Disallow: /unaCarpeta/ Disallow: /404.html Disallow: /pagina.html Agrego Disallow: /robots.txt?? Gracias! :) Hola: A mi me ha pasado lo mismo me ha indexado el robots txt lo unico que se me ocurre es borrarlo en las herramientas de google, o poner una linea como la que pusiste en el ejemplo pero me suge la duda de que si le pones Disallow: /robots.txt ignorara las paginas o carpetas que no debe rastrear... ojala y alguien nos pueda orientar mejor porque esto creo no es "normal"... Saludos Última edición por Daniel Ulczyk; 09/10/2011 a las 21:15 Razón: se remueve URL del enlace - error 404 |
|
11/10/2011, 15:44
| ||||
| ||||
| Respuesta: robots.txt Pregunta: ¿Hay alguna consecuencia negativa para ti por permitir que Google haya agregado tu robots.txt a su índice? |
|
12/10/2011, 02:19
| |||
| |||
| Respuesta: robots.txt consecuencia negativa ninguna. Hay quien podría pensar que pueden llegar atacantes a tu web pero es absurdo ya que el robot.txt es público y accesible de todas formas. Así que no, no hay consecuencias negativas.
__________________ Surf |
|
12/10/2011, 15:00
| ||||
| ||||
| Respuesta: robots.txt A eso mismo iba. No hay ninguna necesidad de bloquearlo o buscar que Google lo saque de sus índices. |
| Etiquetas: |
