01/02/2012, 17:09
| ||||
| ||||
| Respuesta: Jugando con las formas del robots.txt Hola Juan Ca Robots.txt (por definición) sólo imparte directivas restrictivas a los crawlers y bots. Luego, como en el caso que te ocupa, para desindexar o eliminar páginas de los índices; Google, por ejemplo, provee las Herramientas para Webmasters. La cual es la única herramienta que te permite tales acciones. De ninguna manera, vía robots.txt, vas a conseguier eliminar algo una vez indexado 
__________________ —Somos lo que hacemos repetidamente. La excelencia, entonces, no es un acto sino un hábito. (Aristóteles dixit) |
|
01/02/2012, 17:15
| |||
| |||
| Respuesta: Jugando con las formas del robots.txt Cita: ¿Y para qué está la acción "Disallow"?
Iniciado por Daniel Ulczyk  De ninguna manera, vía robots.txt, vas a conseguier eliminar algo una vez indexado  A parte de que para que Google no indexe esa página, ni la rastree, creo que si la utilizamos muchos, es para que Google "se olvide de ella", y si a eso le sumamos que no dejamos rastro en nuestra web de ningún enlace, todo suma. Sigo diciendo, he hecho este experimento y se han borrado 15 páginas que previamente había creado e indexado en Google. Última edición por Usuarios466; 22/02/2012 a las 03:44 |
|
02/02/2012, 14:36
| ||||
| ||||
| Respuesta: Jugando con las formas del robots.txt Creo que para sacar conclusiones del experimento deberías hacerlo ahora al revés, poner primero lo que pusistes al final y cmabiarlo... ¿tienes otra carpeta a desindexar?  |
|
02/02/2012, 14:43
| |||
| |||
| Respuesta: Jugando con las formas del robots.txt Cita: ¡Me subestimáis!
Iniciado por RBZ Creo que para sacar conclusiones del experimento deberías hacerlo ahora al revés, poner primero lo que pusistes al final y cmabiarlo... ¿tienes otra carpeta a desindexar?  Última edición por Usuarios466; 22/02/2012 a las 03:44 |
|
02/02/2012, 14:47
| ||||
| ||||
| Respuesta: Jugando con las formas del robots.txt Cita: Ejem, no lo pillo. ¿Eso es un sí?, haras de nuevo el experimento al revés...
Iniciado por Juan Ca ¡Me subestimáis! |
|
02/02/2012, 14:54
| |||
| |||
| Respuesta: Jugando con las formas del robots.txt Cita: Veré si tengo algo que desindexar.
Iniciado por RBZ Ejem, no lo pillo. ¿Eso es un sí?, haras de nuevo el experimento al revés...  Última edición por Usuarios466; 22/02/2012 a las 03:44 |
|
04/02/2012, 07:57
| |||
| |||
| Respuesta: Jugando con las formas del robots.txt Por cierto, hablando del robots.txt y de los permisos que le damos a éste, ¿sirve de algo especificar que le permitimos todo? Es decir, algo así: Código HTML: User-agent: * Allow: / Código HTML: User-agent: * Supongo que mucha gente lo dará "por entendido" que así es, pero no creo que esté de más especificar en el robots un "allow" y la barra inclinada para que rastree toda nuestra web, ¿no? Última edición por Usuarios466; 22/02/2012 a las 03:45 |
|
04/02/2012, 15:19
| ||||
| ||||
| Respuesta: Jugando con las formas del robots.txt Cita: No tiene sentido. Robots.txt imparte directrices restrictivas. Para declarar sólo que se permite todo, mejor evitar subirlo.
Iniciado por Juan Ca Por cierto, hablando del robots.txt y de los permisos que le damos a éste, ¿sirve de algo especificar que le permitimos todo?
__________________ —Somos lo que hacemos repetidamente. La excelencia, entonces, no es un acto sino un hábito. (Aristóteles dixit) |
| Etiquetas: |
