17/01/2006, 13:18
| ||||
| ||||
| Utilizar robots.txt Hola a todos, Quiero que todos los buscadores indexen todas las paginas de mi web. Por lo tanto no veo necesidad de utilizar el fichero robots.txt para limitar el acceso a ciertos buscadores o a ciertas paginas de mi web. Mi pregunta es si en mi caso tiene alguna utilidad que desconozca el uso de este fichero. Gracias y un saludo
__________________ Bodegas La Rioja |
|
17/01/2006, 13:38
| |||
| |||
| Si lo que deseas es que los robots indexen todas las paginas de tu web, lo mejor es que te crees un sitemap (una página con todas las urls de las paginas de tu dominio) y lo enlaces desde la principal, asi los robots tendrán constancia de tus web. Un saludo. |
|
18/01/2006, 08:21
| ||||
| ||||
| Mas o menos es lo que temia. Pero me dio que pensar al ver en mis estadisticas un apartado "URLs solicitadas pero no encontradas (código 404 del protocolo HTTP) " en el cual casi el 90% de estas solicitudes fallidas eran de "/robots.txt". En cuanto a lo del sitemap me parece buena idea, ademas me ayudara a mejorar mi posicionamiento, no? Me podeis indicar algun ejemplo de sitemap para fijarme en la estructura? Gracias y un saludo
__________________ Bodegas La Rioja |
|
19/01/2006, 09:19
| ||||
| ||||
| Gracias PGBWebs. Por cierto, no localizo el FAQ que me dices sobre Sitemap. Un saludo
__________________ Bodegas La Rioja |
|
20/01/2006, 02:21
| ||||
| ||||
| Gracias por todo PGBwebs. Un saludo
__________________ Bodegas La Rioja |
