25/08/2016, 15:05
|
 | Moderador | | Fecha de Ingreso: noviembre-2005 Ubicación: Sevilla España
Mensajes: 11.559
Antigüedad: 19 años, 1 mes Puntos: 2053 | |
| Respuesta: por qué es necesario el robots.txt?
Son ayudas para el buscador, puedes no usarlas o no, pero cuesta poco.
Eso sí, las partes que quieras que no indexen porque sean privadas es mejor que las protejas por contraseña, el robots.txt no lo respetan al 100%. |