Buenas,
recientemente al hacer un analisis con una herramienta gratuita me dijo que me faltaba o que no tenia correctamente configurado mi archivo robot.txt o robots.txt (ya no me acuerdo)
Me podeis explicar su funcionamiento y que es lo que debo hacer.
Un saludo y gracias anticipadas