Amigos,
Quisiera que me ayudaran en como hacer correctamente el fichero robots.txt, quiero que este fichero le diga la spider que index todo mi sitio web seria asi??
User-agent: *
Disallow: /
Saludos,
Acaboo de ver alguna pagina bastante buen en informacion y me dice que haga esto?
User-agent: *
Disallow:
la pagina en concreto es:
http://www.emezeta.com/articulos/rob...-deberia-saber