Cita:
Iniciado por webelgrillo si en caso necesite que tenga un Robots.txt como seria el archivo.
Tan sencillo como subir lo siguiente en un archivo llamado "robots.txt" a la raíz de tu página:
Cita: User-agent: *
Disallow:
Sitemap: http://www.dominio.com/sitemap.xml