Cita:
Iniciado por RBZ No veo la necesidad de bloquearlos en el archivo robots.txt.
Perdon
Se me olvido comentar que como borre las anteriores URL .html desde herrameintas para webmasters de google porque voy a cambiar el contenido de mi pagina a un nuevo dominio ya no quiero que indexe las viejas URL con html
Entonces se deben de bloquear esas URL con el robots.txt tambien, no?
Por eso te preguntaba si en el robots.txt debo de escribir
con .html o
sin .html?
Saludos