google indexa solo lo que marco como disallow en robots.txt

[amanitacreaciones]

ayer anadi una ultima condicion disallow en mi archivo robots.txt y en vez de desindexarlos o simplemente dejarlos y no hacer nada ha desindexado las entradas que si que eran buenas. A que se debe? puede ser que la web lleva online pocos dias? a que he hecho un cambio en la etiqueta canonical?

[carlosrubio]

Hola!!

Puedes poner tu file de robots.txt para que te digamos el fallo? mandame un mp si quieres

robots y tag canonical son dos cosas distintas y su uso depende de lo que quieras conseguir. No creo que hay nada desindexado como dices, igual es que google no ´visito´tu site todavía, míra GWT para ver que todo esta Ok

[amanitacreaciones]

Se que el archovo robots.txt y el tab cannonical son cosas distintas

Robots.txt indica a google las direcciones por donde no quieres que busque y el tag canonical indica a google si varias webs tienen el mismo contenido cual prefieres que indexe.

He comentado estas 2 posibilidades ya que son la unica cosa que he tocado antes de que sucediese este cambio.

Para verificar las paginas indexadas hago site:midominio.com en google

Mi archivo robots.txt es:

User-agent: *
Disallow: /words/
Disallow: /comments/
Disallow: /doubts/
Disallow: /pages/home/
Disallow: /similarwords/
Disallow: /test/


Sitemap: /sitemap.xml

[webseficientes]

A lo mejor es poco tiempo para determinar que el cambio que hiciste te desindexo lo que si tenías que indexar, por otro lado, no tiene sentido que haga eso.

Iniciado por amanitacreaciones

ayer anadi una ultima condicion disallow en mi archivo robots.txt y en vez de desindexarlos o simplemente dejarlos y no hacer nada ha desindexado las entradas que si que eran buenas. A que se debe? puede ser que la web lleva online pocos dias? a que he hecho un cambio en la etiqueta canonical?

[amanitacreaciones]

vamos a dejar unos días, por que hoy vuelven a aparecer lar url buenas que estaban desindexadas, pero la url la coge no friendly.

[Jabin]

Yo recuerdo haber tenido un problema que se indexaba enlaces que no queria o se estaban duplicando pero cuando coloque:

Disallow: /unacarpeta/
Disallow: /books?*q=*

Quizas esa semana no hacia efecto, pero posteriores semanas iban eliminandose, hasta la fecha que ya no estan, en mi caso me ha funcionado normal.

Aqui puedes encontrar algunos ejemplos: google.com/robots.txt

[amanitacreaciones]

Jabin, ese ultimo disallow que has puesto que haria?