Durante mucho tiempo, aquí en el foro, hemos repetido como letanía:
—Googlebot rastrea las páginas con Javascript y CSS desactivado
Esa era la mejor manera de entender la forma en que un crawler rastreaba los documentos de un sitio web.
Eso ya es historia pasada. Google, en el artículo
Comprender mejor las páginas web ahora nos cuenta que Javascript aporta un valor agregado muy importante en la web actual. Por lo que Google, ha decidido comenzar a ver la web como lo haría un usuario con un navegador con Javascript activado.
A nivel recomendación de usuario. Si tu archivo robots.txt tiene una directiva de restricción que apunta a bloquear archivos CSS y/o Javascript,
es hora que decidas si vas a ayudar a Google a comprender mejor las páginas Web.