Buenos dias a tod@s!
Os cuento: no se porque pero wordpress me añade automaticamente en el fichero robots.txt el codigo de las estadisticas de analytics y claro, luego cuando pasa el robot no lo entiende y no me indexa nada porque lo considera como erróneo.
Código:
User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/
<script type="text/javascript">
var _gaq = _gaq || [];
_gaq.push(['_setAccount', 'blablabla']);
_gaq.push(['_setDomainName', 'blablabla']);
_gaq.push(['_trackPageview']);
(function() {
var ga = document.createElement('script'); ga.type = 'text/javascript'; ga.async = true;
ga.src = ('https:' == document.location.protocol ? 'https://ssl' : 'http://www') + '.google-analytics.com/ga.js';
var s = document.getElementsByTagName('script')[0]; s.parentNode.insertBefore(ga, s);
})();
</script>
Quería saber si alguien sabe dónde se genera el archivo para poder modificarlo ya que con plugins no he conseguido arreglarlo o si hay alguna forma de evitar que se genere este robots.txt automatico y ya lo creare manualmente.
Gracias.