Ver Mensaje Individual
  #9 (permalink)  
Antiguo 15/02/2012, 16:50
Avatar de humanista
humanista
 
Fecha de Ingreso: abril-2005
Mensajes: 878
Antigüedad: 19 años, 8 meses
Puntos: 15
Respuesta: Evitando los crawls de Google

vale, pero el problema es que si pongo en robots.txt algo del tipo:

Disallow: index.php

y dado que mis web son del tipo www.example.com/articles/index.php?id=123

supongamos que surtirá efecto, vale pero es que yo quiero que indexe mi web pero NO los enlaces que salen desde ella...

Edito: entonces entiendo que tengo que poner:

Disallow: /articles/lanzador.php

supongo que así funcionará bien y que también hará efecto aquí (que es realmente cómo quedará el lanzador):

lanzador.php?id=123&categ=9