Ver Mensaje Individual
  #1 (permalink)  
Antiguo 26/09/2011, 14:35
Fer12
 
Fecha de Ingreso: julio-2009
Mensajes: 163
Antigüedad: 15 años, 4 meses
Puntos: 2
Restringir arañas en robots.txt

Hola tengo un problema con mi host compartido, es que segun parece consume mucha CPU, ya realise las otoimizaciones pertinentes y aun asi esta jodiendo, lo que creo puede ayudar seria cortar el acceso a las distintas arañas exeptuando a google , no se si esto es posible ? y de serlo como seria el texto a implementar , el sitio es en joomla y tiene unas 3 000 visitas diarias y si bien n o es mucho parece que lo es para byethost, hace unos dias puse en el fichero robots.txt algunas lineas que encontre en internet para impedir el abuso de banda , pero me bloqueo la publicidad de google , por lo que no era efectivo, espero vuestra ayuda . Gracias