Redcoruna y su medición del tráfico consumido

marcelo1043 · #1 (**permalink**) 16/12/2013, 21:14

Llevo en Redcoruna tres semanas con la de prueba con su plan Comezo que incluye tráfico 5Gb yo creo que suficiente para miweb que solo tiene texto y fotos, aparte mucho vídeos de Youtube que creo que no contabiliza para el tráfico porque corre por cuenta del servidor de Youtube, supongo.

Tras tres años en Hostgator, las Awstats nunca me marcaron ni 4Gb en el mes más exitoso (es una web hecha con HTML de cine alternativo) porque no tengo más de 100 visitantes únicos al día o 3000 al mes.

Pues hoy día 17, los de Redcoruna me envían un correo en el que me avisan que he consumido 4Gb, el 80% del tráfico contratado...

Miro el cPanel y el contador de tráfico de su index marca en efecto esa cantidad con una barra roja, pero el Awstats marca solo 1.70GB, lo normal.

Empiezo a Googlear y leo en la web de cPanel que hay varias formas de contabilizar el tráfico y que yo puedo configurar la manera en un apartado que se llama WHM Web Host Manager o algo así. La que me están aplicando es la que mide más.

Busco la contraseña en el correo de activación de cuenta de Redcoruna y viene una dirección IP y entre paréntesis : Si se trata de un plan revendedor.
O sea que si no soy revendedor no puedo configurar la elección de la manera de medir el tráfico.

Ya les escribí a ver qué me cuentan porque si me quieren cobrar más les mando a ese sitio. Aún puedo reclamar con Paypal.

Si me pueden comentar algo al respecto sobre el cPanel o Redcoruna estaría agradecido.

Noured · #2 (**permalink**) 17/12/2013, 03:24

Buenos días Marcelo.

Contestando a tu primera pregunta, si los vídeos son subidos a Youtube no te preocupes que no te van a consumir tráfico de tu plan de alojamiento Web, ya que los archivos son cargados de los servidores de Youtube.

Si cPanel te muestra una cosa y Awstats te muestra otra es por que en Awstats no estará recalcando todos los valores, solo el tráfico de la Web, FTP o correo, cPanel te muestra toda la transferencia global. (Recuerda que FTP y correo también cuentan en la transferencia)

Sobre lo que comentas de WHM, solamente es accesible para los administradores del sistema y revendedores, por lo cual no podrás hacer nada, en WHM podrías modificar la transferencia mensual.

Espero ayudarte un poco.

Saludos.

stormy · #3 (**permalink**) 17/12/2013, 06:58

Si cPanel marca un consumo, salvo algún extrañísimo error, el consumo es verdad. A ver qué te dicen.

marcelo1043 · #4 (**permalink**) 17/12/2013, 10:25

Pues me dicen que el consumo se debe a tráfico no visto, o sea de robots que sumado al visto es 4Gb.
Me dicen que ponga un archivo robots.txt para impedir este tráfico no visto, pero esto impediría que mis contenidos se indexaran en motores de búsqueda (aunque no las urls) lo cual penalizaría la difusión de mi website. Cómo bloquear o eliminar páginas con un archivo robots.txt

Empiezo a entender porqué Hostgator cobra lo que cobra, si con un plan de 25€ anuales no se puede mantener una web de 3000 visitantes únicos al mes en un servidor español debería contratar uno de 50€.

Noured · #5 (**permalink**) 17/12/2013, 11:07

Si RedCoruña te ha respondido eso lo único que puedes hacer es como bien dices crear un robots.txt denegando el acceso a las carpetas que no sean importantes como pueden ser las carpetas de los include (si los tubieras) carpetas de CSS, carpetas de JS, etc...

Segunda opción, aumentar de plan con RedCoruña.

Tercera opción, buscar otra empresa que te ofrezca más que RedCoruña.

Sobre lo de Hostgator no es del todo cierto, hay servicios en España, más baratos que Hostgator y funcionan igual o mejor.

Un saludo.

marcelo1043 · #6 (**permalink**) 17/12/2013, 14:23

¿Y cuánto tráfico ahorraría denegando el acceso a las carpetas de estilo CSS y a todas las que no tengan contenido? Son pocas porque solo tengo HTML.
¿Es complicado hacerlo?

Mejor que Hostgator ni me lo imagino, en tres años no tuve ni una sola queja, todo perfecto.

CoriaWeb · #7 (**permalink**) 17/12/2013, 14:50

¿Si no has tenido ningún problema porque cambiaste?

Noured · #8 (**permalink**) 17/12/2013, 14:52

Hola Marcelo, no, no es nada complicado, te explico es sencillo.

1º- Crea un archivo llamado robots.txt

2º- Copia este código

Código:

User-agent: *
Disallow: /ejem_css
Disallow: /ejem_images
Disallow: /ejem_js
Sitemap: http://www.tuweb.com/sitemap.xml

3º- Edita "ejem_css, ejem_images, ejem_js" por tus carpetas, si tienes más duplicas el código y ya esta, con "User-agent: *" decimos que todos los robots tienen acceso.

4º- Subelo al root de tu alojamiento, que será /public_html

De verdad hay empresas muy buenas en España, lo que pasa que la gente esta un poco escaldada y le cuesta confiar en el mercado español.

Saludos.

marcelo1043 · #9 (**permalink**) 17/12/2013, 20:38

Cita:

Iniciado por CoriaWeb

¿Si no has tenido ningún problema porque cambiaste?

Porque me subían la cuota un 18% que es una pasada en estos tiempos que corren.
Ya me subieron los dos años anteriores un poco pero éste se pasaron cuatro pueblos.

Aún así, si mi web fuera comercial y ganara algo con ella lo hubiera pagado porque son muy profesionales.

De momento con Redcoruna no estoy mal, no son mala gente solo un poco descuidados, por ejemplo en el periodo de prueba me dieron un alojamiento distinto al que luego me quedé con lo que tuve que usar otra contraseña y volver a subir los archivos por ftp, una cosa absurda cuando me podrían haber dado el definitivo desde el principio me hubieran ahorrado trabajo. Algún detallito parecido más propio de tener poca vista comercial.
Pero bueno, yo también soy un poco cateto con el tema.

stormy · #10 (**permalink**) 18/12/2013, 05:31

¿Y has analizado bien ese tráfico "no visto"? Normalmente esto no se soluciona con robots.txt. Los robots "maleducados" no suelen hacer caso de estas cosas.

marcelo1043 · #11 (**permalink**) 18/12/2013, 05:52

Cita:

Iniciado por stormy

¿Y has analizado bien ese tráfico "no visto"? Normalmente esto no se soluciona con robots.txt. Los robots "maleducados" no suelen hacer caso de estas cosas.

Visitas de Robots/Spiders :
13 robots distintos Solicitudes Tráfico Última visita
Unknown robot (identified by empty user agent string)53,831 2.22 GB 13 Dic 2013 - 08:46
Unknown robot (identified by '*bot') 2,278+74 144.78 MB 18 Dic 2013 - 00:04
Unknown robot (identified by 'bot*') 1,564+261 9.34 MB 17 Dic 2013 - 22:00
MSNBot-media 502+1149 30.11 MB 18 Dic 2013 - 00:13
Googlebot 1,017+31 15.45 MB 17 Dic 2013 - 23:04
Unknown robot (identified by 'robot') 336+81 1.06 MB 17 Dic 2013 - 22:29
Unknown robot (identified by hit on 'robots.txt') 0+231 45.92 KB 18 Dic 2013 - 00:12
MSNBot 166+16 498.39 KB 17 Dic 2013 - 19:56
Unknown robot (identified by 'spider') 72+24 1.02 MB 17 Dic 2013 - 17:46
Unknown robot (identified by 'crawl') 73+16 1012.90 KB 16 Dic 2013 - 20:51
Alexa (IA Archiver) 5+6 52.63 KB 13 Dic 2013 - 15:03
Yahoo Slurp 0+1 209 Bytes 02 Dic 2013 - 00:53
Netcraft 1 27.98 KB 10 Dic 2013 - 19:49

Pues parece que hay uno que me chupa todo el tráfico.

¿Cómo puedo banearle?

Noured · #12 (**permalink**) 18/12/2013, 06:09

Marcelo, buenos días.

Mira el siguiente enlace: http://www.pdatungsteno.com/2009/11/11/como-reducir-el-consumo-de-ancho-de-banda-de-tu-web-a-la-mitad/

Saludos.

marcelo1043 · #13 (**permalink**) 19/12/2013, 14:38

No encuentro el .htaccess ni sé si tengo acceso pero de momento el robot ése no ha vuelto a consumir ancho de banda y parece que terminaré el mes sin llegar a los 5GB.

Quizás era que faltaba el archivo robots.txt que en Hostgator creo recordar estaba por defecto.
Si vuelve el robot ese anónimo ya les informo y busco una solución.

Noured · #14 (**permalink**) 19/12/2013, 16:48

El archivo .htaccess debes crearlo tu mismo.

Nos alegra escuchar que la ayuda ha servido.

Saludos.

marcelo1043 · #15 (**permalink**) 20/12/2013, 05:12

¿Y dónde lo pongo, en el public_html o es cosa de Apache?

Noured · #16 (**permalink**) 20/12/2013, 06:18

Dentro de public_html.

Saludos.

marcelo1043 · #17 (**permalink**) 22/12/2013, 05:35

Le pido el weblog a los de Redcoruna y me dicen:

Si lo desea, y nos facilita una franja horaria, le podríamos facilitar los logs de accesos web, pero tampoco podríamos indicarle si las visitas tramitadas desde los buscadores quedan registradas en este tipo de logs.

A ver si consigo el weblog y puedo averiguar las ips de los ladriones de ancho de banda.

Noured · #18 (**permalink**) 22/12/2013, 06:12

Hola Marcelo;

Pues lo vas a tener un poco dificil la verdad, lo mejor es que busques en tener más transferencia mensual hoy en día 5Gb no es nada, siempre vas a estar en el mismo problema.

Mejor prevenir que curar.

Saludos.

indedmedia · #19 (**permalink**) 22/12/2013, 06:52

Bueno, lo mejor que puedes hacer es bloquear el acceso a bots, no a todos, pero vamos que deberías bloquear algunos que son muy molestos.

marcelo1043 · #20 (**permalink**) 22/12/2013, 12:48

Cita:

Iniciado por Noured

Hola Marcelo;

Pues lo vas a tener un poco dificil la verdad, lo mejor es que busques en tener más transferencia mensual hoy en día 5Gb no es nada, siempre vas a estar en el mismo problema.

Mejor prevenir que curar.

Saludos.

Si claro, una idea estupenda pagarle la conexión a los bots mientras mi servidor no dispone de la tecnología ni las habilidades necesarias para evitar ese saqueo.

Ni por pienso.

Noured · #21 (**permalink**) 22/12/2013, 13:01

Bueno Marcelo, pues entonces la solución la tienes dandole caña a Redcoruña, nosotros solo te estamos ayudando y dándote consejos.

marcelo1043 · #22 (**permalink**) 23/12/2013, 16:25

Ya me han dicho que están estudiando el tema.
Es que tiene gracia que tres años en Hostgator nunca me pasó nada similar, claro que no tenía límite de ancho de banda, no miraba el tráfico no visto ni el visto porque me daba igual el consumo, pero en los primeros quince días en un servidor español me salen parásitos de éstos.

Tan difícil no será localizarlos y bloquearles, digo yo.

Noured · #23 (**permalink**) 23/12/2013, 16:36

No todo es tan fácil, esperemos que RedCoruña resuelva tu problema.

Puede que el problema lo tubieras también en Hostgator pero como bien dices como tenias "unlimited" no hacias caso, pero como ahora si tienes pues lo miras con lupa.

Tienes que buscar la IP que robot es, bloquearlo etc.. pero si cambiamos de IP estamos en las mismas.

Saludos.

Noured · #24 (**permalink**) 27/12/2013, 12:43

Marcelo ¿Como ha quedado el tema?

Saludos.

marcelo1043 · #25 (**permalink**) 31/12/2013, 18:24

Gracias por el interés.

Ya tengo la IP del bot: 91.121.77.203 después que me pasaran el weblog muy amablemente en Redcoruna.

Ahora voy a hacer el .htaccess.

Problema, el cPanel me dice que ya existe pero no lo veo en ninguna carpeta así que no lo puedo editar ni crear de nuevo.

Al final he bloqueado las IPs en el bloqueador de Ips del cPanel. A ver si funciona, lo revisaré todos los días.

Muy atentos en Redcoruna me contestaron en Nochevieja al pie del cañón a las 3 am.

Noured · #26 (**permalink**) 01/01/2014, 03:23

Qeu alegría escuchar eso, esperemos que tengas ya la solución.

Saludos.

marcelo1043 · #27 (**permalink**) 05/01/2014, 09:18

Bueno bloqueo unos y salen otros, ayer otro bot 51Mb en un solo día.
Lo he metido en el .htaccess y además le bloquearé su ip.
Espero que no sigan saliendo más.

La verdad que llevar una web es un bastante trabajoso, entre escribir contenidos, código, ver las películas y encima estos problemas dan ganas de dejarlo.

Los servidores deberían estar prevenidos contra estos parásitos chupaanchodebanda.

Noured · #28 (**permalink**) 05/01/2014, 11:44

Vamos es normal que consuman MB.

A lo mejor en tu caso no te interesa que un robot te rastré, pero quizas a otras personas si, que es lo más normal, pues un robot hace que su "encargado" te posicione. Hay veces que hay que invertir más dinero para que tu Web pueda seguir online.

Es como si te comprás un coche y siempre vas en la reserva, el coche podrá hacer pocos kilómetros.