Migración a nuevos servidores

j_aroche · #1 (**permalink**) 01/03/2008, 20:43

Como muchos sabran ayer por la tarde y parte de hoy en la mañana, Foros del Web ha estado fuera de funcionamiento, La razón fue que estuvimos migrando de servidor, dentro del mismo data center.

Desafortunadamente la migración que esta planeada a completarse en solo 10 minutos, nos tomó 24 hora en total. Cuando copiamos la base de datos al nuevo servidor, descubrimos que la tabla de posts de vBulletin estaba corrupta y no era posible agregar más datos en ella;

Luego descubrimos que aún en el viejo servidor esa tabla (probablemente desde hace tiempo) ya tenía problemas y myisamchk (repair table) solo termino de arruinar los indices. El mayor problema con esta tabla es que por su gran tamaño (4.9GB) cualquier operación que hagamos con ella toma demasiado tiempo (como para terminar sin uñas y sin café/coca-cola en la oficina).

Después de probarlo todo con tal de recuperar dicha tabla, no tuvimos más opción que levantar que levantar la base de datos desde el SQL Dump creado unos minutos antes de cerrar el foro. De nuevo, gracias a la tabla, levantar el dump toma las angustiosas 10 horas en total, aún tenido el servidor libre de tráfico.

Finalmente, después de 24 horas de luchas, esperas y muchos tickets a la gente de Soporte, tenemos el Foro funcionando y coleando :D La novedad es que hemos separado la base de datos del servidor web, ahora Foros del Web está usando 2 servidores para que tengamos lugar a donde crecer en el futuro.

Sentimos mucho, haber estado tanto tiempo con el Foro cerrado pero Murphy hizo de las suyas ='(

Aún estamos optimizando los nuevos servidores, si encuentra problemas, por favor reportarlos donde corresponde.

Un saludo, voy a dormir un poco.

Shiryu_Libra · #2 (**permalink**) 01/03/2008, 21:10

Cita:

Iniciado por j_aroche

.....
Un saludo, voy a dormir un poco.

estupendo trabajo ha hecho compañero... una buena siesta de unas ochorrocientas horas para poder recuperar la melena de tanto jalonearse la cabeza

saludos master

Aplauso para el Jefe

blackcreativebox · #3 (**permalink**) 01/03/2008, 21:16

Me alegro mucho que todo haya salido bien. Yo estuve hoy pendiente todo el dia hasta ahora en la noche que me metí de curiosa y vi que ya estaba al aire. En hora buena si todo salió bien que excelente.....

Felicidades como siempre y gracias por tener al aire este medio que nos sirve de mucho a todos.....

#4 (**permalink**) 01/03/2008, 21:31

Se nota que j_aroche tuvo un día con sus 24 horas muy estresante. Denle una ojeada a su twitter y verán las mil y una cosas que pasaron tras la caida de los foros

:.

Antes que nada, FELICITACIONES por el gran trabajo que realizaste j_aroche, y a todo el equipo de MDW que seguro no pudieron pegar los ojos en toda la noche. Después de todo, la tabla de posts es el alma en este foro

Merecido descanso el que se van a dar

Ahora el foro corre en dos servidores? Pues eso si que es una grata sorpresa. Ya tenemos espacio suficiente para seguir creciendo, pero... cuanto tiempo pasará para que ya no sean dos, sino tres? Esperemos que muy pronto

Una vez más se agradece al cuerpo técnico del foro, qué haríamos sin ustedes?

Saludos,

webosiris · #5 (**permalink**) 01/03/2008, 21:40

notable aroche... gracias por recuperar el barco de los dientes de los tiburones!!!

vaya a descansar, que se lo merece

DP: gracias por toda la explicación geek/técnica

lucasan · #6 (**permalink**) 01/03/2008, 22:57

Felicitaciones, que excelente equipo humano el que está detrás de este foro, mis respetos y mas sinceros agradecimientos por mantener esta valiosa herramienta (FDW).

GatorV · #7 (**permalink**) 01/03/2008, 23:07

Felicidades j_aroche!,

Gracias a ti y a tus veladoras por estar manteniendo al foro corriendo!

juaniquillo · #8 (**permalink**) 01/03/2008, 23:21

Un gran trabajo...

A mi si me cayera una base de datos de 4 gigas encima me mata. Yo hubiera contratado domadores de leones o algo asi para calmarla...

hades87 · #9 (**permalink**) 02/03/2008, 03:55

madre mía, estas hazañas no las hace ni el indiana jones, la verdad que es bueno saber que el foro esta en tan buenas manos de tan experimentado equipo ^^.

Esperemos que dentro poco tengamos que usar mas servidores. Ahora el foro imagino irá mas ligero ^^

Gracias j_aroche :P

JavierB · #10 (**permalink**) 02/03/2008, 03:57

Gracias a j_aroche y a los que han participado en este cambio. Me alegro de que, a pesar de todas las dificultades, al final haya quedado todo bien.

Me imagina todos sudando a chorros y mordiéndose las uñas hasta los codos

Saludos,

Coronel McKnight · #11 (**permalink**) 02/03/2008, 04:58

Un excelente trabajo

Nada más entrar noté que olia a nuevo

Saludos!!

paolamurias · #12 (**permalink**) 02/03/2008, 08:00

Gracias J_aroche. Al equipo mis felicitaciones.
Felices sueños (no se si podrás después de tanto café!)

skatomundo · #13 (**permalink**) 02/03/2008, 09:06

Así me gusta... jjajajaj
Café/Cola?

milerweb · #14 (**permalink**) 02/03/2008, 10:01

Por que se hisieron tantos problemas en migrar es mas facil eso

hubieran exportado primero la data luego con mysql front hubieran creado un archivo sql y lo importaban

pr lo pesado que dicen que estaba la data esos ie s un problema eso si les entiendo.

pero que bueno que ya este de vuelta el foro jejejeje
viva foros del web

kseso? · #15 (**permalink**) 02/03/2008, 10:35

Me uno a los parabienes y reconocimiento a vuestro trabajo, pero añado que según mis ARDUAS investigaciones los problemas fueron resueltos cuando encontrasteis el enfoque correcto y se hizo la luz.
LA PRUEBA ESTÁ AQUÍ, Y NO PIENSO DESVELAR MIS FUENTES NI BAJO TORTURA

Marto · #16 (**permalink**) 02/03/2008, 14:34

Me uno a las felicitaciones a j_aroche y a todo el equipo técnico del foro que no es que hayan pasado el mejor viernes de su historia....

... y también a los usuarios del foro ya que a las pocas horas de estar de nuevo funcionando, se superaban los 3000 usuarios activos.

Espero que no haya que cambiar muchas teclas F5 de vuestros teclados.

DoPeY-BBS · #17 (**permalink**) 02/03/2008, 18:14

La verdad es que me sorprende tan bárbaro conocimiento. Excelente amigo.

#18 (**permalink**) 02/03/2008, 19:31

Cita:

Iniciado por milerweb

Por que se hisieron tantos problemas en migrar es mas facil eso

hubieran exportado primero la data luego con mysql front hubieran creado un archivo sql y lo importaban

pr lo pesado que dicen que estaba la data esos ie s un problema eso si les entiendo.

Como j_aroche lo explicó con bastante detalle en el mensaje inicial, ya desde algún tiempo atrás la tabla de posts se encontraba dañada. Al intentar repararla sólo se terminó de malograr. No sé mucho sobre el tratamiento y mantenimiento que se debe dar a las bases de datos, pero imagino que ese error tarde o temprano iba a dar problemas, y mejor que fue ahora y no después, o las consecuencias sí habrían sido fatales. Ahora, el tamaño de la base de datos, y de esa tabla específicamente fue un problema debido a que, como lo dijo también j_aroche, cualquier operación que se realizará tomaría horas. En fin, es admirable lo que se hizo en esta oportunidad, como mencionaron por ahi, es confortable saber que detrás de toda la comunidad hay un equipo técnico tan geek

Saludos,

j_aroche · #19 (**permalink**) 02/03/2008, 21:33

Cita:

Iniciado por okram

Se nota que j_aroche Denle una ojeada a su twitter y verán las mil y una cosas que pasaron tras la caida de los foros

:.

Ohhhh si sin duda ;)

Cita:

Iniciado por okram

Ahora el foro corre en dos servidores? Pues eso si que es una grata sorpresa. Ya tenemos espacio suficiente para seguir creciendo, pero... cuanto tiempo pasará para que ya no sean dos, sino tres? Esperemos que muy pronto

Ahora que la DB esta en un servidor aparte, podemos ir agregando mas servidores web (maquinas ejecutando solo Apache) hasta que el servidor de la DB no de más. El de la DB esta riéndose de la carga, el web server... pues pide que le demos cariño.

Cita:

Iniciado por milerweb

Por que se hisieron tantos problemas en migrar es mas facil eso

hubieran exportado primero la data luego con mysql front hubieran creado un archivo sql y lo importaban

De hecho, de hecho aún trabajando solo con la tabla de post, toma una asombrosa cantidad de tiempo para importarla:

Cita:

"Query OK, 0 rows affected (9 hours 17 min 51.39 sec)"

Gracias a todos por sus palabras, esperamos no tener interrupciones en mucho tiempo :)

AlZuwaga · #20 (**permalink**) 02/03/2008, 21:58

Wow, qué laburito! Gracias por estar allí atrás ;)

Ahora, esto...

Cita:

"Query OK, 0 rows affected (9 hours 17 min 51.39 sec)"

¿¿9 horas para decir que no ha ocurrido nada?? jejeje

CrepitantE · #21 (**permalink**) 02/03/2008, 22:14

Felicitaciones a todo el equipo que trabajó arduamente para lograr mantener on-line este foro.

PD: Llegue al nivel 13 en El jueguito....

Jejejejje... Fueron como 2 horas de entretenimiento....

lisandro Arg · #22 (**permalink**) 03/03/2008, 09:14

Esto esta mucho mas rapido !! excelente !! Donde mando mi donacion ? :)

jscieza · #23 (**permalink**) 03/03/2008, 09:43

Felicidades al equipo de Foros del Web por esta gran mejora que nos ofrecen a los usuarios.

Ahora el foro está mucho más rápido que antes. Sigan así muchachos

j_aroche · #24 (**permalink**) 03/03/2008, 10:23

Cita:

Iniciado por Al Zuwaga

¿¿9 horas para decir que no ha ocurrido nada?? jejeje

Creo que ese es el query donde crea los indices... o algo asi jejejeje

usuariobaneado · #25 (**permalink**) 03/03/2008, 14:26

Una dudilla...

Porqué se daño la tabla? Se pudiera preveer que no vuelva a pasar. Eso sirve de experiencia para personas que manejamos bases de a gigas.

Y felicitaciones una vez mas maestro aroche. Hay que estar lucido y pensar bien para decidir que hacer en estos casos. Es como cuando al doctor está que se le muere el enfermito

j_aroche · #26 (**permalink**) 03/03/2008, 15:43

Cita:

Porqué se daño la tabla? Se pudiera preveer que no vuelva a pasar. Eso sirve de experiencia para personas que manejamos bases de a gigas.

hmmm es algo difícil de decir a ciencia cierta, muy probablemente por alguna falla en el disco duro ya que la tabla de posts es una de las que tiene mayor concurrencia de escritura.

Saludos

CrepitantE · #27 (**permalink**) 04/03/2008, 07:48

No había leído un detallito importante...

¿¿¿¿¿¿¿¿¿4.9GB Es lo que pesa toda la base de datos ?????????

webosiris · #28 (**permalink**) 04/03/2008, 07:51

Cita:

Iniciado por CrepitantE

¿¿¿¿¿¿¿¿¿4.9GB Es lo que pesa toda la base de datos ?????????

solo la tabla de posts...

rogertm · #29 (**permalink**) 04/03/2008, 09:53

pues agradecidisimo, porque al parecer no era solo la tabla post la afectada, ahora estoy seguro que en el antiguo server habia algun problema que me estuvo afectando bastante tiempo, y ahora todo va de lo mejor.

en cualquier caso, debemos agradecer al profe aroche por su dedicacion

saludos y suerte

M

j_aroche · #30 (**permalink**) 04/03/2008, 10:46

Cita:

Iniciado por CrepitantE

¿¿¿¿¿¿¿¿¿4.9GB Es lo que pesa toda la base de datos ?????????

Toda la base de datos pesa 6GBs, pero son datos en binario y con los indices. El tamaño en datos reales debe ser unos 2GBs