Foros del Web » Programando para Internet » PHP »

Problema al dividir array para insert masivo

Estas en el tema de Problema al dividir array para insert masivo en el foro de PHP en Foros del Web. Buenas, Tengo más de 10.000 registros que insertar cada vez (una vez al dia) y para optimizar la eficiencia del mysql mi idea es hacer ...
  #1 (permalink)  
Antiguo 23/12/2011, 15:54
Avatar de neodani  
Fecha de Ingreso: marzo-2007
Mensajes: 1.811
Antigüedad: 17 años, 9 meses
Puntos: 20
Problema al dividir array para insert masivo

Buenas,

Tengo más de 10.000 registros que insertar cada vez (una vez al dia) y para optimizar la eficiencia del mysql mi idea es hacer inserts masivos, en lugar de 1 a uno. Había pensado en insertar de 50 en 50, no sé si hay algun límite o puedo hacer de 1.000 en 1.000. ¿Sabéis?

En cualquier caso, estoy haciendo pruebas para intentar dividir un array de 10 elementos de 3 en 3 para construir el insert, se os ocurre alguna forma de implementarlo?

El tema no solo es dividir sino saber que primero se insertan los registros 1,2 y 3, luego tienen que insertarse los registros 4,5 y 6, luego el 7,8 y 9 y por ultimo el 10 dado que no hay más.

¿Me recomendáis que lo haga de alguna manera?

Muchas gracias
  #2 (permalink)  
Antiguo 23/12/2011, 16:09
Avatar de memoadian
Colaborador
 
Fecha de Ingreso: junio-2009
Ubicación: <?php echo 'México'?>
Mensajes: 3.696
Antigüedad: 15 años, 5 meses
Puntos: 641
Respuesta: Problema al dividir array para insert masivo

No hay limite para hacer un insert solo la capacidad de tu server, pero yo hago por ejmplo 200000 de una tirada y no pasa nada salvo el gasto del server como te digo.

un ejemplo
Código PHP:
Ver original
  1. $array = array(1,2,3,4,5,6,7,8,9);

si tomas
Código PHP:
Ver original
  1. $array[0];

te devolverá 1

Código PHP:
Ver original
  1. $array[8]
te da 9 por lo que el array ya esta ordenado.

como lo recorres es el truco

Código PHP:
Ver original
  1. foreach($array as $a){
  2.     echo $a;
  3. }

y te darás esto

123456789

aplicale lógica y tendrás el resultado que quieres.
  #3 (permalink)  
Antiguo 23/12/2011, 17:54
Avatar de neodani  
Fecha de Ingreso: marzo-2007
Mensajes: 1.811
Antigüedad: 17 años, 9 meses
Puntos: 20
Respuesta: Problema al dividir array para insert masivo

Gracias memoadian, recorrer arrays sé y acceder a sus posiciones sé como se hace, mi problema está en el bucle, la lógica que indicas que hay que aplicar.

Puedo recorrer todos los valores del array, pero pongamos el ejemplo del inicio 10 valores que quieres splitar de 3 en 3 para hacer el insert.

Puedes tener un contador dentro del bucle que cuando llegue a 3 ejecute lo que tenga recopilado, pero que haces con el 10 que no entra en esa condición?

Quizas con este ejemplo se vea mejor.

Código PHP:
Ver original
  1. $array = array(1,2,3,4,5,6,7,8,9,10);
  2.  
  3. $cont=1;
  4. $query='INSERT tabla (valor1) VALUES';
  5. foreach($array as $a){
  6.     $query.="(".$a."), ";
  7.     if ($cont==3){ // ejecuto insert
  8.         $query = substr ($query, 0, strlen($query) - 2);
  9.         echo $query.'<br/>';
  10.         $query='INSERT tabla (valor1) VALUES';
  11.         $cont=0;
  12.     }
  13.     $cont++;
  14. }

Consigo esto, pero falta el 10, en este caso concreto.

INSERT tabla (valor1) VALUES(1), (2), (3)
INSERT tabla (valor1) VALUES(4), (5), (6)
INSERT tabla (valor1) VALUES(7), (8), (9)

Muchas gracias
  #4 (permalink)  
Antiguo 24/12/2011, 19:05
Avatar de leo_  
Fecha de Ingreso: abril-2008
Mensajes: 40
Antigüedad: 16 años, 8 meses
Puntos: 11
Sonrisa Respuesta: Problema al dividir array para insert masivo

Hola podrías utilizar algo como:
Código PHP:
<?php
$array 
= array(1,2,3,4,5,6,7);
echo 
"<pre>";

$array array_chunk($array,3);

foreach (
$array as $a=>$b){
    foreach(
$b as $c=>$d){
        echo 
"$d\n";
    }
    echo 
"Fin de subarray\n";
}
echo 
"</pre>";
Feliz navidad!!
__________________
Di que no haces las cosas para que te las agradezcan, pero trata de hacerlas para gente agradecida. Cipriano.
  #5 (permalink)  
Antiguo 24/12/2011, 19:19
 
Fecha de Ingreso: diciembre-2011
Ubicación: Castellón
Mensajes: 39
Antigüedad: 13 años
Puntos: 2
Respuesta: Problema al dividir array para insert masivo

Usando la respuesta de leo se me ocurre lo siguiente (no lo he probado):

Código PHP:
Ver original
  1. <?php
  2. $array = array(1,2,3,4,5,6,7);
  3.  
  4. $array = array_chunk($array,3);
  5.  
  6. foreach ($array as $a=>$b){
  7.     $query = 'INSERT INTO mitabla VALUES ';
  8.     foreach($b as $c => $d)
  9.         $query.= '(' . implode(',',$b) . ') , ';
  10.     $query = substr($query,0,-1) // eliminar coma del final
  11.     mysql_query($query);
  12. }


La idea es crear una consulta de este estilo:
INSERT INTO mitabla VALUES (c1,c2), (c3,c4),(c5,c6). Así, con una operación de inserción, insertar todos los valores que quieras.

Última edición por Ashlan; 24/12/2011 a las 19:30
  #6 (permalink)  
Antiguo 24/12/2011, 21:52
Avatar de leo_  
Fecha de Ingreso: abril-2008
Mensajes: 40
Antigüedad: 16 años, 8 meses
Puntos: 11
De acuerdo Respuesta: Problema al dividir array para insert masivo

Cita:
Iniciado por Ashlan Ver Mensaje
INSERT INTO mitabla VALUES (c1,c2), (c3,c4),(c5,c6). Así, con una operación de inserción, insertar todos los valores que quieras.
Hola Ashlan para que funcione de esa manera deberias usar arrays asociativos y agregarle true como último parámetro para array_chunk():
Código PHP:
<?php
$array 
= array('uno'=>1,'dos'=>2,'tres'=>3);
echo 
"<pre>";
print_r($array);
$array array_chunk($array,2,true);
print_r($array);
echo 
"</pre>";
Código:

Array (
    [uno] => 1
    [dos] => 2
    [tres] => 3
)
Array (
        [0] => Array (
                [uno] => 1
                [dos] => 2
            )
        [1] => Array (
                [tres] => 3
            )
)
Pero para lo q pidió neodani quedaría así:
Código PHP:
 <?php
$array 
= array(1,2,3,4,5,6,7);
 
$array array_chunk($array,3);
 
foreach (
$array as $a=>$b){
    
$query 'INSERT INTO mitabla VALUES';
    foreach(
$b as $c => $d){
        
$query.= " ($d),";
    }
    
$query substr($query,0,-1);
    
mysql_query($query);
    
// TODO verificar si hubo problemas etc, etc
}
Saludos amigo.
__________________
Di que no haces las cosas para que te las agradezcan, pero trata de hacerlas para gente agradecida. Cipriano.

Última edición por leo_; 24/12/2011 a las 22:12
  #7 (permalink)  
Antiguo 25/12/2011, 07:06
Avatar de neodani  
Fecha de Ingreso: marzo-2007
Mensajes: 1.811
Antigüedad: 17 años, 9 meses
Puntos: 20
Respuesta: Problema al dividir array para insert masivo

Buenísimo el array_chunk!

Muchas gracias a ambos

Etiquetas: dividir, insert, masivo, mysql, registro
Atención: Estás leyendo un tema que no tiene actividad desde hace más de 6 MESES, te recomendamos abrir un Nuevo tema en lugar de responder al actual.
Respuesta




La zona horaria es GMT -6. Ahora son las 17:43.