Procesar CSV muy largo sin error por tiempo o memoria

[ArturoGallegos]

He estado buscando sin mucha suerte, como procesar un archivo CSV o TXT con mas de 20,000 lineas que se tienen que guardar en una base de datos, pero termina cortándose por limite de tiempo.

Alguien sabrá como procesarlo por lotes y que no se considere como una sola tarea? por que me imagino que el limite de tiempo lo alcanzo por ejecutarlo y procesarlo en un solo paso.

[pateketrueke]

pero termina cortándose por limite de tiempo.

¿Lo estás ejecutando a través del servidor web?

Ese creo que sería tu principal error: php no debe usarse para procesos largos, y menos si se deben disparar desde la web.

Debes usar un proceso en el fondo del sistema, pues a dicho proceso le es irrelevante el timeout dado que dicha limitante existe sólo en el contexto web.

[matake]

Bueno aunque creo que pateketrueke tiene razon ... para poder continuar con tu trabajo hay estas dos maneras

Para lo del tiempo tienes:

Código PHP:

set_time_limit(600); //600 segundos por ejemplo (10 minutos)
 

y para la memoria:

Código PHP:

ini_set('memory_limit', '512M');
 

pero solo si no tienes el PHP en "safe mode"

[ArturoGallegos]

Así es pateketrueke, se ejecuta desde el navegador ya que es un archivo que carga el cliente en su sitio, aunque mirare la posibilidad de crear un cron job... pero de momento es una tarea que se debe ejecutar desde el navegador.

Creo que intentare dividirlo y guardarlo en fragmentos en lugar de procesarlo, para iniciar llamadas mediante ajax.

matake ya he probado esa opción y no se ha resuelto el problema...