Crawler de descarga, es posible?

Jask · #1 (**permalink**) 20/04/2015, 05:49

Buenos días,

Estoy investigando como podría hacer un crawler para descargar imágenes. Es decir, hay una web que tiene wallpapers y me gustaría descargar una a una, y que pase a la siguiente página, ya que es una web con varias páginas (esto es ficticio, pero es la idea). Sería posible hacerlo con php? La web tiene usuario/contraseña para conectarse si no, no te deja descargar nada.

Cómo lo podría hacer? Obviamente no pido que nadie me lo haga, quiero aprender a ello :) A ver si es posible.

Gracias

pateketrueke · #2 (**permalink**) 20/04/2015, 09:02

Sí es posible con PHP, pero hay muchos mejores soluciones con NodeJS.

A decir verdad es mucho mejor hacer crawling en un entorno más parecido a un navegador, y bueno, PHP no se le parece nada.

Jask · #3 (**permalink**) 20/04/2015, 13:25

Cita:

Iniciado por pateketrueke

Sí es posible con PHP, pero hay muchos mejores soluciones con NodeJS.

A decir verdad es mucho mejor hacer crawling en un entorno más parecido a un navegador, y bueno, PHP no se le parece nada.

Muchas gracias, lo tendré en cuenta.