Foros del Web » Programando para Internet » PHP »

loguear un crawler

Estas en el tema de loguear un crawler en el foro de PHP en Foros del Web. estoy programando un crawler para que pueda obtenerme cierta informaciond e una web, el caso es que cierta informacion solo la muestra si estoy logueado ...
  #1 (permalink)  
Antiguo 18/07/2011, 15:54
Avatar de juanito1712  
Fecha de Ingreso: mayo-2010
Ubicación: Valencia
Mensajes: 1.124
Antigüedad: 14 años, 6 meses
Puntos: 66
loguear un crawler

estoy programando un crawler para que pueda obtenerme cierta informaciond e una web, el caso es que cierta informacion solo la muestra si estoy logueado en ella.
Tengo cuenta en la web y los fines no son ilícitos, quizá si caraduras pero nada de ilícitos tranquilos.
Pero a lo que iba, para ver ciertos contenidos necesito estar logueado en la pagina, el crawler hace algo similar a esto

Código PHP:
$original_file file_get_contents($host);
  
preg_match_all('expresion_regular'$original_file$tabla);
  
print_r($tabla); 
hay alguna manera de que el crawler haga todo eso pero como si estuviese logueado en la web? o ya pido demasiado?

y tengo cuenta de usuario en la web
  #2 (permalink)  
Antiguo 18/07/2011, 15:57
Avatar de GatorV
$this->role('moderador');
 
Fecha de Ingreso: mayo-2006
Ubicación: /home/ams/
Mensajes: 38.567
Antigüedad: 18 años, 5 meses
Puntos: 2135
Respuesta: loguear un crawler

Verifica en los aportes, hay un tema sobre como hacer requests con cURL.

Lo que básicamente tienes que hacer es pasar la cookie de la sesión al hacer login.

Saludos.
  #3 (permalink)  
Antiguo 18/07/2011, 16:00
Avatar de juanito1712  
Fecha de Ingreso: mayo-2010
Ubicación: Valencia
Mensajes: 1.124
Antigüedad: 14 años, 6 meses
Puntos: 66
Respuesta: loguear un crawler

gracias ;)

Etiquetas: crawler, tabla
Atención: Estás leyendo un tema que no tiene actividad desde hace más de 6 MESES, te recomendamos abrir un Nuevo tema en lugar de responder al actual.
Respuesta




La zona horaria es GMT -6. Ahora son las 14:50.