Tema: Crawler
Ver Mensaje Individual
  #25 (permalink)  
Antiguo 01/03/2011, 08:48
AlvaroG
Invitado
 
Mensajes: n/a
Puntos:
Respuesta: Crawler

El for tiene un detalle que no pude encontrar, incluso tomé el código y lo modifiqué un poco para que sea más "pythónico" pero tuve problemas para hacer funcionar el for. Debo admitir que tampoco es que lo haya investigado demasiado

Hay otro problema menor y es que la variable url de la línea 17 no existe. No importa, con los cambios que te propongo ya no será un problema:
1.
Código Python:
Ver original
  1. for i in range(len(lista)):
  2.     sock = urllib.urlopen(lista[i])
cambia por
Código Python:
Ver original
  1. for url in lista:
  2.     sock = urllib.urlopen(url)

2.
Código Python:
Ver original
  1. for counter, img in enumerate(soup.findAll('img')):
cambia por
Código Python:
Ver original
  1. for img in soup('img'):

3.
Código Python:
Ver original
  1. local = open((img['src'].split("/")[-1]), "wb")
cambia por
Código Python:
Ver original
  1. local = open(os.path.basename(img['src']), "wb")
(tendrás que importar el módulo os para que este último funcione)


Saludos.