crawler especial(script)

[xcorpion]

hola que tal, pues aqui buscando un crawler muy especial, saben de alguno con estas caracteristicas: indexa solo las paginas de las respectivas urls indicadas, es decir, que no siga links, si no que consulte una lista de las urls(de las paginas) que va a indexar, si saben de laguno diganme porfabor.

[xcorpion]

no se preocupen amigos, ya programe uno que se ajusta a mis necesidades.