Hola! estoy empezando viendo cosas acerca de buscadores spider y eso. He estado viendo como crear spider que a partir de una url busquen las palabras clave y subpáginas que contengan. Pero quería saber si existe y sepuede crear un spider que busque urls que contengan cierta palabra. Es decir, que introduciendo una palabra busque urls que la contengan por ejemplo en <title>. Es esto posible?
Gracias por las respuestas!!
Saludos