Puedes leer ese archivo desde php con la función file(), que te devuelve un array en donde cada posición es una línea del archivo.
Código PHP:
$array_urls = file("tu_archivo.txt");
foreach($array_urls as $url){
$sql = "INSERT INTO tabla VALUES('$url')";
// Y haces la inserción.
}
Saludos
