Duda planteamiento del programa

[neodani]

Buenas,

Tengo una duda a la hora de enfocar como llevar a cabo el programa.

Dispones de un fichero1 de entrada txt con 100.000 lineas o más.
Estas lineas contienen 6 números separados por un espacio
Los números de una misma linea nunca se repiten y están ordenador de menor a mayor.


Quiero hacer dos cosas:

1) Quiero a partir de otro fichero2 con X lineas del mismo estilo que el fichero1 saber si alguna de estas coincide con alguna del fichero1


2) Saber si en el fichero1 contiene alguna linea repetida

Mi pregunta es como lo plantearíais para hacerlo de una forma eficiente recorriendo el fichero las menos veces posibles

Muchas gracias de antemano!!