ELIMINAR LINEAS REPETIDAS EN TXT - con bat

[mariomagauf]

HOla:

SI tengo un TXT que contiene esto:

Jabón 13.5
Jabón 14
Peines 5
Peines 5
Cucharas 23
cucharas 24

¿Existe alguna manera ( en BAT ) de poder quitar las lineas que se repiten dentro de un fichero? En este caso eliminaría las dos líneas que contienen Peines 5
Ojala alguien sepa. Yo no he conseguido nada.

[Libras]

Puedes reemplazar las lineas, aqui el problema es como sabes cual es la cadena a reeemplazar???

Saludos!!

[mariomagauf]

La única manera que se me ocurre es tomando cada linea e introducirla en una variable a comparar con todas. Lo que no se es como se borra una linea en concreto. El problema es que ese fichero final sería el resultado de la comparación entre dos ficheros anteriores que no ha funcionado del todo bien. Ya que quedan restos de lineas iguales que no se han separado en el resultado que vemos en el ejemplo. COmo aquello no funcionó del todo bien (no comprendo tampoco porque) el problema que me planteo es poder arreglar un fichero limpio en casi su totalidad....solo que ese resto repetido podría llenar varias hojas...Una tarea de chinos, en resumen. XD

[mariomagauf]

Se me ocurre....así a lo tonto...
¿Y si como digo se mete cada linea en una variable y se va comparando linea tras linea y si no está repetida se envia a otro fichero ? ¿Podría funcionar eso? ¿COmo lo ves?

[jevangelista]

Idea estravagante:

Por cada línea se crea un archivo en un directorio vacío X.

Las repeticiones de líneas no van a crear nada ya que el directorio ya está.

Al final se saca un dir al directorio X que incluso lo vas a poder ordenar.

Esto podría servir si las líneas contienen nombres que sean compatibles con nombres de archivo.

Si serviría no?

Ojalá puedas postear el código si funciona.

[Libras]

Iniciado por jevangelista

Idea estravagante:

Por cada línea se crea un archivo en un directorio vacío X.

Las repeticiones de líneas no van a crear nada ya que el directorio ya está.

Al final se saca un dir al directorio X que incluso lo vas a poder ordenar.

Esto podría servir si las líneas contienen nombres que sean compatibles con nombres de archivo.

Si serviría no?

Ojalá puedas postear el código si funciona.

Muy buena idea, el codigo de esta idea quedaria mas o menos de esta manera:

Código batch:

echo off
 
set /a x=1
 
for /f "tokens=1 delims=" %%a in (token4.txt) do (
rem echo %%a
echo %%a > %%a.test
)
 
for /f "tokens=* delims= " %%a in ('dir /B "*.test"') do (
echo %%a>>semifinish.txt
)
 
echo  > finish.txt
 
for /f "tokens=1,2 delims=." %%a in (semifinish.txt) do (
 
echo %%a >>finish.txt
rem echo %%b
 
rem echo %%p
 
)
 
for /f "tokens=* delims= " %%a in ('dir /B "*.test"') do (
del "%%a"
)
 
del semifinish.txt
 

Se crean los archivos con su respectivo nombre con extension .test, despues se listan nada mas dichos archivos y se meten los nombres en un archivo de texto, al final se borran todos los archivos temporales y nada mas queda el finish.txt que es donde viene la lista de palabras sin repetir :)

Saludos!!

[mariomagauf]

Impresionante!!!
No hay nada como pegarle una patada a la tele para que se vea. jejejejee. Cumple la función que se le exige....entonces es genial!!!!
Muy bien pensado!!!

[promosnet]

Hola he utilizado tu codigo para tratar de eliminar duplicados de una lista de texto
que contiene correos electronicos el problema es que me saca perfecto los duplicados pero me deja los correos sin dominio.

por ejemplo

[email protected] ----- me lo lista luego como av@gdtm

hay alguna forma de poder usar este codigo sin que modifique o quite los dominios la verdad apreciaria y valoraria esta inmensa ayuda ya que no encuentro solucion para poder hacerlo

gracias
saludos cordiales