Eliminar líneas duplicadas

Limpiar una lista pegada

1. Pega o escribe la lista en Líneas originales. La entrada vacía es válida. El ejemplo coloca pear, apple, otro pear y una línea vacía; después debes iniciar la acción.
2. Selecciona Eliminar duplicados. Antes de eliminar se comprueban 100.000 unidades UTF-16 en el texto original y canónico y 10.000 líneas de entrada; el límite canónico incluye el LF final.
3. Revisa las líneas conservadas, de entrada y eliminadas y el resultado. Copia el texto o descarga unique-lines.txt en UTF-8. Si falla la copia, se selecciona para copiarlo manualmente.

Coincidencia exacta y formato

Tras convertir CRLF y CR aislado en LF se compara el contenido completo de cada línea. Se conservan la primera aparición y el orden; no se recortan espacios, cambia la caja, normaliza Unicode, ordena ni interpreta CSV.

La línea vacía participa como cualquier otra y se conserva una vez. Una línea vacía, una con un espacio y otra con tabulación son distintas.

Cada línea conservada recibe un LF. Así se mantiene una línea vacía final y una segunda pasada devuelve el mismo texto sin eliminar nada. Incluso con cero eliminaciones pueden cambiar los saltos o el LF final.

Las eliminaciones cuentan apariciones sobrantes, no grupos: tres copias producen dos eliminaciones. La entrada es la suma de las líneas conservadas y eliminadas.

Ejemplos de orden y espacios

pear, apple, pear y una línea vacía producen pear, apple y la línea vacía: cuatro de entrada, tres conservadas y una eliminada.

a, una línea vacía y otra a producen a seguida de dos LF: uno termina a y otro conserva la línea vacía.

A y a son distintas, al igual que a con un espacio delante o detrás. El texto vacío tiene cero líneas; un LF representa una línea vacía.

Límites y texto exacto

El texto original y el canónico con LF final se limitan a 100.000 unidades UTF-16; se admiten 10.000 líneas antes de eliminar. Un texto de 100.000 unidades sin LF final se rechaza, no se recorta.

Las unidades sustitutas UTF-16 sin pareja se rechazan sin repararlas. Se conservan los caracteres suplementarios válidos y el U+FFFD real. El campo del navegador ya normaliza los saltos, por lo que no recupera los bytes originales.

No se importan archivos ni hay opciones de recorte, comparación sin mayúsculas, ordenación, selección de columnas o eliminación de líneas vacías. El TXT usa UTF-8 y LF sin BOM adicional; los saltos del portapapeles pueden variar.

Procesamiento local

La herramienta procesa el texto localmente sin enviarlo, guardarlo ni incluirlo en URL o datos de analítica. Las solicitudes habituales del sitio continúan. El texto no se ejecuta como HTML ni código.