Doppelte Zeilen entfernen

Eine eingefügte Liste bereinigen

1. Fügen Sie die Liste bei den ursprünglichen Zeilen ein oder tippen Sie sie. Leere Eingabe ist gültig. Das Beispiel füllt pear, apple, nochmals pear und eine Leerzeile; starten Sie die Aktion anschließend.
2. Wählen Sie Duplikate entfernen. Vor der Entfernung werden 100.000 UTF-16-Einheiten im Rohtext und kanonischen Text sowie 10.000 Eingabezeilen geprüft; das letzte LF zählt zur kanonischen Grenze.
3. Prüfen Sie Eingabe, behaltene und entfernte Zeilen sowie das Ergebnis. Kopieren Sie es oder laden Sie unique-lines.txt als UTF-8 herunter. Bei Kopierfehler wird das Ergebnis zum manuellen Kopieren markiert.

Exakter Vergleich und Ausgabeformat

Nach Umwandlung von CRLF und einzelnem CR in LF wird der gesamte Zeileninhalt verglichen. Erstes Vorkommen und Reihenfolge bleiben erhalten; Leerzeichen, Groß- und Kleinschreibung und Unicode werden nicht verändert, CSV wird nicht interpretiert.

Leerzeilen werden wie andere Inhalte verglichen und einmal behalten. Eine Leerzeile, eine Zeile mit Leerzeichen und eine mit Tabulator sind verschieden.

Jede behaltene Zeile erhält ein LF. So bleibt eine letzte Leerzeile erhalten; ein zweiter Durchlauf liefert denselben Text ohne Entfernung. Auch ohne Duplikate können Zeilenenden oder das letzte LF verändert werden.

Entfernte Zeilen zählen überzählige Vorkommen, keine Gruppen: Drei Kopien ergeben zwei Entfernungen. Eingabezeilen sind die Summe aus behaltenen und entfernten Zeilen.

Beispiele für Reihenfolge und Leerraum

pear, apple, pear und eine Leerzeile ergeben pear, apple und die Leerzeile: vier Eingabezeilen, drei behalten, eine entfernt.

a, eine Leerzeile und nochmals a ergeben a gefolgt von zwei LF: eines beendet a, das andere erhält die Leerzeile.

A und a unterscheiden sich ebenso wie a mit vorangestelltem oder nachgestelltem Leerzeichen. Leerer Text hat null Zeilen; ein LF entspricht einer Leerzeile.

Grenzen und exakter Text

Rohtext und kanonischer Text mit letztem LF sind auf 100.000 UTF-16-Einheiten begrenzt; vor der Entfernung sind 10.000 Zeilen erlaubt. Ein Text mit 100.000 Einheiten ohne letztes LF wird abgelehnt, nicht gekürzt.

Ungepaarte UTF-16-Surrogate werden ohne Reparatur abgelehnt. Gültige ergänzende Zeichen und ein tatsächliches U+FFFD bleiben erhalten. Das Browserfeld normalisiert Zeilenenden bereits; ursprüngliche Bytes lassen sich nicht wiederherstellen.

Es gibt keinen Dateiimport und keine Optionen zum Trimmen, Vergleich ohne Groß-/Kleinschreibung, Sortieren, Spaltenauswahl oder Entfernen von Leerzeilen. TXT nutzt UTF-8 und LF ohne zusätzliches BOM; Zwischenablage-Zeilenenden können abweichen.

Lokale Verarbeitung

Das Werkzeug verarbeitet den Text lokal und lädt oder speichert ihn nicht und überträgt ihn nicht in URLs oder Analysedaten. Übliche Website-Anfragen erfolgen weiterhin. Text wird nicht als HTML oder Code ausgeführt.