Duplikate aus Liste entfernen

Entferne Duplikate aus einer Liste von Textwerten und behalte jeweils das erste Vorkommen. Das Werkzeug verarbeitet einen Eintrag pro Zeile und lässt dich entscheiden, ob Großbuchstaben und Leerzeichen an den Zeilenrändern beim Vergleich zählen.

Jede nicht leere Zeile wird mit den bereits gesehenen Werten verglichen. Gelten zwei Zeilen als gleich, bleibt nur die erste im Ergebnis. Zwei standardmäßig aktive Optionen ignorieren Unterschiede zwischen Groß- und Kleinschreibung und entfernen vor dem Vergleich Leerzeichen am Zeilenanfang und -ende; schalte sie für einen strengen Vergleich aus. Leere Zeilen fallen weg. Der Zähler der entfernten Duplikate enthält keine leeren Zeilen, sondern nur wiederholte Vorkommen. Rechtschreibfehler werden nicht korrigiert und Synonyme nicht erkannt. So werden „Köln“ und „köln“ bei ignorierter Schreibweise zusammengefasst, „Köln“ und „Kölln“ bleiben aber getrennt. Behalte deine Ausgangsliste, wenn die Wiederholungen statistisch etwas aussagen. Ob zwei Werte als gleich gelten sollen, hängt von der Qualität der Quelle ab. In einem Adressverzeichnis spielen Unterschiede in der Groß- und Kleinschreibung selten eine Rolle; in einer Liste technischer Codes können sie dagegen gültige Kennungen unterscheiden. Das Entfernen der Randleerzeichen ist nach einem Kopieren und Einfügen praktisch, verändert aber nie Leerzeichen innerhalb eines Ausdrucks. Kommt eine Zeile dreimal vor, behält das Werkzeug das erste Vorkommen und entfernt die übrigen nach den gewählten Regeln. Bloß ähnliche Werte werden nie zusammengeführt. Bewahre für eine Prüfung eine Kopie der Ausgangsliste auf und notiere die verwendeten Optionen, damit du das Ergebnis erklären kannst. Duplikate entfernen ist nicht dasselbe wie Vorkommen zählen: Interessiert dich die Häufigkeit der Werte, nutze einen Werte-Zähler.