Zum Hauptinhalt springen
Bethemesh

Duplikat-Analyse

Analysiere eine Liste lokal im Browser, um wiederholte Zeilen und ihre Häufigkeit zu erkennen.

  • Zwischenablage
Automatisieren

Dieses Widget einbetten

Passe die Darstellung an, prüfe die Vorschau und kopiere anschließend den Code.

Vorschau

Art des Einbettungscodes

Zu kopierender Code

Responsive und automatisch von Bethemesh in der Größe angepasst.

War dieses Werkzeug hilfreich?

Wie funktioniert dieses Tool?

Bevor du wiederholte Einträge löschst, solltest du wissen, welche Werte mehrfach vorkommen und wie häufig sie erscheinen. Die Duplikatanalyse erstellt dieses Verzeichnis aus jeweils einem Element pro Zeile: Bestellreferenzen, Teilnehmerkennungen, kopierten Adressen oder Protokollmeldungen. Sie zeigt ausschließlich wiederholte Zeilen mit ihrer gesamten Anzahl an Vorkommen. Deine ursprüngliche Liste bleibt im Eingabefeld erhalten. Das Ergebnis ist ein Häufigkeitsbericht, keine neue bereinigte Liste und keine Prüfung auf eindeutige Schlüssel über mehrere Tabellenspalten. Damit kannst du gezielt entscheiden, welche Einträge vor einer Änderung untersucht werden müssen.

Windows-Zeilenenden CRLF und einzelne CR-Zeichen werden vor dem Aufteilen in LF umgewandelt. Jede physische Zeile wird anschließend als eigener Vergleichswert betrachtet. Vollständig leere Zeilen bleiben unberücksichtigt. Eine Zeile, die nur Leerzeichen enthält, gilt jedoch als tatsächlicher Wert und kann deshalb als unsichtbares Duplikat auftauchen. Eine besondere Kopfzeile gibt es nicht: Eine wiederholte Überschrift wird genauso gezählt wie jede andere Eingabezeile.

Der Vergleich ist exakt. Großbuchstaben, Akzente, Tabulatoren sowie führende und abschließende Leerzeichen bleiben relevant. Bonn, bonn und Bonn mit einem folgenden Leerzeichen bilden drei verschiedene Gruppen. Es erfolgen weder Unicode-Normalisierung noch Adresskorrektur oder Zahlenumwandlung. Die Kennung 0012 wird deshalb nicht mit 12 zusammengefasst. Dieses Verhalten eignet sich für identische Zeichenfolgen, sucht aber keine ähnlichen Namen, Tippfehler oder möglichen Einträge derselben Person mit abweichenden Schreibweisen.

Jedes Vorkommen erhöht einen Zähler. Danach werden ausschließlich Werte behalten, die mindestens zweimal auftreten. Der Bericht ist absteigend nach Häufigkeit sortiert; bei gleicher Anzahl bleibt die Reihenfolge des ersten Auftretens erhalten. Jede Ausgabezeile beginnt mit der Gesamtzahl, gefolgt von × und dem ursprünglichen Wert. Drei bedeutet drei vorhandene Vorkommen, also zwei überzählige, wenn du ein Exemplar behalten möchtest. Wiederholt sich kein Wert, bleibt die Ausgabe leer. Das ist kein Hinweis auf einen Lesefehler.

So verwenden Sie dieses Tool

  1. Je Zeile einen Wert bereitstellen

    Füge eine einzelne Tabellenspalte ein oder importiere eine Textliste. Wenn du Kennungen vergleichen möchtest, ergänze auf derselben Zeile weder Kundennamen noch Kommentare, die nicht zum Vergleich gehören.

  2. Die relevanten Unterschiede vorher festlegen

    Wenn äußere Leerzeichen oder Großbuchstaben keine Rolle spielen sollen, bereinige diese Unterschiede bewusst vor der Analyse. Das Werkzeug bietet keine Einstellung, um sie während des Zählens zu ignorieren.

  3. Häufigkeiten vor dem Löschen auswerten

    Starte die Analyse, kontrolliere einige gemeldete Werte und kopiere oder exportiere den Textbericht. Entscheide anhand der Ursprungsliste über Löschungen, denn einmalige Werte fehlen im Bericht.

Anwendungsfälle

Wiederholte Bestellreferenzen prüfen

Finde Referenzen, die aus mehreren Exporten erneut importiert wurden. Kontrolliere anschließend im Quellsystem, ob fachlich berechtigte Vorgänge oder versehentliche doppelte Importe dahinterstehen.

Eine Teilnehmerliste überprüfen

Zähle wiederholte Teilnehmerkennungen, bevor du Einträge manuell entfernst. Gleiche Anmeldungen rechtfertigen eine Prüfung des Datensatzes, beweisen aber nicht, dass eine Person gelöscht werden sollte.

Häufige Protokollmeldungen finden

Stelle vollständig identische Protokollzeilen nach ihrer Häufigkeit zusammen. Unterschiedliche Zeitstempel verhindern eine Übereinstimmung; entferne diese vorher nur, wenn das zu deiner Untersuchung passt.

Beispiele

Erneut importierte Bestellreferenzen zählen

BEST-205 kommt dreimal vor und steht an erster Stelle. BEST-104 erscheint zweimal. Um jeweils ein Exemplar zu behalten, müsstest du zwei Vorkommen der ersten und eines der zweiten Referenz entfernen, also insgesamt drei ursprüngliche Zeilen.

Eingabe

BEST-104
BEST-205
BEST-205
BEST-104
BEST-205

Ergebnis

3 × BEST-205
2 × BEST-104

Groß- und Kleinschreibung eines Namens unterscheiden

Die beiden Zeilen Bonn stimmen exakt überein. bonn bleibt ebenso wie Leipzig ein eigener, einmaliger Wert und erscheint daher nicht im Bericht. Eine vorherige Umwandlung in Kleinbuchstaben würde die Definition des Duplikats bewusst verändern.

Eingabe

Bonn
bonn
Bonn
Leipzig

Ergebnis

2 × Bonn

Tipps und bewährte Vorgehensweisen

  • Beim Einfügen mehrerer Spalten entstehen meistens Tabulatoren. Dann wird die ganze Zeile verglichen, keine ausgewählte Spalte. Isoliere das gewünschte Feld oder verwende die CSV-Deduplizierung mit einer Spaltenauswahl.
  • Importiere den Häufigkeitsbericht nicht unmittelbar zurück in deine Quellanwendung: Die vorangestellte Anzahl gehört zum exportierten Text. Nutze ihn als Prüfliste für die zu untersuchenden Werte.
  • Der Import einer CSV-Datei aktiviert hier keinen Tabellenparser. Ein zitiertes Feld über mehrere Zeilen wird in physische Zeilen zerlegt. Verwende für solche Daten ein Werkzeug, das CSV-Datensätze versteht.

Häufig gestellte Fragen

Gibt die angezeigte Zahl die zu löschenden Einträge an?

Sie zählt alle Vorkommen einschließlich des ersten. Bei einer Ausgabe mit 4 × müsstest du drei Vorkommen entfernen, um eines zu behalten. Die Analyse löscht keine Eingabezeilen automatisch.

Warum bleiben scheinbar identische Adressen getrennt?

Abweichende Großschreibung, ein abschließendes Leerzeichen, ein Tabulator oder eine andere Unicode-Darstellung reichen aus. Verglichen werden die empfangenen Zeichen. Weder die Erreichbarkeit einer Adresse noch die Identität ihres Inhabers wird überprüft.

Kann ich eine Schlüsselspalte aus einer CSV-Datei auswählen?

Nein. Diese Analyse interpretiert weder CSV-Spalten noch zitierte Datensätze. Bei der CSV-Deduplizierung kannst du die maßgeblichen Spalten auswählen; dieses Werkzeug zählt dagegen vollständige Textzeilen.

Was bedeutet ein leeres Analyseergebnis?

Keine nicht leere Zeile kommt mindestens zweimal in exakt derselben Schreibweise vor. Fachliche Eindeutigkeit ist damit nicht bewiesen: Unterschiedlich geschriebene Namen können dieselbe Person oder Sache bezeichnen und trotzdem verschiedene Zeichenfolgen sein.

Verwandte Werkzeuge

Werkzeuge, die diesem ähnlich sind oder es ergänzen.

Ähnliche Werkzeuge

Entferne doppelte CSV-Zeilen anhand der ausgewählten Vergleichsspalten.

Daten & TabellenDieses Werkzeug verwenden

Entferne überflüssige Leerzeichen, doppelte Tabulatoren und Leerzeilen aus kopiertem Text.

Daten & TabellenEmpfohlenDieses Werkzeug verwenden

Entferne doppelte Zeilen aus einer Liste und behalte jeden Wert genau einmal.

Daten & TabellenEmpfohlenDieses Werkzeug verwenden