Textdatei bereinigen
Text bereinigen, leere und doppelte Zeilen entfernen und das Ergebnis herunterladen.
Wofür ist diese Vorlage gedacht?
Text bereinigen, leere und doppelte Zeilen entfernen und das Ergebnis herunterladen.
Die Vorlage bereinigt eine ganze Textdatei (TXT, als Text gelesene CSV, Markdown oder Protokoll): Leerzeichen werden normalisiert, leere und wiederholte Zeilen entfernt und eine neue TXT-Datei heruntergeladen. So musst du eine große Datei nicht im Editor von Hand korrigieren.
Pipeline-Schritte
Diese Vorlage verknüpft automatisch 5 Schritte im Workspace. Vor der Ausführung können Sie jede Einstellung prüfen.
- 1Textdatei importieren
- 2Leerzeichen und Zeilen bereinigen
- 3Leere Zeilen entfernen
- 4Doppelte Zeilen entfernen
- 5Als TXT herunterladen
Warum die Schritte in dieser Reihenfolge stehen
Zuerst werden die Leerzeichen bereinigt, damit Zeilen, die sich nur durch Leerzeichen unterscheiden, identisch werden. Beim Entfernen leerer Zeilen verschwinden auch die, die nur Leerzeichen enthielten; danach arbeitet die Dublettensuche auf sauberen Zeilen.
Wann sollte diese Vorlage verwendet werden?
- Eine als TXT exportierte Liste vor dem Import in ein Werkzeug von Dubletten befreien.
- Eine Notizdatei voller leerer Zeilen entschlacken.
- Eine aus einem anderen System exportierte Liste von URLs oder Kennungen vorbereiten.
Lokale Verarbeitung im Browser
Wenn die verwendeten Module lokale Verarbeitung unterstützen, bleiben Ihre Dateien während der Ausführung auf Ihrem Gerät.
Einstellungen, die du prüfen solltest
- Quelldatei: TXT, CSV, Markdown oder Protokoll, zeilenweise gelesen.
- Name der erzeugten Datei: standardmäßig „resultat.txt“.
- Die drei Bereinigungsschritte haben keine Einstellungen.
Beispiel
- Vorher
- Datei mit 5.000 Zeilen Kennungen, davon 600 leer und 1.100 wiederholt.
- Nachher
- resultat.txt mit 3.300 eindeutigen Kennungen in ihrer ursprünglichen Reihenfolge.
Grenzen, die du kennen solltest
- In einem Protokoll werden zwei identische Ereignisse zu verschiedenen Zeitpunkten zusammengeführt: Nutze diese Vorlage nicht zum Zählen von Vorkommen.
- Eine CSV wird als Text behandelt: Eine wiederholte Kopfzeile wird entfernt, die Spalten werden aber nicht ausgewertet.
- Die behaltenen Zeilen folgen der Reihenfolge der Datei, ohne Sortierung.