Doppelte Zeilen entfernen
Duplicate Line Remover
Entfernt doppelte Zeilen, behält nur die Duplikate oder zählt, wie oft jede Zeile vorkam.
Entfernt doppelte Zeilen aus einer Liste oder zeigt nur die, die sich wiederholen – mit ausdrücklich genannten statt erratenen Vergleichsregeln. Leerzeichen am Ende und Unicode-Normalisierung sind die zwei Gründe, warum zwei gleich aussehende Zeilen eine gewöhnliche Deduplizierung beide überleben.
Zeilen
Regeln
Behält die erste Kopie jeder Zeile. Die Liste, bereinigt.
Verglichen wird nach der Unicode-Normalisierung, ein auf dem Mac kopiertes „ä“ trifft also auf dasselbe unter Windows getippte – identisch anzusehen, verschiedene Bytefolgen.
Ergebnis
Zeilen hinein
6
Verschieden
3
Wiederholt
2
Zeilen heraus
3
So funktioniert es
Fügen Sie die Liste ein
Ein Wert pro Zeile – E-Mail-Adressen, Bestellnummern, Namen aus einer Tabellenspalte.
Wählen Sie, was bleiben soll
Die bereinigte Liste, nur die Werte, die genau einmal vorkamen, oder nur die, die sich wiederholt haben. Letzteres wollen Sie, wenn die Duplikate das Problem sind und nicht das Rauschen.
Legen Sie die Vergleichsregeln fest
Groß-/Kleinschreibung und umgebende Leerzeichen sind die zwei, die die Antwort am stärksten verändern. Mit eingeschalteter Zählung sehen Sie, wie oft jeder Wert vorkam – eine andere Frage, und oft die eigentliche.
Häufige Fragen
Zwei identische Namen sind beide geblieben
Prüfen Sie zuerst die Leerzeichen am Ende – schalten Sie „umgebende Leerzeichen ignorieren“ ein. Ist es das nicht, sind die beiden verschiedene Bytefolgen, die gleich dargestellt werden; dafür gibt es die Unicode-Normalisierung, und dieses Werkzeug vergleicht bereits nach dem Normalisieren, sodass ein auf dem Mac getipptes „Müller“ zu einem unter Windows getippten passt.
Bleibt die ursprüngliche Reihenfolge erhalten?
Ja. Das erste Vorkommen jedes Werts bleibt, wo es war; die späteren fallen weg. Nichts wird sortiert, es sei denn, Sie geben die Ausgabe an das Sortierwerkzeug weiter.
Kann ich nach einer Spalte einer CSV deduplizieren?
Hier nicht – dieses Werkzeug vergleicht ganze Zeilen. Der CSV-Deduplizierer tut es nach Schlüsselspalte und lässt den Rest der Zeile unangetastet, was Sie bei tabellarischen Daten wollen.
Eingabe aus
Zeilen sortieren und mischen
Line Sorter & Shuffler
Sortiert Zeilen alphabetisch, numerisch, nach Länge oder zufällig, mit Optionen für Umkehrung und Groß-/Kleinschreibung.
Leerraum bereinigen
Whitespace Cleaner
Entfernt nachgestellte Leerzeichen, fasst Leerzeichenfolgen zusammen, wandelt Tabs um und löscht leere Zeilen.
Listen formatieren
List Formatter
Macht aus Zeilen eine Kommaliste, eine SQL-IN-Klausel mit Anführungszeichen, ein JSON-Array oder eine Aufzählung – und zurück.
Muster extrahieren
Pattern Extractor
Zieht jede E-Mail-Adresse, URL, Zahl, jedes Datum oder jeden Treffer eines eigenen regulären Ausdrucks aus einem Textblock in eine Liste.
Danach
Diese Tools nehmen an, was dieses hier erzeugt, das Ergebnis kann also direkt weiter.
CSV-Duplikate entfernen
CSV Deduplicator
Entfernt doppelte Zeilen anhand aller oder ausgewählter Schlüsselspalten und behält die erste, letzte oder vollständigste Zeile.
Listen formatieren
List Formatter
Macht aus Zeilen eine Kommaliste, eine SQL-IN-Klausel mit Anführungszeichen, ein JSON-Array oder eine Aufzählung – und zurück.
Zeilen sortieren und mischen
Line Sorter & Shuffler
Sortiert Zeilen alphabetisch, numerisch, nach Länge oder zufällig, mit Optionen für Umkehrung und Groß-/Kleinschreibung.
Worthäufigkeit
Word Frequency
Zählt, wie oft jedes Wort oder N-Gramm vorkommt, mit einer auf Koreanisch abgestimmten Tokenisierung und Stoppwortliste.
Suchen und Ersetzen
Find & Replace
Ersetzt Text wörtlich, als ganzes Wort oder per regulärem Ausdruck, mit Fanggruppen und Vorschau jedes Treffers.
Markdown-Editor
Markdown Editor
Bearbeitet Markdown mit Live-Vorschau und exportiert das gerenderte HTML, mit GFM-Tabellen und Aufgabenlisten.