So entfernen Sie Duplikate
- Liste einfügen oder eine Text- bzw. CSV-Datei ablegen – ein Eintrag pro Zeile.
- Modus wählen: Duplikate entfernen, nur einmalige Zeilen oder nur doppelte Zeilen.
- Optionen setzen: erstes oder letztes Vorkommen, Groß-/Kleinschreibung, Leerzeichen, Sortierung.
- Ergebnis kopieren oder herunterladen. Die entfernten Zeilen sehen Sie separat.
Die drei Modi
| Modus | Ergebnis bei „Apfel, Birne, Apfel, Kiwi“ | Typischer Einsatz |
|---|---|---|
| Duplikate entfernen (je eine behalten) | Apfel, Birne, Kiwi | saubere Liste ohne Wiederholungen |
| Nur Zeilen, die einmal vorkommen | Birne, Kiwi | Einträge finden, die nirgends doppelt sind |
| Nur doppelte Zeilen | Apfel | prüfen, was mehrfach vorkommt |
Wann zählen zwei Zeilen als gleich?
Standardmäßig ignoriert das Tool Unterschiede in der Groß-/Kleinschreibung: „Berlin“ und „berlin“ gelten als Duplikat. Für Codes, Passwörter oder Artikelnummern, bei denen die Schreibweise zählt, aktivieren Sie „Groß-/Kleinschreibung beachten“. Mit „Leerzeichen ignorieren“ werden Zeilen wie „ Kiwi“ und „Kiwi “ ebenfalls zusammengeführt – ein häufiges Problem bei Daten aus Excel oder Formularen. Behalten Sie wahlweise das erste Vorkommen, damit die ursprüngliche Reihenfolge erhalten bleibt, oder das letzte, wenn spätere Einträge aktueller sind.
Typische Anwendungen
- Newsletter- und Kontaktlisten: doppelte E-Mail-Adressen vor dem Import entfernen.
- SEO: Keyword-Listen aus mehreren Tools zusammenführen und bereinigen.
- Onlinehandel: doppelte Artikelnummern, EAN-Codes oder Bestellnummern finden.
- Datenpflege: eine Spalte aus Excel kopieren, Duplikate entfernen und zurück einfügen.
- Protokolle: wiederkehrende Fehlermeldungen in Logdateien auf einzelne Einträge reduzieren.
Statistik und entfernte Zeilen
Nach jeder Bereinigung zeigt das Tool, wie viele Zeilen vorher und nachher vorhanden waren, wie viele entfernt wurden und wie viele Werte mehrfach vorkamen. Die entfernten Zeilen stehen in einem eigenen Feld. So können Sie kontrollieren, ob wirklich nur echte Duplikate gelöscht wurden – wichtig, bevor Sie eine Kundenliste weiterverwenden.
Excel oder Online-Tool?
Excel bietet unter „Daten → Duplikate entfernen“ eine ähnliche Funktion, sie verändert aber direkt Ihre Tabelle und zeigt nicht, welche Zeilen gelöscht wurden. Für schnelle Listen, Textdateien oder Daten aus E-Mails ist das Online-Tool oft bequemer: einfügen, prüfen, kopieren – ohne Formeln und ohne Risiko für die Originaldatei.
Tipp: Ergebnis gleich sortieren
Mit „Ergebnis A–Z sortieren“ erhalten Sie eine bereinigte und alphabetisch geordnete Liste in einem Schritt – ideal für Stichwortverzeichnisse, Glossare oder Auswahllisten in Formularen.
Datenschutz
Gerade Kontaktlisten enthalten personenbezogene Daten. Die Verarbeitung erfolgt deshalb ausschließlich in Ihrem Browser; es werden keine Daten an einen Server übertragen oder gespeichert.
Beispiel: zwei Verteiler zusammenführen
Sie möchten zwei Newsletter-Listen zu einer zusammenlegen, ohne dass Kontakte doppelt angeschrieben werden. Kopieren Sie beide Listen untereinander in das Eingabefeld. Lassen Sie „Groß-/Kleinschreibung beachten“ deaktiviert, denn „Anna@Firma.de“ und „anna@firma.de“ sind dieselbe Adresse. Mit „Erstes Vorkommen“ bleibt die Reihenfolge der ersten Liste erhalten. Wählen Sie den Modus „Nur doppelte Zeilen“, wenn Sie stattdessen wissen möchten, welche Kontakte in beiden Listen stehen – zum Beispiel, um gemeinsame Kunden zu finden.
Zeilen mit unsichtbaren Unterschieden
Manchmal sehen zwei Zeilen gleich aus, werden aber nicht als Duplikat erkannt. Ursache sind meist unsichtbare Zeichen: ein geschütztes Leerzeichen aus Word, ein Tabulator oder ein Zeichen mit Nullbreite. Bereinigen Sie die Liste in diesem Fall zuerst mit unserem Tool „Leerzeichen entfernen“ und entfernen Sie danach die Duplikate. Auch unterschiedliche Bindestriche (- und –) oder Anführungszeichen führen zu verschiedenen Zeilen.
Häufige Fragen
Wie viele Zeilen kann ich bereinigen?
Zehntausende Zeilen sind kein Problem. Die Grenze setzt nur der Arbeitsspeicher Ihres Geräts.
Bleibt die Reihenfolge erhalten?
Ja, solange Sie nicht „Ergebnis A–Z sortieren“ aktivieren.
Kann ich ganze CSV-Zeilen vergleichen?
Ja. Jede Zeile wird als Ganzes verglichen. Für eine einzelne Spalte kopieren Sie nur diese Spalte.
Was passiert mit Leerzeilen?
Sie werden wie Duplikate behandelt, es sei denn, Sie aktivieren „Leerzeilen behalten“.
Ist das Tool kostenlos?
Ja, ohne Anmeldung und ohne Limit.