Gå til hovedindhold

Gratis Duplikerede linjer-finder

Find, tæl eller fjern dublerede linjer fra en liste. Ideel til oprydning af e-maillister, revisionslogger eller fund af gentagne poster i datadumps.

Virker offline, når den er indlæst

Dette værktøj finder dublerede linjer og CSV-rækker i tekst, ikke dublerede filer eller fotos. For at tjekke, om to filer er identiske, kan du bruge filhash-tjekkeren

Indstillinger
Inputformat
Sortering
Format for antal
Forekomstantal
Output vises her…

Almindelige anvendelser

  • Deduplicer e-maillisterRens e-maillister før import til Mailchimp, SendGrid eller andre ESPer.
  • Rens data før analyseFind duplikerede rækker i CSV-eksporter eller databasedumps før analysearbejde.
  • Identificer gentagelser i gørende-listerSpot duplikerede opgaver i lange gørende-lister eller projektfølgere.
  • TalordfrekvensIndsæt en liste med ord/nøgleord for at se hvilke der vises hyppigst.
  • Find gentagne commit-meddelelserIndsæt en git-log for at finde forfatteres vaneprægede commit-meddelelses mønstre.

Sådan fungerer det

Dubletfinding kører udelukkende i din browser med et håndskrevet JavaScript-Map, der tæller hver linje i ét gennemløb — intet bibliotek, ingen server, ingen upload. Resultaterne opdateres live, mens du skriver.

  1. 1
    Linjeopdeling og normalisering
    Værktøjet deler din tekst ved linjeskift (håndterer både \r\n og \n) og fjerner eventuelt indledende/afsluttende blanktegn fra hver linje og udelader tomme linjer — styret af de afkrydsningsfelter, du vælger før behandlingen.
  2. 2
    Optælling med Map i ét gennemløb
    Hver linje føres ind i et JavaScript-Map med sin normaliserede form som nøgle (med små bogstaver, når ignorér store/små bogstaver er slået til). Map'et opsamler et antal forekomster pr. unik nøgle i ét lineært gennemløb og bevarer den oprindelige tekst fra første forekomst.
  3. 3
    Output afhængigt af tilstand
    Afhængigt af den valgte fane — Antal, Unikke, Kun dubletter eller Fremhævet — filtreres eller sorteres Map'ets værdier (efter hyppighed, alfabetisk eller første forekomst) og formateres som ren tekst eller en farvekodet visning.
  4. 4
    Kopiér eller download resultatet
    Den behandlede tekst kan kopieres til udklipsholderen, eksporteres som en .txt-fil eller (i tilstanden Antal) kopieres som CSV med én række pr. værdi og dens antal forekomster — klar til at indsætte i et regneark.

Relaterede værktøjer

Ofte stillede spørgsmål