Hoe verwyder ek dubbele reëls uit 'n lys?

Plak een item per reël en maak die Behou unieke-oortjie oop. Dit behou die eerste voorkoms van elke reël, en jy kan die resultaat kopieer of as .txt aflaai.

Kan dit hoofletters en ekstra spasies ignoreer?

Ja. Skakel Ignoreer hoofletters, Knip witruimte en Ignoreer leë reëls aan sodat reëls wat net in hoofletters of spasiëring verskil as dieselfde tel.

Kan ek 'n lêer laai in plaas van teks te plak?

Ja, 'n gewone tekslêer soos .txt, .csv, .log of .md. Dit word in jou blaaier gelees, nie opgelaai nie.

Is dit regtig gratis?

Ja. Elke instrument is gratis om te gebruik, sonder 'n rekening en sonder 'n kredietkaart. Die werk loop op jou toestel eerder as op ons bedieners, en dit is wat dit gratis hou om te loop.

Ja. Dit werk in huidige mobiele blaaiers op iOS en Android, sonder om iets te installeer.

🔍

Gratis Duplikaatlynsoeker

Soek, tel of verwyder duplikaatlyne uit 'n lys. Ideaal om e-poslyste, ouditlogboeke op te ruim of om herhaalde inskrywings in datastortings te vind.

Loop in jou blaaierGeen aanmelding, geen opspringers nieGeen aanmelding benodigGratis vir altyd

Werk vanlyn sodra gelaai

Hierdie nutsding vind dubbele reëls en CSV-rye in teks, nie dubbele lêers of foto's nie. Om te kyk of twee lêers identies is, gebruik die lêer-hash-kontroleerder

Opsies

Ignoreer hooflettersSnoei witspasieIgnoreer leë reëls

Invoerformaat

Sorteer

Tellingformaat

Invoer (een item per reël)

Voorkomstellings

Uitvoer verskyn hier…

Algemene gebruike

Verwyder duplikate uit e-pos-lysteMaak e-pos-lyste skoon voordat jy dit in Mailchimp, SendGrid of ander ESP's invoer.
Maak data skoon voor ontledingVind duplikaatrye in CSV-uitvoere of databasisstortings voor ontledingswerk.
Identifiseer herhalings in to-do-lysteKry duplikaattake in lang to-do-lyste of projekvolgers.
Tel woordfrekwensiePlak 'n lys woorde/sleutelwoorde om te sien watter die meeste voorkom.
Vind herhaalde commit-boodskappePlak 'n git log om outeurs se gewoonte-commit-boodskappatrone te vind.

Hoe dit werk

Duplikaat-bespeuring loop heeltemal in jou blaaier met 'n handgeskrewe JavaScript-Map wat elke lyn in een deurgang tel — geen biblioteek, geen bediener, geen oplaai nie. Resultate werk lewendig by soos jy tik.

1
Lynverdeling en normalisering
Die nutsprogram verdeel jou teks op nuwe lyne (hanteer beide \r\n en \n), knip dan opsioneel voorste/agterste spasiëring van elke lyn af en laat val leë lyne — beheer deur die merkblokkies wat jy voor verwerking stel.
2
Enkele-deurgang-Map-telling
Elke lyn word in 'n JavaScript-Map gevoer, gesleutel deur sy genormaliseerde vorm (kleinletter as ignoreer-kas aan is). Die Map hoop 'n voorkoms-telling per unieke sleutel op in een liniêre deurgang, en behou die eerste-gesiene oorspronklike teks.
3
Modus-spesifieke uitsetgenerering
Afhangend van die gekose oortjie — Telling, Uniek, Slegs Duplikate, of Uitgelig — word die Map se waardes gefiltreer of gesorteer (volgens frekwensie, alfabeties, of eerste-voorkoms-volgorde) en as gewone teks of 'n inlyn kleur-gekodeerde aansig geformateer.
4
Kopieer of laai die resultaat af
Die verwerkte teks kan na jou knipbord gekopieer word, as 'n .txt-lêer uitgevoer word, of (in Telling-modus) as CSV gekopieer word met een ry per waarde en sy voorkoms-telling — gereed om in 'n sigblad te plak.

Verwante gereedskap

🧹

Duplikaatlêer- en fotovinder

Vind duplikaatlêers en soortgelyke foto’s in ’n vouer: presiese kopieë volgens inhoud, plus verkleinde of herstoorde weergawes van dieselfde foto. Hou die beste kopie en skuif die res eenkant toe. Loop in jou blaaier; niks word opgelaai nie.

Probeer ditLêers bly plaaslik

😀

Emoji-kieser

Soek en kopieer emoji met een klik. Blaai volgens kategorie, bou 'n string van verskeie emoji, kies 'n velkleur en vind die wat jy onlangs gebruik het.

Probeer dit

🔤

Teks sorteerder

Sorteer teksreëls alfabeties, volgens lengte, numeries of ewekansig. Verwyder duplikate, sny witspasie af en skuif lyste.