Liigu põhisisu juurde

Duplikaatrea otsija tasuta

Leia, loe või eemalda loendist duplikaatread. Suurepärane meilide loendite puhastamiseks, auditi logide jaoks või andmete dumpides korduvate kirjete leidmiseks.

Töötab võrguühenduseta pärast laadimist

See tööriist leiab tekstist dubleeritud ridu ja CSV-ridu, mitte dubleeritud faile ega fotosid. Kahe faili identsuse kontrollimiseks kasuta faili räsi kontrollijat

Valikud
Sisendi vorming
Sorteeri
Arvu vorming
Esinemiste arv
Väljund kuvatakse siin…

Levinud kasutusviisid

  • Deduplitseerige meilisõnumite nimekirjadPuhastage e-posti nimekiri enne Mailchimpi, SendGridi või muude ESP-de importimist.
  • Puhastage andmed enne analüüsiLeidke dubleeritud read CSV eksportidest või andmebaaside muudatustest enne analüütika tööd.
  • Tuvastage ülesannete nimekirjades kordusiMärkige dubleeritud ülesanded pikkades ülesannete nimekirjades või projekti jälgimistööriistades.
  • Arvestage sõnade sagedustKleepige sõnade / märksõnade nimekiri, et näha, millised esinevad kõige sagedamini.
  • Leidke korduvad commit sõnumidKleepige git logi, et leida autorite tavapärased commit sõnumite mustrid.

Kuidas see töötab

Duplikaatide tuvastamine töötab täielikult sinu brauseris, kasutades käsitsi kirjutatud JavaScripti Map'i, mis loendab iga rea ühe läbimisega — teeki, servet ega üleslaadimist pole. Tulemused uuenevad reaalajas kirjutades.

  1. 1
    Ridade jagamine ja normaliseerimine
    Tööriist jagab su teksti reavahetuste alusel (käsitledes nii \r\n kui \n), seejärel valikuliselt kärbib iga rea alguse/lõpu tühikud ja jätab vahele tühjad read — kontrollitud sinu enne töötlemist seatud märkeruutudega.
  2. 2
    Üheläbimuseline Map loendamine
    Iga rida sisestatakse JavaScripti Map'i, mis on indekseeritud selle normaliseeritud vormiga (väiketähtedes, kui mittetähtsuslikkus on sisse lülitatud). Map akumuleerib esinemisloendi iga unikaalse võtme kohta ühe lineaarse läbimisega, säilitades esimest korda nähtud algteksti.
  3. 3
    Režiimipõhine väljundgenereerimine
    Olenevalt valitud vahekaardist — Loenda, Unikaalsed, Ainult duplikaadid või Esiletõstetud — Map'i väärtused filtreeritakse või sorditakse (sageduse, tähestikulise järjekorra või esmase esinemise järjekorra alusel) ja vormindatakse lihttekstina või reasisese värvikoodeeritud vaatena.
  4. 4
    Kopeeri või laadi alla tulemus
    Töödeldud teksti saab kopeerida lõikelauale, eksportida .txt failina, või (Loenda režiimis) kopeerida CSV-na, kus üks rida iga väärtuse ja selle esinemisloenduse kohta — valmis kleepimiseks hoiutabelisse.

Seotud tööriistad

Korduma kippuvad küsimused