Pređi na glavni sadržaj
LibraTool logoLibraTool

Pronalazač duplikata linija — besplatno

Pronađite, prebrojite ili uklonite duplikate linija iz liste. Odlično za čišćenje lista e-mailova, revizijskih dnevnika ili pronalaženje ponovljenih stavki u ispisima podataka.

Radi van mreže kada se učita

Ovaj alat pronalazi duplirane redove i CSV redove u tekstu, a ne duplirane fajlove ili fotografije. Da biste proverili da li su dva fajla identična, koristite proveru heša fajla

Opcije
Ulazni format
Sortiraj
Format broja
Broj pojavljivanja
Ovde će se pojaviti izlaz…

Uobičajene upotrebe

  • Udvostruči liste emailaOčisti liste emaila pre uvoza u Mailchimp, SendGrid ili druge ESPs.
  • Očisti podatke pre analizePronađi duble redove u CSV izvozima ili baza dnevnika pre nego što radiš analizu.
  • Identifikuj ponovljene stvari na listama obavezaPrepozna duble zadatke u dugim listama obaveza ili pratiljima projekta.
  • Brojaj učestalost rečiZalepi listu reči/ključnih reči da vidiš koja se pojavljuju najčešće.
  • Pronađi ponovljene poruke za komitovanjeZalepi git log da pronađeš uobičajene šeme poruka za komitovanje autora.

Kako funkcioniše

Otkrivanje duplikata se u potpunosti izvršava u vašem pregledaču koristeći ručno napisan JavaScript Map koji broji svaku liniju u jednom prolazu — bez biblioteke, bez servera, bez otpremanja. Rezultati se ažuriraju uživo dok kucate.

  1. 1
    Deljenje linija i normalizacija
    Alatka deli vaš tekst na nove redove (rukujući i sa \r\n i \n), zatim opciono uklanja vodeće/prateće razmake sa svake linije i izbacuje prazne linije — kontrolisano poljima za potvrdu koje podesite pre obrade.
  2. 2
    Brojanje pomoću Map u jednom prolazu
    Svaka linija se ubacuje u JavaScript Map ključan njenim normalizovanim oblikom (malim slovima kada je uključeno ignorisanje velikih/malih slova). Map akumulira broj pojavljivanja po jedinstvenom ključu u jednom linearnom prolazu, čuvajući prvi viđeni originalni tekst.
  3. 3
    Generisanje izlaza specifičnog za režim
    U zavisnosti od izabrane kartice — Broj, Jedinstveno, Samo duplikati, ili Istaknuto — vrednosti Map-a se filtriraju ili sortiraju (po učestalosti, po abecedi, ili redosledu prvog pojavljivanja) i formatiraju kao običan tekst ili inline prikaz obojen po kodu.
  4. 4
    Kopirajte ili preuzmite rezultat
    Obrađen tekst se može kopirati u vašu privremenu memoriju, izvesti kao .txt fajl, ili (u režimu Broj) kopirati kao CSV sa jednim redom po vrednosti i njenim brojem pojavljivanja — spreman za lepljenje u tabelu.

Slične alatke

Česta pitanja