Hledač duplicitních řádků zdarma
Najděte, počítejte nebo odstraňte duplicitní řádky ze seznamu. Skvělé pro čištění e-mailových seznamů, auditních protokolů nebo hledání opakujících se záznamů v datových výpisech.
Tento nástroj hledá duplicitní řádky a řádky CSV v textu, ne duplicitní soubory nebo fotky. Chcete-li zjistit, zda jsou dva soubory totožné, použijte kontrolu hashe souborů
Možnosti
Výstup se zobrazí zde…Běžná použití
- Deduplikace seznamů e-mailůVyčistěte seznamy e-mailů před importem do Mailchimpu, SendGridu nebo jiných poskytovatelů e-mailu.
- Vyčistěte data před analýzouNajděte zdvojené řádky v exportech CSV nebo výpisech databází před analytickou prací.
- Identifikujte opakování v seznamech úkolůVytvořte zdvojené úkoly v dlouhých seznamech úkolů nebo nástrojích pro sledování projektů.
- Počet frekvence slovVložte seznam slov/klíčových slov, abyste viděli, která se objevují nejčastěji.
- Najděte opakované zprávy o potvrzeníVložte git log, abyste našli zvykové vzory zpráv o potvrzení autora.
Jak to funguje
Detekce duplicit běží zcela ve vašem prohlížeči pomocí ručně napsané JavaScriptové Map, která spočítá každý řádek na jeden průchod — bez knihovny, bez serveru, bez nahrávání. Výsledky se aktualizují živě, jak píšete.
- 1Dělení řádků a normalizaceNástroj rozdělí váš text podle nových řádků (zpracovává jak \r\n, tak \n), poté volitelně ořízne úvodní/koncové bílé znaky z každého řádku a vynechá prázdné řádky — řízeno zaškrtávacími políčky, která nastavíte před zpracováním.
- 2Počítání pomocí Map na jeden průchodKaždý řádek se vloží do JavaScriptové Map indexované podle jeho normalizované formy (malá písmena, je-li zapnuto ignorování velikosti). Map v jednom lineárním průchodu akumuluje počet výskytů pro každý unikátní klíč, přičemž zachovává poprvé viděný původní text.
- 3Generování výstupu specifické pro režimV závislosti na zvolené kartě — Počet, Unikátní, Pouze duplicity nebo Zvýrazněné — se hodnoty Map filtrují nebo řadí (podle četnosti, abecedně nebo podle pořadí prvního výskytu) a formátují jako prostý text nebo vložený barevně kódovaný pohled.
- 4Kopírovat nebo stáhnout výsledekZpracovaný text lze zkopírovat do schránky, exportovat jako soubor .txt, nebo (v režimu Počet) zkopírovat jako CSV s jedním řádkem na hodnotu a počtem jejích výskytů — připraveno ke vložení do tabulkového procesoru.
Související nástroje
Hledání duplicitních souborů a fotek
Najděte duplicitní soubory a podobné fotky ve složce: přesné kopie podle obsahu i zmenšené nebo znovu uložené verze téže fotky. Ponechte nejlepší kopii a ostatní odsuňte stranou. Běží ve vašem prohlížeči; nic se nenahrává.
Výběr emoji
Hledejte a kopírujte emoji jedním kliknutím. Procházejte podle kategorií, sestavte řetězec z několika emoji, vyberte odstín pleti a najděte naposledy použitá.
Třídič textu
Třiďte řádky textu abecedně, podle délky, numericky nebo náhodně. Odstraňujte duplicity, ořezávejte mezery a zamíchejte seznamy.