Vyhľadávač duplicitných riadkov zadarmo
Nájdite, počítajte alebo odstraňujte duplicitné riadky zo zoznamu. Ideálne na čistenie zoznamov e-mailov, auditných logov alebo hľadanie opakujúcich sa záznamov v dátových výpisoch.
Tento nástroj hľadá duplicitné riadky a riadky CSV v texte, nie duplicitné súbory ani fotky. Ak chcete zistiť, či sú dva súbory rovnaké, použite kontrolu hashu súboru
Možnosti
Tu sa zobrazí výstup…Bežné použitia
- Deduplikujte zoznamy e-mailovVyčistite zoznamy e-mailov pred importom do služby Mailchimp, SendGrid alebo iných ESP.
- Vyčistite údaje pred analýzouVyhľadajte duplicitné riadky v CSV exportoch alebo databázach pred analytickou prácou.
- Identifikujte opakovania v zoznamoch úlohSpotrenite duplicitné úlohy v dlhých zoznamoch úloh alebo sledovacích nástrojoch projektu.
- Počítajte frekvenciu slovVložte zoznam slov/kľúčových slov, aby ste videli, ktoré sa objavujú najčastejšie.
- Vyhľadajte opakované správy o zmenáchVložte git protokol, aby ste našli typické vzory správ o zmenách autorov.
Ako to funguje
Zisťovanie duplicít beží výhradne vo vašom prehliadači pomocou ručne napísanej JavaScript Map, ktorá spočíta každý riadok v jednom prechode — bez knižnice, bez servera, bez nahrávania. Výsledky sa aktualizujú živo počas písania.
- 1Delenie na riadky a normalizáciaNástroj rozdelí váš text podľa nových riadkov (spracúva aj \r\n aj \n), potom voliteľne orezáva úvodné/koncové biele znaky z každého riadku a vynecháva prázdne riadky — riadené zaškrtávacími políčkami, ktoré nastavíte pred spracovaním.
- 2Počítanie v jednom prechode pomocou MapKaždý riadok sa vloží do JavaScript Map indexovanej svojím normalizovaným tvarom (malými písmenami, ak je zapnuté ignorovanie veľkosti písmen). Map v jednom lineárnom prechode akumuluje počet výskytov pre každý jedinečný kľúč, pričom zachováva prvý zaznamenaný pôvodný text.
- 3Generovanie výstupu podľa režimuV závislosti od zvolenej karty — Počet, Jedinečné, Iba duplicity alebo Zvýraznené — sa hodnoty Map filtrujú alebo zoraďujú (podľa frekvencie, abecedne alebo podľa poradia prvého výskytu) a formátujú ako obyčajný text alebo inline farebne kódovaný pohľad.
- 4Skopírujte alebo stiahnite výsledokSpracovaný text sa dá skopírovať do schránky, exportovať ako súbor .txt, alebo (v režime Počet) skopírovať ako CSV s jedným riadkom na hodnotu a počet jej výskytov — pripravené na vloženie do tabuľkového procesora.
Súvisiace nástroje
Hľadač duplicitných súborov a fotiek
Nájdite duplicitné súbory a podobné fotky v priečinku: presné kópie podľa obsahu, ako aj zmenšené alebo znova uložené verzie tej istej fotky. Ponechajte najlepšiu kópiu a zvyšok odložte bokom. Beží vo vašom prehliadači; nič sa nenahráva.
Výber emoji
Vyhľadávajte a kopírujte emoji jedným kliknutím. Prezerajte podľa kategórie, zostavte reťazec z viacerých emoji, vyberte odtieň pleti a nájdite nedávno použité.
Triedič textu
Trieďte riadky textu abecedne, podľa dĺžky, číselne alebo náhodne. Odstraňujte duplicity, orezávajte medzery a miešajte zoznamy.