Paano ko aalisin ang mga dobleng linya sa isang listahan?

Mag-paste ng isang item bawat linya at buksan ang tab na Keep unique. Pinapanatili nito ang unang paglitaw ng bawat linya, at puwede mong kopyahin ang resulta o i-download bilang .txt.

Kaya ba nitong hindi pansinin ang malalaking titik at sobrang espasyo?

Oo. I-on ang Ignore case, Trim whitespace at Ignore empty lines para ituring na pareho ang mga linyang magkaiba lang sa laki ng titik o espasyo.

Puwede ba akong mag-load ng file sa halip na mag-paste ng teksto?

Oo, isang payak na text file tulad ng .txt, .csv, .log o .md. Binabasa ito sa iyong browser, hindi ina-upload.

Oo. Libre ang bawat tool, walang account at walang credit card. Ang trabaho ay tumatakbo sa iyong device sa halip na sa aming mga server, kaya ito nananatiling libre.

Gumagana ba ito sa mobile?

Oo. Gumagana ito sa mga kasalukuyang mobile browser sa iOS at Android, nang walang ini-install.

🔍

Libreng Tagahanap ng Mga Paulit-ulit na Linya

Hanapin, bilangin, o alisin ang mga duplicate na linya mula sa isang listahan. Magaling para sa paglilinis ng mga listahan ng email, audit log, o paghahanap ng mga paulit-ulit na entry sa mga data dump.

Tumatakbo sa iyong browserWalang pag-sign up, walang pop-upHindi kailangan ng loginLibre magpakailanman

Gumagana offline kapag na-load na

Naghahanap ang tool na ito ng mga duplicate na linya at CSV row sa text, hindi ng mga duplicate na file o larawan. Para tingnan kung magkapareho ang dalawang file, gamitin ang file hash checker

Mga opsyon

Huwag pansinin ang caseAlisin ang whitespaceHuwag pansinin ang mga blangkong linya

Format ng input

I-sort

Format ng bilang

Input (isang aytem bawat linya)

Bilang ng pagkakataon

Lalabas dito ang output…

Mga karaniwang gamit

I-dedupe ang mga Listahan ng EmailI-linis ang mga listahan ng email bago ang pag-import sa Mailchimp, SendGrid, o iba pang mga ESP.
I-linis ang Data Bago ang PagsusuriMaghanap ng mga duplicate rows sa CSV exports o database dumps bago ang gawain ng analytics.
Tukuyin ang mga Ulit sa Mga Listahan ng GawainMakita ang mga duplicate na gawain sa mahabang mga listahan ng gawain o mga sumusunod sa proyekto.
Bilangin ang Dalas ng SalitaIpasok ang isang listahan ng mga salita/keyword upang makita kung alin ang lumalabas nang madalas.
Maghanap ng Mga Ulit na Mensahe ng CommitIpasok ang isang git log upang mahanap ang mga likas na pattern ng mensahe ng commit ng mga may-akda.

Paano ito Gumagana

Buong tumatakbo sa iyong browser ang pagtukoy ng duplicate gamit ang hand-written na JavaScript Map na binibilang ang bawat linya sa iisang pagdaan — walang library, walang server, walang upload. Live na nag-a-update ang mga resulta habang nagta-type ka.

1
Paghahati ng linya at normalization
Hinahati ng tool ang text mo sa mga newline (hinahawakan ang \r\n at \n), pagkatapos ay opsyonal na tinatanggal ang whitespace sa simula/dulo ng bawat linya at inaalis ang mga walang-lamang linya — kinokontrol ng mga checkbox na itinakda mo bago iproseso.
2
Pagbilang gamit ang Map sa iisang pagdaan
Ipinapasok ang bawat linya sa isang JavaScript Map na ang key ay ang normalized na anyo nito (lowercase kapag naka-on ang ignore-case). Nag-iipon ang Map ng bilang ng paglitaw bawat natatanging key sa iisang linear na pagdaan, pinananatili ang unang nakitang orihinal na text.
3
Paggawa ng output ayon sa mode
Depende sa napiling tab — Count, Unique, Duplicates Only, o Highlighted — fina-filter o sino-sort ang mga halaga ng Map (ayon sa dalas, alpabetiko, o pagkakasunod ng unang paglitaw) at fino-format bilang plain text o inline na view na may color code.
4
Kopyahin o i-download ang resulta
Puwedeng kopyahin sa clipboard ang naprosesong text, i-export bilang .txt file, o (sa Count mode) kopyahin bilang CSV na may isang row bawat halaga at ang bilang ng paglitaw nito — handang i-paste sa spreadsheet.

Mga Kaugnay na Tool

🧹

Duplicate File & Photo Finder

Hanapin ang mga duplicate na file at magkakahawig na litrato sa isang folder: eksaktong kopya ayon sa nilalaman, pati ang na-resize o muling na-save na bersyon ng iisang litrato. Panatilihin ang pinakamagandang kopya at ilipat sa tabi ang iba. Tumatakbo sa iyong browser; walang ina-upload.

SubukanLokal ang mga file

😀

Emoji Picker

Maghanap at kopyahin ang emoji sa isang click. Mag-browse ayon sa kategorya, bumuo ng hanay ng ilang emoji, pumili ng skin tone at hanapin ang mga ginamit mo kamakailan.

Subukan

🔤

Sorter ng Teksto

Ayusin ang mga linya ng teksto nang alphabetically, ayon sa haba, numerically, o randomly. Alisin ang mga duplicate, putulin ang whitespace, at i-shuffle ang mga listahan.