Tìm Dòng Trùng Lặp miễn phí
Tìm, đếm hoặc xóa các dòng trùng lặp khỏi danh sách. Lý tưởng để dọn sạch danh sách email, nhật ký kiểm tra hoặc tìm các mục lặp lại trong kho dữ liệu.
Công cụ này tìm các dòng và hàng CSV trùng lặp trong văn bản, không phải tệp hay ảnh trùng lặp. Để kiểm tra hai tệp có giống hệt nhau không, hãy dùng công cụ kiểm tra mã băm tệp
Tùy chọn
Kết quả sẽ hiện ở đây…Công dụng phổ biến
- Loại bỏ email trùng lặpLàm sạch các danh sách email trước khi nhập vào Mailchimp, SendGrid hoặc các nhà cung cấp dịch vụ khác.
- Làm sạch dữ liệu trước khi phân tíchTìm các hàng trùng lặp trong các bộ export CSV hoặc bản sao lưu cơ sở dữ liệu trước khi làm phân tích.
- Xác định các mục lặp lại trong danh sách cần làmPhát hiện các tác vụ trùng lặp trong danh sách cần làm dài hoặc trình theo dõi dự án.
- Đếm tần suất từDán một danh sách các từ/từ khóa để xem từ nào xuất hiện thường xuyên nhất.
- Tìm thông báo cam kết lặp lạiDán nhật ký git để tìm các mô hình thông báo cam kết thường xuyên của tác giả.
Cách hoạt động
Phát hiện trùng lặp chạy hoàn toàn trong trình duyệt bằng JavaScript Map tự viết đếm mọi dòng trong một lượt — không thư viện, không máy chủ, không tải lên. Kết quả cập nhật trực tiếp khi bạn gõ.
- 1Tách dòng và chuẩn hóaCông cụ tách văn bản theo ký tự xuống dòng (xử lý cả \r\n và \n), rồi tùy chọn cắt khoảng trắng đầu/cuối mỗi dòng và bỏ dòng trống — theo các ô chọn bạn đặt trước khi xử lý.
- 2Đếm bằng Map trong một lượtMỗi dòng được đưa vào JavaScript Map với khóa là dạng đã chuẩn hóa (chữ thường khi bật bỏ qua hoa/thường). Map tích lũy số lần xuất hiện cho mỗi khóa duy nhất trong một lượt tuyến tính, giữ lại văn bản gốc gặp đầu tiên.
- 3Tạo đầu ra theo chế độTùy vào thẻ đã chọn — Đếm, Duy nhất, Chỉ trùng lặp hoặc Tô sáng — các giá trị của Map được lọc hoặc sắp xếp (theo tần suất, theo chữ cái hoặc theo thứ tự xuất hiện đầu tiên) và định dạng thành văn bản thuần hoặc chế độ xem tô màu nội tuyến.
- 4Sao chép hoặc tải kết quảVăn bản đã xử lý có thể được sao chép vào bộ nhớ tạm, xuất thành tệp .txt, hoặc (ở chế độ Đếm) sao chép dạng CSV với mỗi hàng một giá trị và số lần xuất hiện — sẵn sàng để dán vào bảng tính.
Công cụ liên quan
Tìm tệp và ảnh trùng lặp
Tìm tệp trùng lặp và ảnh tương tự trong một thư mục: bản sao y hệt theo nội dung, cùng với các phiên bản đã đổi kích thước hoặc lưu lại của cùng một bức ảnh. Giữ bản tốt nhất và chuyển phần còn lại sang một bên. Chạy trong trình duyệt; không có gì bị tải lên.
Bộ chọn emoji
Tìm và sao chép emoji chỉ với một lần nhấp. Duyệt theo danh mục, ghép một chuỗi nhiều emoji, chọn tông màu da và tìm những emoji đã dùng gần đây.
Sắp Xếp Văn Bản
Sắp xếp các dòng văn bản theo bảng chữ cái, theo độ dài, theo số hoặc ngẫu nhiên. Xóa trùng lặp, cắt bỏ khoảng trắng và xáo trộn danh sách.