Công cụ
Xóa đoạn văn trùng lặp, giữ thứ tự đầu tiên
Loại đoạn văn trùng được ngăn bằng dòng trống. Tùy chọn bỏ qua hoa thường và cắt khoảng trắng hai đầu đoạn; giữ thứ tự, tải TXT tại thiết bị.
Dán các đoạn ngăn nhau bằng một hoặc nhiều dòng trống rồi bấm Xử lý văn bản. Đoạn xuất hiện đầu được giữ lại, các đoạn trùng sau đó bị bỏ. Ví dụ A, B, A thành A, B. Đây là so khớp văn bản, không phải AI nhận diện hai câu có cùng ý nghĩa.
Quyền riêng tư: xử lý ngay trên thiết bị; không tải nội dung lên máy chủ.
Đang tải công cụ…
Thêm biểu tượng để mở trực tiếp xóa đoạn văn trùng lặp, giữ thứ tự đầu tiên. Không lưu nội dung bạn nhập.
Cách sử dụng
- Dán nội dung với dòng trống phân cách các đoạn. Dòng xuống đơn bên trong một đoạn vẫn được giữ.
- Chọn có bỏ qua hoa/thường hoặc cắt khoảng trắng đầu/cuối mỗi đoạn hay không. Mặc định tắt cả hai.
- Xử lý, kiểm tra số đoạn giữ/xóa rồi sao chép hoặc tải TXT.
Khác với xóa dòng trùng lặp
Một đoạn có thể gồm nhiều dòng. Công cụ này so sánh cả đoạn; không tự xóa dòng giống nhau nằm trong hai đoạn khác nhau. Ranh giới là dòng trống hoặc dòng chỉ có dấu cách/tab. Kết quả nối các đoạn bằng hai dấu LF, nên số dòng trống phân cách có thể thay đổi.
So sánh tiếng Việt và giữ bản đầu
Dùng Unicode NFC cho khóa so sánh, không bỏ dấu tiếng Việt. “ma” và “má” vẫn khác nhau. Khi bỏ qua hoa/thường, giữ cách viết của đoạn đầu. Khi bật cắt hai đầu đoạn, phần khoảng trắng được cắt cả ở kết quả; khoảng trắng giữa câu và các dòng bên trong không bị gộp.
Không phải kiểm tra đạo văn hoặc trùng ý
Hai đoạn chỉ khác từ đồng nghĩa, cách viết lại hoặc dấu câu vẫn được coi là khác. Không so sánh nội dung với Internet, không xác định bản quyền và không tự chỉnh sửa ý nghĩa. Hãy xem lại trước khi thay bản gốc.
Quyền riêng tư và giới hạn
Trang web xử lý trên thiết bị, không gửi văn bản, mã nguồn hoặc tên tệp lên máy chủ. Không tự lưu nội dung; tải lại hoặc rời trang sẽ xóa trạng thái. Tối đa 100.000 đơn vị mã UTF-16 mỗi lần. Dán vượt giới hạn sẽ bị từ chối, giữ đầu vào cũ để bạn chia nhỏ. Nút tải chỉ yêu cầu trình duyệt lưu, không xác nhận tệp đã nằm trên đĩa.
Dùng với AI qua MCP
MCP deduplicate_paragraphs hỗ trợ cùng quy tắc, tối đa 10.000 đơn vị mã UTF-16. MCP xử lý trên máy chủ và trả văn bản kết quả; không gửi dữ liệu riêng tư.
Công cụ liên quan
Dùng công cụ này với AI
Ứng dụng AI có hỗ trợ MCP có thể gọi deduplicate_paragraphs để dùng cùng công thức của trang này. Qua MCP, tham số được gửi đến máy chủ để tính; thao tác trên trang web vẫn xử lý trong trình duyệt.
Câu hỏi thường gặp
Có xóa các đoạn giống ý nhưng khác câu chữ không?
Không. Chỉ loại đoạn có khóa so sánh giống nhau theo tùy chọn, không phân tích ý nghĩa.
Có giữ nguyên mọi dòng trống không?
Không. Các đoạn giữ lại được nối bằng hai dấu xuống dòng. Đoạn chỉ có khoảng trắng không tạo nội dung đầu ra.
Kết quả chỉ để tra cứu. Vui lòng đối chiếu thông báo chính thức của đơn vị công bố.