按行去重

按行去重工具

把每一行当作一个独立项目,可删除额外出现、查找并统计重复行,或只保留出现一次的行。默认保持被保留行的原始顺序。

输入
显示
保留
清理
排序方式
本地去重 — 处理的文本与文件内容不会上传
输入

粘贴/输入不超过 300 KB · 本地文本文件单个及每批不超过 10 MB · CSV 按纯文本处理

去重结果

按行去重

一次按行解析,完成删除、查找和计数

更适合行级文本

当用户搜索按行去重、删除重复行、行去重时,需求通常不是文章清洗,而是把每一行当成一个可比较项目。

保持顺序并选择首次或末次

默认保留首次出现及其位置;改为保留末次时,会保留最后一次匹配到的拼写或格式及其位置。只有主动开启排序才会改变顺序。

切换去重结果、重复项和仅出现一次

“结果”删除额外出现,“重复项”列出至少出现两次的行,“仅出现一次”只保留恰好出现一次的行;带次数复制会附上每行出现次数。

按行删除、查找或统计重复内容

1

一行一个项目

换行符会作为默认分隔符,适合大多数中文去重场景。

2

选择需要的结果视图

用“结果”删除额外出现,用“重复项”查找重复行,或用“仅出现一次”筛出只出现一次的行。

3

核对统计与保留方式

查看总数、不同项、重复项种类、仅出现一次和已删除数量,再选择保留首次或末次后复制或下载。

按行去重常见问题

可以只查找并统计重复行吗?

可以。点击“查找重复行”预设或切换到“重复项”,预览会显示次数,也可以复制带次数的报告。

会改变原始顺序吗?

默认不会。除非主动开启排序,输出会按所保留行在原文中的位置排列;“保留首次”与“保留末次”决定使用哪一次。

空行怎么处理?

如果想删除空行,可以直接勾选“移除空行”。

按行去重工具 - 在线删除重复行