按行去重
按行去重工具
把每一行当作一个独立项目,可删除额外出现、查找并统计重复行,或只保留出现一次的行。默认保持被保留行的原始顺序。
粘贴/输入不超过 300 KB · 本地文本文件单个及每批不超过 10 MB · CSV 按纯文本处理
按行去重
一次按行解析,完成删除、查找和计数
更适合行级文本
当用户搜索按行去重、删除重复行、行去重时,需求通常不是文章清洗,而是把每一行当成一个可比较项目。
保持顺序并选择首次或末次
默认保留首次出现及其位置;改为保留末次时,会保留最后一次匹配到的拼写或格式及其位置。只有主动开启排序才会改变顺序。
切换去重结果、重复项和仅出现一次
“结果”删除额外出现,“重复项”列出至少出现两次的行,“仅出现一次”只保留恰好出现一次的行;带次数复制会附上每行出现次数。
按行删除、查找或统计重复内容
一行一个项目
换行符会作为默认分隔符,适合大多数中文去重场景。
选择需要的结果视图
用“结果”删除额外出现,用“重复项”查找重复行,或用“仅出现一次”筛出只出现一次的行。
核对统计与保留方式
查看总数、不同项、重复项种类、仅出现一次和已删除数量,再选择保留首次或末次后复制或下载。
按行去重常见问题
可以只查找并统计重复行吗?
可以。点击“查找重复行”预设或切换到“重复项”,预览会显示次数,也可以复制带次数的报告。
会改变原始顺序吗?
默认不会。除非主动开启排序,输出会按所保留行在原文中的位置排列;“保留首次”与“保留末次”决定使用哪一次。
空行怎么处理?
如果想删除空行,可以直接勾选“移除空行”。
去重工作流
继续处理相邻的去重任务
每个入口都使用本地处理引擎,但默认输入规则、示例和说明只服务对应任务。
