文本与列表去重

在线文本去重工具

适合需要自己确定项目边界、匹配规则、保留方式和结果视图的文本或单个列表。可选择按行、按词或按分隔符处理,全部在浏览器本地完成。

输入
显示
保留
清理
排序方式
本地去重 — 处理的文本与文件内容不会上传
输入

粘贴/输入不超过 300 KB · 本地文本文件单个及每批不超过 10 MB · CSV 按纯文本处理

去重结果

文本与列表去重

先定义规则,再得到可解释的结果

选择什么算一个项目

默认按行处理,也可以切换为 Unicode 词语,或使用逗号、分号、空格、Tab、换行和字面自定义分隔符拆分单个列表。

选择如何匹配以及保留哪一次

可以按需忽略大小写、去掉首尾空格或空项目,并选择保留首次或末次匹配到的原始值;未开启的规则不会自动应用。

选择去重、重复项或仅出现一次

“结果”每种匹配值保留一个,“重复项”只显示至少出现两次的值,“仅出现一次”只返回恰好出现一次的值。

适合规则尚未确定的文本与列表流程

1

粘贴文本或一个列表

当输入需要决定按行、按词还是按分隔符拆分时,从这个通用入口开始。

2

设置拆分与匹配规则

选择输入模式,再按需要调整大小写、空格、保留方式和排序,不必为了不同选项切换页面。

3

查看并复制需要的视图

核对统计后,复制去重结果、重复项、仅出现一次的值或带次数的报告。

文本与列表去重常见问题

什么时候使用这个通用页面?

当你还需要选择项目边界或匹配规则时使用本页;如果内容已经严格一行一个项目,按行去重页面会提供更聚焦的删除、查找和计数说明。

数据会上传吗?

不会。文本与列表去重在浏览器本地完成,输入和输出区域也会对分析工具做遮罩。

去重工作流

继续处理相邻的去重任务

每个入口都使用本地处理引擎,但默认输入规则、示例和说明只服务对应任务。

在线文本去重工具 - 支持列表与自定义规则