Tool Detail
文本去重
批量去除重复行、空行和首尾空格,支持忽略大小写与排序。
使用说明
这个工具能做什么
批量清理文本列表:去掉重复行、删除空行、去掉行首尾多余空格,还能按需排序。粘贴一列名单、关键词、URL、编号后,一次得到干净的列表。
怎么用
- 把文本粘到左侧,每行一条
- 勾选需要的选项:去除重复行、忽略大小写、删除空行、去除行首尾空格
- 需要排序时在「排序」里选升序或降序
- 右侧实时显示结果,下方显示「原始多少行 → 结果多少行,去除多少行」
- 复制结果或生成分享链接
常见问题
去重是按整行比较吗?
是。完全相同的两行会被合并为一条,保留第一次出现的那条。不是按行里的某个字段去重——如果要按某一列去重,需要先处理成每行只放一个值。
"忽略大小写"是什么意思?
勾选后 Apple、apple、APPLE 会被视为同一个值,保留最先出现的那条(保留它原本的大小写)。适合清理英文标签、邮箱、URL 的去重。
会改变行的顺序吗?
默认不会,保持原始顺序(只保留首次出现的位置)。只有你主动选了升序/降序才会重排。中文排序按拼音规则(localeCompare)。
能处理多少行?
常规几千到几万行没问题,取决于浏览器性能。超大文本(几十万行)建议用命令行工具(sort -u、awk '!a[$0]++')。
数据和文件会上传吗?
不会,全部在本地处理。名单、手机号这类内容不用担心外泄。
能只删除重复但保留空行吗?
可以。把「删除空行」取消勾选即可——去重只针对非空的重复内容,空行会按你的设置保留或删除。