文本去重 / 按行去重工具

文本去重在线：按行去重 / 删除重复行

文本去重（也称在线去重、按行去重、删除重复行、名单去重、text dedup）可在浏览器本地去掉文本中的重复行，默认保留首次出现的内容。适合清洗名单、日志、关键词列表。全部在本地完成，内容不上传。

怎么用文本去重

1. 将待处理内容粘贴到左侧，一般每行一条。
2. 按需勾选「忽略大小写」「比较前去掉首尾空格」「保留空行」。
3. 输入后右侧结果自动更新。
4. 用「复制结果」带走去重后的文本。

去重规则说明

• 默认按整行比较；开启「去掉首尾空格」后，苹果 与 苹果 视为同一行。
• 开启「忽略大小写」后，Banana 与 banana 视为重复，保留先出现的那一行原样。
• 未勾选「保留空行」时，空行会一并去掉；需要占位空行时请勾选。
• 去重只删重复行，不排序；若要排序请用 文本排序。

常见用途

• 客户 / 手机号 / 邮箱名单清洗，去掉重复录入。
• 关键词、标签、SKU 列表去重后再导出。
• 日志或爬取结果中去掉重复 URL、重复报错行。

常见问题

相关文本工具

• 文本排序 · 去空行 · 批量替换
• 文本对比 · 字数统计 · 全部网络工具

免责声明

本工具仅供本地文本清洗参考。请勿粘贴含密钥、证件号等敏感明文后截图外传；因误用造成的损失由使用者自行承担。