文本清理格式转换内容提取字数统计编程开发大小写英文符号编码数字处理文本列表随机生成手机号处理时间日期
首页 / 文本清理 / 文本去重

文本去重

按行去重,重复出现的行只留一条。适合清理名单、URL 列表、关键词这类一行一条的数据。

输入文本(一行一条)
结果

这个工具能做什么

把一段多行文本粘进去,它会把内容里重复的行删掉,同样的行只保留第一次出现的那一条。常见的用法比如:手上有一份导出的手机号或邮箱名单,里面难免有重复;或者收集了一批网址、关键词,想去掉重的再用。

几个选项说明一下。勾上「忽略大小写」后,Appleapple 会被当成同一条。「忽略首尾空格」是指判断是否重复时不看行首行尾的空格,这样看起来一样、其实末尾多了个空格的两行也能被认出来。默认还会顺手删掉空行,如果你的空行有意义,把那个勾去掉就行。

处理完下面会显示原来多少行、去重后剩多少行、删掉了几条,方便你核对。全部在你浏览器里算,文本不会发到网上。

使用方法

  1. 把要处理的内容粘贴到上面的输入框(随机生成类工具直接设置选项即可)。
  2. 按需要调整选项,点一下操作按钮。
  3. 结果出现在下方,点「复制结果」就能带走。

文本去重是一个免费的在线工具,打开网页就能用,不用下载也不用注册。平时大家搜的“文本去重”、“删除重复行”、“去除重复”,指的都是这个工具。所有处理都在你自己的浏览器里完成,内容不会上传服务器,用着放心。

相关工具

查看全部「文本清理」工具 →