跳到主内容
UniKit

重复项提取

找出列表里重复出现的项:输出「值 + 次数 + 出现位置」,可忽略大小写与首尾空白,也可以反过来只输出唯一项,并给出总条目、唯一数与重复组统计。

浏览器本地运行所有计算都在你的浏览器里完成,数据不会离开本机。

列表

结果

一行一条,可直接复制。

粘贴列表后即可查找重复项

总条目: 0 · 唯一: 0 · 重复出现: 0 · 重复组: 0

这个工具能做什么

  • 核对两份名单合并后哪些人重复登记了,直接看出现位置去原文件里定位。
  • 检查导出的数据里是否有重复 ID,避免入库时撞主键。
  • 配合「只输出唯一项」,快速拿到去重后剩下的独有内容。

示例

输入

apple
banana
apple
cherry
banana
apple

输出

apple	3	1,3,6
banana	2	2,5

apple 出现 3 次(第 1、3、6 行),banana 出现 2 次;cherry 只出现一次不会出现在重复项里。

常见问题

大小写不同算重复吗?

默认不算。勾选「忽略大小写」后 Apple 与 apple 视为同一项,输出保留首次出现的写法,不会强行改成小写。

行首尾的空格会影响判断吗?

默认会被忽略,因为导出的表格里常有看不见的尾随空格。需要严格比较时把「忽略首尾空白」关掉,此时「a 」与「a」会被当成两项。

重复项只输出一次吗?

是的。每个重复值只占一行,次数与全部出现位置放在同一行里,所以 1000 行数据里某值出现 500 次也只是一行明细。

能只看唯一项吗?

可以。把「输出内容」切到「只要唯一项」,得到的就是只出现过一次的条目;切到「全部」则按首次出现顺序列出所有条目及其次数。

关键词:重复项提取找出重复重复次数duplicate extractor重复位置唯一项列表查重重复内容

同类工具