查找重复项，数据量非常庞大，大概有13万条数据，求助

15751657 · 发表于 2017-10-18 16:33

本帖最后由 15751657 于 2017-10-18 17:11 编辑

1、查找税号/身份证号的重复项，或者查找客户名称的重复项。填充颜色。
2、同时查找税号/身份证号和客户名称的重复项。填充颜色。
数据见附件

1111.rar (9.25 KB, 下载次数: 4)

MRnightf · 发表于 2017-10-18 16:56

=COUNTIF(B$1:B2,B2&"*")，结果为=1第一次出现，为2，第二次出现
=IFERROR(VLOOKUP(C2,C$1:C1,1,0),"")，第一次出现为空，第二次出现对应名称
=SUMPRODUCT((C$1:C2=C2)*(B$1:B2=B2))，效果同一，计出现次数
三种方法

15751657 · 发表于 2017-10-18 16:59

MRnightf 发表于 2017-10-18 16:56
=COUNTIF(B$1:B2,B2&"*")，结果为=1第一次出现，为2，第二次出现
=IFERROR(VLOOKUP(C2,C$1:C1,1,0),"")， ...

由于数据量比较大，用函数公式特别慢。

MRnightf · 发表于 2017-10-18 17:03

15751657 发表于 2017-10-18 16:59
由于数据量比较大，用函数公式特别慢。

条件格式会用吗？把公式放里边，显示颜色差异

砂海 · 发表于 2017-10-18 17:30

本帖最后由砂海于 2017-10-18 21:12 编辑

用函数要快的话 , (假设按名称)
建立现有序号
再按C列名称排序 ,
再辅助列 =C2=C1 , 把多余的区分开 [ 修改之前的这个是把有重复的都找出来 , 没有保留第一个 =or(C2=C1,C2=c3) ]
把辅助列粘贴为值 , (根据这个即可筛选出重复与否)
排序恢复为现有序号

15751657 · 发表于 2017-10-18 17:38

砂海发表于 2017-10-18 17:30
用函数要快的话 , (假设按名称)
建立现有序号
再按C列名称排序 ,

用函数特别慢

苏子龙 · 发表于 2017-10-18 17:56

排序的试试g2=(N(G1)+1)^(C2=C1)

exc姜 · 发表于 2017-10-22 09:59

学习

		自动登录	找回密码
密码			注册

查找重复项，数据量非常庞大，大概有13万条数据，求助

点评

点评