寻找重复地址比看起来要复杂得多，特别是当你要求准确性时。在这种情况下，一个MySQL查询是不够的…

我在SmartyStreets工作，在那里我们解决验证和重复数据删除等问题，我看到过很多类似问题的不同挑战。

有一些第三方服务会在列表中为你标记重复项。仅使用MySQL子查询来执行此操作不会考虑地址格式和标准的差异。美国邮政总局(USPS)有一定的指导方针来制定这些标准，但只有少数供应商获得了执行此类操作的认证。

因此，我建议您最好的答案是，例如，将表导出到CSV文件中，并将其提交给有能力的列表处理程序。其中一个是LiveAddress，它会在几秒钟到几分钟内自动为你完成。它将用一个名为“duplicate”的新字段和一个Y值标记重复的行。

SELECT t.*,(select count(*) from city as tt where tt.name=t.name) as count FROM `city` as t where (select count(*) from city as tt where tt.name=t.name) > 1 order by count desc

用你的表格替换城市。 将name替换为字段名

不是很有效，但应该可以工作:

SELECT *
FROM list AS outer
WHERE (SELECT COUNT(*)
        FROM list AS inner
        WHERE inner.address = outer.address) > 1;

select * from table_name t1 inner join (select distinct <attribute list> from table_name as temp)t2 where t1.attribute_name = t2.attribute_name

对于你的桌子来说，应该是这样的

select * from list l1 inner join (select distinct address from list as list2)l2 where l1.address=l2.address

这个查询将为您提供列表表中所有不同的地址条目…我不知道这将如何工作，如果你有任何主键值的名称等。

要快速查看重复的行，可以运行一个简单的查询

在这里，我正在查询表，并列出所有重复的行相同的user_id, market_place和sku:

select user_id, market_place,sku, count(id)as totals from sku_analytics group by user_id, market_place,sku having count(id)>1;

要删除重复的行，必须决定要删除哪一行。例如id较低(通常较旧)或其他日期信息。在我的情况下，我只是想删除较低的id，因为较新的id是最新的信息。

首先仔细检查是否正确的记录将被删除。在这里，我正在选择将被删除的副本中的记录(通过唯一id)。

select a.user_id, a.market_place,a.sku from sku_analytics a inner join sku_analytics b where a.id< b.id and a.user_id= b.user_id and a.market_place= b.market_place and a.sku = b.sku;

然后我运行delete查询来删除dupes:

delete a from sku_analytics a inner join sku_analytics b where a.id< b.id and a.user_id= b.user_id and a.market_place= b.market_place and a.sku = b.sku;

备份，双重检查，验证，验证备份，然后执行。

寻找重复地址比看起来要复杂得多，特别是当你要求准确性时。在这种情况下，一个MySQL查询是不够的…

我在SmartyStreets工作，在那里我们解决验证和重复数据删除等问题，我看到过很多类似问题的不同挑战。

有一些第三方服务会在列表中为你标记重复项。仅使用MySQL子查询来执行此操作不会考虑地址格式和标准的差异。美国邮政总局(USPS)有一定的指导方针来制定这些标准，但只有少数供应商获得了执行此类操作的认证。

因此，我建议您最好的答案是，例如，将表导出到CSV文件中，并将其提交给有能力的列表处理程序。其中一个是LiveAddress，它会在几秒钟到几分钟内自动为你完成。它将用一个名为“duplicate”的新字段和一个Y值标记重复的行。