MySQL 查询重复数据，删除重复数据保留id最小的一条作为唯一数据

追逐时光者

发布于 2019-08-28 05:41:31

3.7K00

代码可运行

文章被收录于专栏：编程进阶实战编程进阶实战

运行总次数：0

代码可运行

开发背景：

　　最近在做一个批量数据导入到MySQL数据库的功能，从批量导入就可以知道，这样的数据在插入数据库之前是不会进行重复判断的，因此只有在全部数据导入进去以后在执行一条语句进行删除，保证数据唯一性。

实战：

表结构如下图所示：

表明：brand

操作：

使用SQL语句查询重复的数据有哪些：

SELECT * from brand WHERE brandName IN(
select brandName from brand GROUP BY brandName HAVING COUNT(brandName)>1 #条件是数量大于1的重复数据
)

使用SQL删除多余的重复数据，并保留Id最小的一条唯一数据：

注意点：

错误SQL：DELETE FROM brand WHERE brandName IN (select brandName from brand GROUP BY brandName HAVING COUNT(brandName)>1) 
AND Id NOT IN (select MIN(Id) from brand GROUP BY brandName HAVING COUNT(brandName)>1)

提示： You can't specify target table 'brand' for update in FROM clause 不能为FROM子句中的更新指定目标表“brand”

原因是：不能将直接查处来的数据当做删除数据的条件，我们应该先把查出来的数据新建一个临时表，然后再把临时表作为条件进行删除功能

正确SQL写法：

 DELETE FROM brand WHERE brandName IN (SELECT brandName FROM (SELECT brandName FROM brand GROUP BY brandName HAVING COUNT(brandName)>1) e)
 AND Id NOT IN (SELECT Id FROM (SELECT MIN(Id) AS Id FROM brand GROUP BY brandName HAVING COUNT(brandName)>1) t)

#查询显示重复的数据都是显示最前面的几条，因此不需要查询是否最小值

更加简单快捷的方式：

这是老飞飞的前辈给了一个更加方便，简洁的写法（非常感谢大佬的方法）：

DELETE FROM brand WHERE Id NOT IN (SELECT Id FROM (SELECT MIN(Id) AS Id FROM brand GROUP BY brandName) t)

这句的意思其实就是，通过分组统计出数据库中不重复的最小数据id编号，让后通过 not in 去删除其他重复多余的数据。

结果如下图：

总结：

很多东西都是需要自己一步一步的去探究的，当然网上的建议也是非常宝贵的借鉴和资源，无论做什么开发我们都需要理解它的工作原理才能够更好的掌握它。

本文参与腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。

原始发表：2019-03-01 ，如有侵权请联系 cloudcommunity@tencent.com 删除

数据库

sql

本文分享自作者个人站点/博客前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体同步曝光计划，欢迎热爱写作的你一起参与！

数据库

sql

登录后参与评论

暂无评论

MySQL 查询重复数据，删除重复数据保留id最小的一条作为唯一数据

MySQL 查询重复数据，删除重复数据保留id最小的一条作为唯一数据

开发背景：

实战：

表结构如下图所示：

操作：

使用SQL语句查询重复的数据有哪些：

使用SQL删除多余的重复数据，并保留Id最小的一条唯一数据：

注意点：

正确SQL写法：

更加简单快捷的方式：

结果如下图：

总结：

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐