首页
学习
活动
专区
圈层
工具
发布

Mysql DISTINCT的实现思路

DISTINCT实际上和GROUP BY操作非常相似,只不过是在GROUP BY之后的每组中只取出一条记录而已 所以,DISTINCT的实现方式和GROUP BY基本相同,同样可以通过索引扫描来实现,当然...,在仅使用索引无法完成DISTINCT时,MySQL只能通过临时表来完成。...但是,DISTINCT并不须要进行排序。...也就是说,当只进行DISTINCT操作的Query仅利用索引无法完成操作时,MySQL会利用临时表来做一次数据的“缓存”,但不会对临时表中的数据进行filesort操作 示例 EXPLAIN SELECT...group-by同样的方式 对于DISTINCT的优化,思路和GROUP BY基本上一致,关键在于利用好索引,当无法利用索引时,就要确保尽量不要在大结果集上面进行DISTINCT操作

1.7K70
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MySQL中distinct和group by去重的区别

    MySQL中distinct和group by去重的区别 在MySQL中,我们经常需要对查询结果进行去重,而DISTINCT和GROUP BY是实现这一功能的两种常见方法。...: SELECT aid FROM pageview GROUP BY aid; 与DISTINCT相比,GROUP BY可以显示更多的列,而DISTINCT只能展示去重的列。...性能不同 如果去重的字段有索引,那么GROUP BY和DISTINCT都可以使用索引,此情况下它们的性能是相同的。...而当去重的字段没有索引时,DISTINCT的性能可能会高于GROUP BY,因为在MySQL 8.0之前,GROUP BY有一个隐藏的功能会进行默认的排序,这样就会触发filesort从而导致查询性能降低...总结 大部分场景下DISTINCT是特殊的GROUP BY,但二者也有细微的区别,比如它们在查询结果集上、使用的具体业务场景上,以及性能上都是不同的。

    76000

    MySQL中的数据去重,该用DISTINCT还是GROUP BY?

    在MySQL数据库操作中,数据去重是常见的需求。当我们需要从查询结果中排除重复记录时,通常会面临两个选择:使用DISTINCT关键字或GROUP BY子句。...语法和基本用法 DISTINCT的使用 DISTINCT关键字用于返回唯一不同的值,它直接作用于SELECT语句中: -- 单列去重 SELECT DISTINCT department FROM employees...:MySQL会对所有选定的列进行唯一性判断,通常通过创建临时表或使用文件排序来实现 GROUP BY:MySQL先按指定列分组,然后从每个组中选择一行(通常是非聚合列的第一行) 实际性能测试 我们通过一个包含...test_table GROUP BY col1, col2; 在大多数情况下,两者的执行计划非常相似,特别是当MySQL优化器识别到GROUP BY用于去重而非聚合时。...**避免SELECT ***:只选择需要的列,减少数据处理量 考虑数据分布:对于高基数(唯一值多)的列,去重操作代价更高 结论 在MySQL中,DISTINCT和GROUP BY都可以用于数据去重,两者在性能上通常差异不大

    1.2K10

    MySQL表设计踩过的坑!

    希望我能说说我在数据库表设计时踩过的坑。那么,我们今天就来聊聊我在数据库表设计时踩过的坑,以及现在对数据库表设计的一点建议。希望能够帮助到你。...注释 之前在数据库表设计时,就没有加注释的习惯,造成的直接后果是:数据库设计阶段一过,后续数据表的使用中,字段名就全靠猜了。我们写代码是知道注释是非常重要的,同样在设计数据库表时,注释也非常重要!...加索引 在之前的文章中也有说过,一个好的数据表设计,在一开始就应该考虑添加索引,这个阶段添加索引成本不仅最低。而且还不给后续留下慢查询,甚至生产事故的隐患!...索引怎么加,索引重不重要,可以查看《写会MySQL索引》一文进行查看!唉,我就吃过不少没加索引或忘记添加索引的亏,记忆犹新!!!...表以及字段上添加合理的注释。 数据库表设计时,一定要在外键字段以及合适的字段上加索引。 上面是我数据库表设计时,遇到踩过坑以后的经验之谈。有些坑当时还真花了不少时间来填补。

    1.5K80

    MySQL中的GROUP BY和DISTINCT:去重的效果与用法解析

    在MySQL数据库中,经常会遇到需要对数据进行分组和去重的情况。为了达到这个目的,我们通常会使用GROUP BY和DISTINCT这两个关键字。虽然它们都可以用于去重,但是它们具有不同的用法和效果。...本文将详细解析MySQL中的GROUP BY和DISTINCT的用法,并比较它们对同一字段的去重效果是否相同。...二、DISTINCT的用法及效果DISTINCT关键字用于返回唯一不重复的行。当我们希望从一个表格中获取某一列的所有不重复的值时,可以使用DISTINCT关键字。...执行该代码后,我们将获得一个结果集,其中包含了所有不重复的城市名。DISTINCT的效果是返回唯一不重复的行,而不是对结果集进行分组和聚合计算。它会去除结果集中重复的行,并返回所有不重复的行。...结论通过本文的介绍,我们了解了Mysql中的Group和Distinct的用法,并对它们进行了比较和对比。Group By关键字用于将结果集按照指定的字段进行分组,适用于分组计算和聚合操作。

    11.2K50

    MySQL的两种分页方式:OffsetLimit分页和游标分页

    在MySQL中,分页的实现主要有两种方式:Offset/Limit分页和游标分页。选择具体方式通常取决于业务场景和性能需求。这两种方法各有优劣,不存在绝对的最佳选择。...,MySQL可能会以不同的顺序返回这些行。...我们要求按first_name排序,MySQL已经忠实地执行了操作,但返回的行顺序可能不同。 生成确定性排序的最简单方法是按一个唯一列排序,因为每个值都不重复,MySQL只能每次都以相同顺序返回行。...LIMIT告诉MySQL需要返回多少行,而OFFSET告诉MySQL需要跳过多少行。...这意味着当分页较深时,查询性能会显著下降,因为数据库必须读取并丢弃更多行。 对于非常深的页面,查询可能需要数秒才能完成加载。

    42400

    《SQL必知必会》万字浓缩精华

    SELECT DISTINCT vend_id FROM products; SQL中的DISTINCT关键字表示的是去重,只返回不同的值。...它是作用于所有的列 SELECT DISTINCT vend_id, prod_price -- DISTINCT作用于所有的列,并不仅仅是后面的列 限制结果 如果不加限制条件,SQL返回的是全部数据...七、创建计算字段 计算字段 存储在数据库表中的字段一般不是应用程序中所需要的格式。我们需要直接从数据库中检索出来进行转换、计算或者格式化过的数据。计算字段并不实际存在于数据库表中。...二十一、使用游标 本章节中讲解的是什么是游标,以及如何使用游标。 什么是游标 SQL检索操作返回一组称为结果集的行,这组返回的行都是与SQL语句相匹配的行(零行或者多行)。...简单地使用SELECT语句,没有办法得到第一行、下一行或者前10行的数据。但是实际中,我们需要在检索出来的行中前进或者后退一行甚至多行,这时候便可以使用游标。

    9K31

    SQL命令 DISTINCT

    DISTINCT BY (item {,item2}) - 可选-返回按(项)值唯一的行的选择项值。 ALL - 可选-返回结果集中的所有行。默认设置。...不能按列号指定字段;这将被解释为文字,并返回一行。将文字指定为DISTINCT子句中的项值将返回1行;返回哪行是不确定的。因此,指定7、‘Chicago’、‘’、0或NULL都返回1行。...但是,嵌入式SQL基于游标的查询可以返回多行数据;在基于游标的查询中,DISTINCT子句只返回唯一值行。 DISTINCT和ORDER BY DISTINCT子句在ORDER BY子句之前应用。...DISTINCT和%ROWID 指定DISTINCT关键字会导致基于游标的嵌入式SQL查询不设置%ROWID变量。即使DISTINCT不限制返回的行数,也不设置%ROWID。...动态SQL SELECT查询和非游标嵌入式SQL SELECT查询从未设置%ROWID。 DISTINCT和事务处理 指定DISTINCT关键字会导致查询检索所有当前数据,包括当前事务尚未提交的数据。

    6.8K10

    我踩过的Spring Boot统一返回体中的坑

    在Spring Boot项目中我们可以通过RestControllerAdvice配合实现ResponseBodyAdvice接口来保证Spring MVC接口具有统一的返回格式,以保证前端同学能够封装统一的数据接收工具...这就需要一个类似白名单的机制来绕过统一返回体控制器通知类。...>> converterType); 这个方法如果返回false就表示不执行统一返回体的封装逻辑。这里我推荐注解实现。...返回独立字符串的问题 有些接口我们会返回一个字符串: @GetMapping("/get") public String getStr(){ //返回了一个字符串 return "felord.cn..."; } 我们希望这个字符串被统一返回体处理,类似这样: { code: 200, data: "felord.cn", msg: "返回成字符串", } 但是你会发现并没有达到期望的效果

    1.8K30

    SQL必知必会总结

    SELECT DISTINCT vend_id FROM products; SQL中的DISTINCT关键字表示的是去重,只返回不同的值。...它是作用于所有的列 SELECT DISTINCT vend_id, prod_price -- DISTINCT作用于所有的列,并不仅仅是后面的列 限制结果 如果不加限制条件,SQL返回的是全部数据...,则DISTINCT只能用于COUNT() 2、DISTINCT必须使用列名,不能用于计算或者表达式 3、DISTINCT用于MAX()和MIN()意义不大,因为最值不管是否考虑去重,都是一样的...二十一、使用游标 本章节中讲解的是什么是游标,以及如何使用游标。 什么是游标 SQL检索操作返回一组称为结果集的行,这组返回的行都是与SQL语句相匹配的行(零行或者多行)。...简单地使用SELECT语句,没有办法得到第一行、下一行或者前10行的数据。但是实际中,我们需要在检索出来的行中前进或者后退一行甚至多行,这时候便可以使用游标。

    10.9K30
    领券