首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    MYSQL 查询优化之路-之DISTINCT扫描

    背景:今天对一个20w的做关联查询,创建各种索引,没有提高执行的效率,使用EXPLAIN检查,总是提示“Using temporary”扫描,这不是我想的。...通过度娘,各种百度,是因为DISTINCT使用了扫描,现在特别记录下来。以背查验。...1.使用explain语法,对SQL进行解释,根据其结果进行调优: MySQL 关联的算法是 Nest Loop Join,是通过驱动的结果集作为循环基础数据,然后一条一条地通过该结果集中的数据作为过滤条件到下一个查询数据...[驱动] 的定义为:1)指定了联接条件时,满足查询条件的记录行数少的为[驱动];2)未指定联接条件时,行数少的为[驱动](Important!)。...如果还有第三个参与Join,则再通过前两个的Join结果集作为循环基础数据,再一次通过循环查询条件到第三个查询数据,如此往复 2.两JOIN优化: a.当无order by条件时

    4.3K42

    MySQL -- 扫描

    -- db1.t有200GB mysql -h$host -P$port -u$user -p$pwd -e "select * from db1.t" > $target_file 查询数据 InnoDB...的数据是保存在主键索引上,扫描实际上是直接扫描t的主键索引 获取一行,写到 net_buffer 中,默认为 16K ,控制参数为 net_buffer_length 重复获取行,直到 写满 net_buffer...mysql_store_result net_buffer_length Sending data State切换 MySQL查询语句 在进入 执行阶段 后,首先把State设置为 Sending...State2,有一个读请求访问P3,P3被移动到链表的最前面 State3,要访问的数据页不在链表中,所以需要在 Buffer Pool 中新申请一个数据页Px,加到链表头部 Buffer Pool 冷数据扫描...每次被访问的时候都需要做以下判断 如果这个数据页在LRU链表中 存在的时间 超过了1S,就把它移动到链表头部,否则,位置不变 存在时间的值由参数 innodb_old_blocks_time 控制 该策略是为了处理类似 扫描

    2.8K40

    MySQL查询

    是一种数据库分割技术,用于将大拆分成多个小,以提高数据库的性能和可管理性。在MySQL中,可以使用多种方法进行分,例如基于范围、哈希或列表等。...下面将详细介绍MySQL如何分以及分后如何进行数据查询。 基于哈希的分 基于哈希的分是一种将数据分散到多个子表中的数据库分策略。这种方法通过计算数据的哈希值来决定数据应该存储在哪个子表中。...示例插入数据: -- 计算数据的哈希值(示例使用MySQL的MD5哈希函数) SET @hash = MD5(CONCAT(customer_id, order_date)); -- 根据哈希值决定插入到哪个子表中...然后,在对应的子表中执行查询操作。 性能优化和注意事项 •哈希函数选择: 选择合适的哈希函数以确保数据均匀分布。通常,哈希函数应该尽可能均匀地分布数据,以避免某些子表过载。...•查询路由算法: 查询路由算法应该与数据分布策略一致,以确保正确路由查询。 基于列表的分 基于列表的分是一种数据库分策略,它根据某个列的值将数据分割到不同的子表中。

    84820

    MySQL查询

    查询的语法及关键字执行的优先级 单查询语法 SELECT DISTINCT 字段1,字段2......1.找到:from 2.拿着where指定的约束条件,去文件/中取出一条条记录 3.将取出的一条条记录进行分组group by,如果没有group by,则整体作为一组 4.执行select(去重)...; SELECT * FROM employee; SELECT emp_name,salary FROM employee; #避免重复DISTINCT SELECT DISTINCT...查询岗位名以及岗位包含的所有员工名字 2. 查询岗位名以及各岗位内包含的员工个数 3. 查询公司内男员工和女员工的个数 4. 查询岗位名以及各岗位的平均薪资 5....查询岗位名以及各岗位的最高薪资 6. 查询岗位名以及各岗位的最低薪资 7. 查询男员工与男员工的平均薪资,女员工与女员工的平均薪资 ? ? ?

    17.8K10

    MySQL之单查询、多表查询

    一、单查询: 单个查询方法及语法顺序需要通过实际例子来熟悉 先将数据创建下: ? ?...查询数据的条件依据 找到数据形成虚拟 ②、where约束条件的使用 # 1.查询id大于等于3小于等于6的数据 mysql> select * from emp where id >=...多个之间的查询一般都是在 之间存在某种逻辑关联的情况下进行的查询,这种逻辑上的关联其实就是中某个字段名和另外一个中的字段名存在一个一一对应的关系或者关联。...: # 就是将一个查询语句的结果用括号括起来当做另一个查询语句的条件去用 # 接着上面的mysql> select * from emp; +----+-------+--------+-----...,也可以通过其别名的方式把它作为一张虚拟去跟其他做关联查询 额外题: 部门中薪资超过部门平均薪资的员工姓名及薪资 mysql> select t1.name,t1.salary,t1.post,t2

    22K30

    mysql+分页查询

    背景 我们都知道,数据量大了,都要对数据库进行分库分。奈何一直对分及分查询没什么概念,这里先不讲那么多概念,先直接演示一个demo。我们直接上车,请坐稳扶好。...where id%2=0; insert into tb_member2(id,name,age) select id,name,age from tb_member where id%2=1; 分页查询...接下来,我们需要考虑的是一张tb_member被拆分成2张,那分页如何实现呢?...其实tb_member_all表里面是没有存储数据,它就是一个外壳,里面的数据是tb_member1,tb_member2的并集,数据的存储是放在分中;做数据查询的时候,就直接用tb_member_all...查询数据 SELECT * FROM tb_member_all order by id LIMIT 10 OFFSET 10; 删除数据 delete from tb_member_all where

    43530

    MySQL的基本查询

    查询 语法:SELECT * FROM 名; 通常情况下不建议使用 * 进行查询,因为: 查询的列越多,意味着需要传输的数据量越大; 可能会影响到索引的使用。...[order by ...] limit n offset s; 建议:对未知进行查询时,最好加一条 limit 1,避免因为中数据过大,查询数据导致数据库卡死。...我们查看当前库的: 可以看到有一张 employee ,我们查看这张的数据如下: 再查看表的结构: 然后我们把整数据删除: delete from employee; 再查看就发现数据没了...(2)截断 语法: truncate [table] table_name 注意:这个操作慎用 只能对整操作,不能像 delete 一样针对部分数据操作; 实际上 MySQL 不对数据操作,所以比...实例:创建一个新,插入一个旧表中查询到的去重后的数据 先创建一个旧表,并插入数据: mysql> create table duplicate_table (id int, name varchar

    9310

    MySQL查询,联结

    一,子查询查询:嵌套在其他查询中;执行顺序由里到外。子查询数目没有限制,如果要使用多层查询,注意写好缩进格式,不要出错。...二,联结 SQL强大的功能之一就是能够在数据检索查询的执行中使用联结(join)。使用联结的的原理是一个与另一个有相关联的列。一个的外键是另一个列主键,通过外键可以将两个联结起来。...在使用联结时,实际上做的是将第一个的每一行与第二行行进行匹配。因此,如果没有联结条件,检索出的行数目将是第一个的行数乘以第二个的行数,即所谓的笛卡儿积。...对于联结的数目没有限制,对于那些复杂的查询使用联结将变得简单。...外部链接,左联结(left outer join),右联结(right outer join);左联结左边全部返回,右边没有匹配的为空;右联结同理。

    4.5K20

    MySQL查询操作实例

    在安装完数据库后,不管是Windows 还是Linux平台,  MySQL的sql命令都大同小异,相关命令都是相同的,每个命令结束后 都以  ;  结尾,注意在Windows平台中表名是不区分大小写的,...在安装完数据库后会出现的几个系统数据库:   Mysql 库: 该数据库存储了系统的用户权限信息   In_formation_schema库: 该数据库存储了一些数据库对象信息。...DROP TABLE emp;   6.修改 --  修改类型, 将empename字段从varchar(10)改为varchar(20) ALTER TABLE emp MODIFY ename...查询 -- 查询不重复记录 DISTINCT SELECT DISTINCT * FROM emp; -- 查询条件(比较运算符可以是=,>,=,<=,!...`deptno`;   14.子查询   子查询的关键字主要包括in、not in、=、!

    4.5K10

    2018-07-20 oracle优化:避免扫描

    =)会限制索引、引起扫描 Where city!='TOKYO'. 解决方法:通过把不等于操作符改成or,可以使用索引,避免扫描。...例如:where A=:1 or B=:2, A上有索引,B上没索引,则比较B=:2时会重新开始扫描 5.模糊查询效率很低: 原因:like本身效率就比较低,应该尽量避免查询条件使用like;对于...like‘%...%’(模糊)这样的条件,是无法使用索引的,扫描自然效率很低;另外,由于匹配算法的关系,模糊查询的字段长度越大,模糊查询效率越低。...解决办法:首先尽量避免模糊查询,如果因为业务需要一定要使用模糊查询,则至少保证不要使用模糊查询,对于右模糊查询,即like‘…%’,是会使用索引的;左模糊like ‘%...’无法直接使用索引,但可以利用...=)的select语句执行慢 原因:SQL中,不等于操作符会限制索引,引起扫描,即使比较的字段上有索引 解决方法:通过把不等于操作符改成or,可以使用索引,避免扫描。

    2.2K40
    领券