目录
MYSQL Query Processing
执行过程:
连接器:
查询缓存:  
分析器:
优化器:
执行器:
理解执行计划
如何使用
id
select_type
table
type
possible_keys
key
key_length
ref
rows
filtered
extra
提高查询效率
正确使用索引
什么样的索引可以被使用?
什么样的索引无法被使用?
选择合适的索引列顺序 
覆盖索引条件 
使用索引进行排序
数据获取建议
索引的代价
索引最佳实践
SELECT语句效率低下时考虑
调优表连接方法
首页 数据库 mysql教程 关系数据库之mysql三:从一条sql的生命周期说起

关系数据库之mysql三:从一条sql的生命周期说起

Nov 13, 2020 pm 05:16 PM
mysql

mysql教程栏目介绍关系数据库的sql的生命周期。

关系数据库之mysql三:从一条sql的生命周期说起

MYSQL Query Processing

sql的执行过程和mysql体系架构基本一致

执行过程:

            

连接器:

       建立与 MySQL 的连接,用于查询SQL语句,判断权限 。

查询缓存:  

  • 如果语句不在查询缓存中,就会继续后面的执行阶段。执行完成后,执行结果会被存入查询缓存中
  • 如果查询命中缓存,MySQL不需要执行后面的复杂操作,就可以直接返回结果,提升效率

分析器:

       对 SQL 语句进行硬解析,分析器先会做词法分析。分析SQL 语句的组成成分。判断输入的 SQL 语句是否满足语法规则。 

优化器:

       优化器是在表里面有多个索引的时候,决定使用哪个索引;或者在一个语句有多表关联(join)的时候,决定各个表的连接顺序。 不同的执行方法的逻辑结果是一样的,但是执行的效率会有不同,而优化器的作用就是决定选择使用哪一个方案。

执行器:

  • 有索引:第一次调用的是取满足条件的第一行这个接口,之后循环取满足条件的下一行这个接口,最终把查询结果返回客户端
  • 无索引:调用 InnoDB 引擎接口取这个表的第一行,判断sql查询条件,如果不是则跳过,如果是则将这行存在结果集中; 调用引擎接口取下一行,重复相同的判断逻辑,直到取到这个表的最后一行。 执行器将上述遍历过程中所有满足条件的行组成的记录集作为结果集返回给客户端

理解执行计划

EXPLAIN命令输出MySQL将如何执行你的SQL语句,但不会返回数据

如何使用

[root@localhost][(none)]> explain select * from 表名 where project_id = 36;
+----+-------------+--------------------------+------------+------+---------------+------------+---------+-------+--------+----------+-------+
| id | select_type | table                    | partitions | type | possible_keys | key        | key_len | ref   | rows   | filtered | Extra |
+----+-------------+--------------------------+------------+------+---------------+------------+---------+-------+--------+----------+-------+
|  1 | SIMPLE      | 表名                     | NULL       | ref  | project_id    | project_id | 4       | const | 797964 |   100.00 | NULL  |
+----+-------------+--------------------------+------------+------+---------------+------------+---------+-------+--------+----------+-------+复制代码
登录后复制

id

  • id相同执行顺序由上至下
  • id不同,id值越大优先级越高,越先被执行

select_type

  • SIMPLE:简单的 select 查询,查询中不包含子查询或者 union 
  • PRIMARY:查询中包含子部分,最外层查询则被标记为 primary 
  • DERIVED:是子查询from的一部分
  • DEPENDENT SUBQUERY:子查询中的第一个SELECT,子查询依赖于外层查询的结果
  • SUBQUERY 表示在 select 或 where 列表中包含了子查询,
  • MATERIALIZED:表示 where 后面 in 条件的子查询 
  • UNION:表示 union 中的第二个或后面的 select 语句 
  • UNION RESULT:union 的结果 

table

  • 表对象

type

system > const > eq_ref > ref > range > index > ALL(查询效率)

  • system:表中只有一条数据,这个类型是特殊的const类型
  • const:针对于主键或唯一索引的等值查询扫描,最多只返回一个行数据。速度非常快,因为只读取一次即可。
  • eq_ref:此类型通常出现在多表的join查询,表示对于前表的每一个结果,都只能匹配到后表的一行结果,并且查询的比较操作通常是=,查询效率较高
  • ref:此类型通常出现在多表的join查询,针对于非唯一或非主键索引,或者是使用了最左前缀规则索引的查询
  • range:范围扫描 这个类型通常出现在 <>, >, >=, <, <=, IS NULL, <=>, BETWEEN, IN() 操作中
  • index:索引树扫描 
  • ALL:全表扫描(full table scan) 

possible_keys

  • 可能使用的索引,注意不一定会使用
  • 查询涉及到的字段上若存在索引,则该索引将被列出来
  • 当该列为NULL时就要考虑当前的SQL是否需要优化了

key

  • 显示MySQL在查询中实际使用的索引,若没有使用索引,显示NULL。 
  • 查询中若使用了覆盖索引(覆盖索引:索引的数据覆盖了需要查询的所有数据),则该索引仅出现在key列表中 

key_length

  • 索引长度 

ref

  • 表示上述表的连接匹配条件,即哪些列或常量被用于查找索引列上的值 

rows

  • 返回估算的结果集数目,并不是准确的值

filtered

  • 示返回结果的行数占需读取行数的百分比, filtered 的值越大越好

extra

  • Using where:表示优化器需要通过索引回表,之后到server层进行过滤查询数据 
  • Using index:表示直接访问索引就足够获取到所需要的数据,不需要回表 
  • Using index condition:在5.6版本后加入的新特性(Index Condition Pushdown) 
  • Using index for group-by:使用了索引来进行GROUP BY或者DISTINCT的查询
  • Using filesort:当 Extra 中有 Using filesort 时, 表示 MySQL 需额外的排序操作, 不不能通过索引顺序达到排序效果. 一般有 Using filesort, 都建议优化去掉, 因为这样的查询 CPU 资源消耗大
  • Using temporary 临时表被使用,时常出现在GROUP BY和ORDER BY子句情况下。(sort buffer或者磁盘被使用)

       光看 filesort 字面意思,可能以为是要利用磁盘文件进行排序,实则不全然。 当MySQL不能使用索引进行排序时,就会利用自己的排序算法(快速排序算法)在内存(sort buffer)中对数据进行排序,如果内存装载不下,它会将磁盘上的数据进行分块,再对各个 数据块进行排序,然后将各个块合并成有序的结果集(实际上就是外排序)。

       当对连接操作进行排序时,如果ORDER BY仅仅引用第一个表的列,MySQL对该表进行filesort操作,然后进行连接处理,此时,EXPLAIN输出“Using filesort”;否则,MySQL必 须将查询的结果集生成一个临时表,在连接完成之后行行filesort操作,此时,EXPLAIN输出“Using temporary;Using filesort”。

提高查询效率

正确使用索引

为解释方便,来一个demo:

DROP TABLE IF EXISTS user; 
CREATE TABLE user( 
id int AUTO_INCREMENT PRIMARY KEY, 
user_name varchar(30) NOT NULL, 
gender bit(1) NOT NULL DEFAULT b’1’, 
city varchar(50) NOT NULL, 
age int NOT NULL 
)ENGINE=InnoDB DEFAULT CHARSET=utf8;
ALTER TABLE user ADD INDEX idx_user(user_name , city , age); 
复制代码
登录后复制

什么样的索引可以被使用?

  • **全匹配:**SELECT * FROM user WHERE user_name='JueJin'AND age='5' AND city='上海';(与where后查询条件的顺序无关)  
  • 匹配最左前缀:(user_name )、(user_name, city)、(user_name , city , age)(满足最左前缀查询条件的顺序与索引列的顺序无关,如:(city, user_name)、(age, city, user_name)) 
  • **匹配列前缀:**SELECT * FROM user WHERE user_name LIKE 'W%' 
  • **匹配范围值:**SELECT * FROM user WHERE user_name BETWEEN 'W%' AND 'Z%'

什么样的索引无法被使用?

  • **where查询条件中不包含索引列中的最左索引列,则无法使用到索引: **

       SELECT * FROM user WHERE city='上海'; 

       SELECT * FROM user WHERE age='26'; 

       SELECT * FROM user WHERE age='26' AND city=‘上海'; 

  • **即使where的查询条件是最左索引列,也无法使用索引查询用户名以N结尾的用户: **

       SELECT * FROM user WHERE user_name LIKE '%N'; 

  • **如果where查询条件中有某个列的范围查询,其右边的所有列都无法使用索引优化查询: **

       SELECT * FROM user WHERE user_name='JueJin' AND city LIKE '上%' AND age=31; 

  • **索引列不能是表达式的一部分,也不能作为函数的参数,否则无法使用索引查询: **

       SELECT * FROM user WHERE user_name=concat(user_name,'PLUS');

选择合适的索引列顺序 

  • 在组合索引的创建中索引列的顺序非常重要,正确的索引顺序依赖于使用该索引的查询的查询方式
  • 对于组合索引的索引顺序可以将选择性最高的列放到索引最前列,该法则与前缀索引的选择性方法一致
  • 并不是说所有的组合索引的顺序都使用该法则就能确定,还需要根据具体的查询场景来确定具体的索引顺序

覆盖索引条件 

  • 如果一个索引中包含所有要查询的字段的值,那么就称之为覆盖索引

       SELECT user_name, city, age FROM user WHERE user_name='Tony' AND age='28' AND city='上海';

因为要查询的字段(user_name, city, age)都包含在组合索引的索引列中,所以就使用了覆盖索引查询,查看是否使用了覆盖索引可以通过执行计划中的Extra中的值为Using index则证明使用了覆盖索引,覆盖索引可以极大的提高访问性能。

使用索引进行排序

       在排序操作中如果能使用到索引来排序,那么可以极大地提高排序的速度,要使用索引来排序需要满足以下两点即可: 

  • ORDER BY子句后的列顺序要与组合索引的列顺序一致,且所有排序列的排序方向(正序/倒序)需一致 
  • 所查询的字段值需要包含在索引列中,及满足覆盖索引

排序可用demo:

  • SELECT user_name, city, age FROM user_test ORDER BY user_name;
  • SELECT user_name, city, age FROM user_test ORDER BY user_name,city; 
  • SELECT user_name, city, age FROM user_test ORDER BY user_name DESC,city DESC; 
  • SELECT user_name, city, age FROM user_test WHERE user_name='Tony' ORDER BY city;

排序不可用demo:

  • SELECT user_name, city, age FROM user_test ORDER BY user_name gender
  • SELECT user_name, city, age, gender FROM user_test ORDER BY user_name; 
  • SELECT user_name, city, age FROM user_test ORDER BY user_name ASC,city DESC
  • SELECT user_name, city, age FROM user_test WHERE user_name LIKE 'W%' ORDER BY city;

数据获取建议

不要返回应用户程序所不需要的数据限制返回数

       LIMIT:MySQL并不能按照需求返回数据量,也就是MySQL总是会查询出全部数据,使用LIMIT子句其实是为了减小网络数据传输的压力,并不会减小数据的读取行数。

去掉不需要的列

  • SELECT * 语句取出表中的所有字段,不论该字段的数据对调用的应用程序是否有用,这会对服务器资源造成浪费,甚至会对服务器的性能产生一定的影响 
  • 如果表的结构在以后发生了改变,那么 SELECT * 语句可能会取到不正确的数据 
  • 执行 SELECT * 语句时,首先要查找出表中有哪些列,然后才能开始执行 SELECT * 语句,这在某些情况会产生性能问题 
  • 使用 SELECT * 语句将不会使到覆盖索引,不利于查询的性能优化

正确使用索引的优点

  • 避免全表扫描 
  1. 单表查询时,全表扫描需要查询每一行
  2. 多表查询时,全表扫描至少需要检索所有表中每一行
  • 提高速度 
  1. 可以迅速定位结果集的第一行
  2. 排除不相关的结果
  3. 对于MIN()或者MAX()值不必检查每一行
  • 提高排序和分组的效率 
  • 在可以使用覆盖索引的情况下避免row loop-up

索引的代价

  • 如果存在过多索引,数据修改将会变得缓慢 
  1. 受影响的索引需要被更新 
  2. 对于写密集型环境压力很大 
  • 索引消耗过多磁盘空间 
  1. InnoDB存储引擎将索引和数据存储在一起 
  2. 需要监控磁盘空间

索引最佳实践

对于如下列考虑使用索引 

  • WHERE子句中的列 
  • ORDER BY或GROUP BY子句中的列 
  • 表连接条件列

考虑针对字符串型列使用前缀索引

  • 可以更快速地比较与loop up 
  • 减少磁盘I/O

SELECT语句效率低下时考虑

  • 避免全表扫描 
  • 尝试增加索引 
  1. WHERE语句 
  2. 表连接条件 
  • 利用ANALYZE TABLE来收集统计信息 
  • 考虑存储引擎层的优化

调优表连接方法

  • 在ON或USING子句的列上增加索引 
  • 利用SELECT STRAIGHT_JOIN来强制表连接顺序 
  • 在ORDER BY和GROUP BY的列上增加索引 
  • join连接不一定比子查询效率高

更多相关免费学习推荐:mysql教程(视频)

以上是关系数据库之mysql三:从一条sql的生命周期说起的详细内容。更多信息请关注PHP中文网其他相关文章!

本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

热AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover

AI Clothes Remover

用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool

Undress AI Tool

免费脱衣服图片

Clothoff.io

Clothoff.io

AI脱衣机

Video Face Swap

Video Face Swap

使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热门文章

<🎜>:泡泡胶模拟器无穷大 - 如何获取和使用皇家钥匙
4 周前 By 尊渡假赌尊渡假赌尊渡假赌
北端:融合系统,解释
4 周前 By 尊渡假赌尊渡假赌尊渡假赌
Mandragora:巫婆树的耳语 - 如何解锁抓钩
3 周前 By 尊渡假赌尊渡假赌尊渡假赌

热工具

记事本++7.3.1

记事本++7.3.1

好用且免费的代码编辑器

SublimeText3汉化版

SublimeText3汉化版

中文版,非常好用

禅工作室 13.0.1

禅工作室 13.0.1

功能强大的PHP集成开发环境

Dreamweaver CS6

Dreamweaver CS6

视觉化网页开发工具

SublimeText3 Mac版

SublimeText3 Mac版

神级代码编辑软件(SublimeText3)

热门话题

Java教程
1672
14
CakePHP 教程
1428
52
Laravel 教程
1332
25
PHP教程
1277
29
C# 教程
1256
24
laravel入门实例 laravel入门实例 Apr 18, 2025 pm 12:45 PM

Laravel 是一款 PHP 框架,用于轻松构建 Web 应用程序。它提供一系列强大的功能,包括:安装: 使用 Composer 全局安装 Laravel CLI,并在项目目录中创建应用程序。路由: 在 routes/web.php 中定义 URL 和处理函数之间的关系。视图: 在 resources/views 中创建视图以呈现应用程序的界面。数据库集成: 提供与 MySQL 等数据库的开箱即用集成,并使用迁移来创建和修改表。模型和控制器: 模型表示数据库实体,控制器处理 HTTP 请求。

MySQL和PhpMyAdmin:核心功能和功能 MySQL和PhpMyAdmin:核心功能和功能 Apr 22, 2025 am 12:12 AM

MySQL和phpMyAdmin是强大的数据库管理工具。1)MySQL用于创建数据库和表、执行DML和SQL查询。2)phpMyAdmin提供直观界面进行数据库管理、表结构管理、数据操作和用户权限管理。

MySQL与其他编程语言:一种比较 MySQL与其他编程语言:一种比较 Apr 19, 2025 am 12:22 AM

MySQL与其他编程语言相比,主要用于存储和管理数据,而其他语言如Python、Java、C 则用于逻辑处理和应用开发。 MySQL以其高性能、可扩展性和跨平台支持着称,适合数据管理需求,而其他语言在各自领域如数据分析、企业应用和系统编程中各有优势。

laravel框架安装方法 laravel框架安装方法 Apr 18, 2025 pm 12:54 PM

文章摘要:本文提供了详细分步说明,指导读者如何轻松安装 Laravel 框架。Laravel 是一个功能强大的 PHP 框架,它 упростил 和加快了 web 应用程序的开发过程。本教程涵盖了从系统要求到配置数据库和设置路由等各个方面的安装过程。通过遵循这些步骤,读者可以快速高效地为他们的 Laravel 项目打下坚实的基础。

在MySQL中解释外键的目的。 在MySQL中解释外键的目的。 Apr 25, 2025 am 12:17 AM

在MySQL中,外键的作用是建立表与表之间的关系,确保数据的一致性和完整性。外键通过引用完整性检查和级联操作维护数据的有效性,使用时需注意性能优化和避免常见错误。

比较和对比Mysql和Mariadb。 比较和对比Mysql和Mariadb。 Apr 26, 2025 am 12:08 AM

MySQL和MariaDB的主要区别在于性能、功能和许可证:1.MySQL由Oracle开发,MariaDB是其分支。2.MariaDB在高负载环境中性能可能更好。3.MariaDB提供了更多的存储引擎和功能。4.MySQL采用双重许可证,MariaDB完全开源。选择时应考虑现有基础设施、性能需求、功能需求和许可证成本。

SQL与MySQL:澄清两者之间的关系 SQL与MySQL:澄清两者之间的关系 Apr 24, 2025 am 12:02 AM

SQL是一种用于管理关系数据库的标准语言,而MySQL是一个使用SQL的数据库管理系统。SQL定义了与数据库交互的方式,包括CRUD操作,而MySQL实现了SQL标准并提供了额外的功能,如存储过程和触发器。

MySQL:数据库,PHPMYADMIN:管理接口 MySQL:数据库,PHPMYADMIN:管理接口 Apr 29, 2025 am 12:44 AM

MySQL和phpMyAdmin可以通过以下步骤进行有效管理:1.创建和删除数据库:在phpMyAdmin中点击几下即可完成。2.管理表:可以创建表、修改结构、添加索引。3.数据操作:支持插入、更新、删除数据和执行SQL查询。4.导入导出数据:支持SQL、CSV、XML等格式。5.优化和监控:使用OPTIMIZETABLE命令优化表,并利用查询分析器和监控工具解决性能问题。

See all articles