explain详解与索引最佳实践

使用EXPLAIN关键字能够模拟优化器执行SQL语句,分析你的查询语句或是结构的性能瓶颈;mysql

在 select 语句以前增长 explain 关键字,MySQL 会在查询上设置一个标记,执行查询会返回执行计划的信息,而不是执行这条SQL;sql

注意:若是 from 中包含子查询,仍会执行该子查询,将结果放入临时表中;session

咱们既然要学习 explain,那咱们就要建立一些表;函数

复制代码
复制代码
# 演员表
DROP TABLE IF EXISTS `actor`;
CREATE TABLE `actor` (
    `id` int(11) NOT NULL,
    `name` varchar(45) DEFAULT NULL,
    `update_time` datetime DEFAULT NULL,
    PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
INSERT INTO `actor` (`id`, `name`, `update_time`) VALUES (1,'a','2017-12-2 15:27:18'), (2,'b','2017-12-22 15:27:18'), (3,'c','2017-12-22 15:27:18');

# 电影表
DROP TABLE IF EXISTS `film`;
CREATE TABLE `film` (
    `id` int(11) NOT NULL AUTO_INCREMENT,
    `name` varchar(10) DEFAULT NULL,
    PRIMARY KEY (`id`),
    KEY `idx_name` (`name`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
INSERT INTO `film` (`id`, `name`) VALUES (3,'film0'),(1,'film1'),(2,'film2');

# 演员和电影的关联表
DROP TABLE IF EXISTS `film_actor`;
CREATE TABLE `film_actor` (
    `id` int(11) NOT NULL,
    `film_id` int(11) NOT NULL,
    `actor_id` int(11) NOT NULL,
    `remark` varchar(255) DEFAULT NULL,
    PRIMARY KEY (`id`),
    KEY `idx_film_actor_id` (`film_id`,`actor_id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
INSERT INTO `film_actor` (`id`, `film_id`, `actor_id`) VALUES (1,1,1),(2,1,2),(3,2,1);
复制代码
复制代码

explain 两个变种 

 (1)explain extended:会在 explain 的基础上额外提供一些查询优化的信息。紧随其后经过 show warnings 命令能够获得优化后的查询语句,从而看出优化器优化了什么。额外还有 filtered 列,是一个半分比的值,rows * filtered/100 能够估算出将要和 explain 中前一个表进行链接的行数(前一个表指 explain 中的id值比当前表id值小的表)。性能

mysql> explain extended select * from film where id = 1;
mysql> show warnings;

 

 

 

 

 (2)explain partitions:相比 explain 多了个 partitions 字段,若是查询是基于分区表的话,会显示查询将访问的分区。mysql索引

explain 中的列

1
explain  select  from  actor;

以上的执行计划结果:学习

 

 

 1. id 列

id 列的编号是 select 的序列号,有几个 select 就有几个id,而且 id 的出现顺序是按 select 出现的顺序增加的。优化

id 列越大执行优先级越高,id 相同则从上往下执行,id为NULL最后执行。搜索引擎

2. select_type 列

select_type 表示对应行是简单仍是复杂的查询。简单查询只有 simple,复杂查询有:primary,subquery,derived,union;url

(1)simple:简单查询。查询不包含 子查询 和 union;

mysql> explain select * from film where id = 2;

 

 

(2)primary:最外层的 select ;----复杂查询
(3)subquery:包含在 select 中的子查询(不在 from 子句中) -- 复杂查询
(4)derived:包含在 from 子句中的子查询。MySQL会将结果存放在一个临时表中,也称为派生表(derived的英文含义) ; --复杂查询
用下面的例子了解 primary、subquery 和 derived 类型: 


mysql> set session optimizer_switch='derived_merge=off'; #关闭mysql5.7新特性对衍生表的合并优化
mysql> explain select (select 1 from actor where id = 1) from (select * from film where id = 1) der;
mysql> set session optimizer_switch='derived_merge=on'; #还原默认配置

 

 

分析SQL的执行顺序: 先执行 film 表的查询 --> 再执行 actor 表的查询 --> 最后再执行生成的临时表查询;

第1行( id 为 1)的 select_type 为 primary,表示的最外层的查询;id 为 1,是最小的,则最后执行;

第2行( id 为 3)的 select_type 为 derived,表示的 from 后面的子查询,也叫派生表,别名为 der 的派生表;id 为 3,是最大的,则最早执行的;

第3行(id 为 2)的 select_type 为 subquery,表示的 from 前面的子查询;id 为 2,是中间的,则在中间执行;

(5)union:在 union 中的第二个和以后的 select 都为 union;

mysql> explain select 1 union all select 1;

 

 

 3. table 列

 这一列表示 explain 的一行正在访问哪一个表。

当 from 子句中有子查询时,table列是 <derivenN> 格式,表示当前查询依赖 id=N 的查询,因而先执行 id=N 的查询。

当有 union 时,UNION RESULT 的 table 列的值为<union1,2>,1和2表示参与 union 的select 行 id。

NULL:mysql可以在优化阶段分解查询语句,在执行阶段用不着再访问表或索引。例如:在索引列中选取最小值,能够单独查找索引来完成,不须要在执行时访问表

mysql> explain select min(id) from film;

 

 

4. type列

这一列表示关联类型或访问类型,即MySQL决定如何查找表中的行,查找数据行记录的大概范围。

依次从最优到最差分别为:system > const > eq_ref > ref > range > index > ALL

通常来讲,得保证查询达到 range 级别,最好达到 ref

  (1)constsystem:mysql能对查询的某部分进行优化并将其转化成一个常量(能够看show warnings 的结果)。 system = 1。

用于 primary key 或 unique key 的全部列与常数比较时,因此表最多有一个匹配行,读取1次,速度比较快。system是const的特例,表里只有一条数据匹配时为 system;   (使用主键或者惟一索引的时候会出现)

mysql> set session optimizer_switch='derived_merge=off'; #关闭mysql5.7新特性对衍生表的合并优化
mysql> explain extended select * from (select * from film where id = 1) tmp;
mysql> set session optimizer_switch='derived_merge=on'; #还原默认配置

(2)eq_ref:primary key 或 unique key 索引的全部部分被链接使用 ,最多只会返回一条符合条件的记录。

这多是在 const 以外最好的联接类型了,简单的 select 查询不会出现这种 type。

(在链接查询的时候,使用了主键或惟一索引的所有字段)

mysql> explain select * from film_actor left join film on film_actor.film_id = film.id;

 

 

 说明:   film_id:表的联合索引中的一个字段 ,可是 type 为 All; 

 由于使用的 * 查询的,指的要查询全部的字段,可是 film_actor 表的 remark 字段没有创建索引的,因此须要全表扫描;

 (3)ref:相比 eq_ref,不使用惟一索引,而是使用普通索引 或者 惟一性索引的部分前缀,索引要和某个值相比较,可能会找到多个符合条件的行;

(使用的普通索引 或 联合惟一索引的部分前缀)

    <1> 简单 select 查询,name是普通索引(非惟一索引)

mysql> explain select * from film where name = 'film1';

     

 

 

    <2> 关联表查询,idx_film_actor_id 是 film_id 和 actor_id 的联合索引,这里使用到了film_actor的左边前缀 film_id 部分。

mysql> explain select film_id from film left join film_actor on film.id = film_actor.film_id;

 

 

 (4)range:范围扫描一般出如今  in(),  between ,  > ,   <,  >= 等操做中。使用一个索引来检索给定范围的行。 

mysql> explain select * from actor where id > 1;

 

 

 (5)index:扫描全表索引,一般比 All 快一些;

1
mysql> explain  select  from  film;

film 表的全部字段都创建了索引,使用 * 查询,则 type 为 index;

(6)ALL:即全表扫描,意味着mysql须要从头至尾去查找所须要的行。一般状况下这须要增长索引来进行优化了。

mysql> explain select * from actor;

 

 

5. possible_keys 列

这一列显示查询 可能 使用哪些 索引 来查找。
explain 时可能出现 possible_keys 有值,而 key 显示 NULL 的状况,这是由于表中数据很少,mysql认为索引对此查询帮助不大,选择了全表查询。
若是该列是NULL,则没有相关的索引。在这种状况下,能够经过检查 where 子句看是否能够创造一个适当的索引来提升查询性能,而后用 explain 查看效果。

6. key 列

这一列显示mysql 实际 采用哪一个 索引 来优化对该表的访问。
若是没有使用索引,则该列是 NULL。若是想强制mysql使用或忽视 possible_keys 列中的索引,在查询中使用 force index、ignore index。

1
mysql> explain  select  from  film  where  name  'film1' ;

 

 

 7. key_len列

这一列显示了mysql 在索引里使用的字节数,经过这个值能够算出具体使用了索引中的哪些列。
举例来讲,film_actor的联合索引 idx_film_actor_id 由 film_id 和 actor_id 两个int列组成,而且每一个int是4字节。经过结果中的key_len=4可推断出查询使用了第一个列:film_id列来执行索引查找。

mysql> explain select * from film_actor where film_id = 2;

 

 

key_len计算规则以下

复制代码
复制代码
字符串 char(n):n字节长度
    varchar(n):2字节存储字符串长度,若是是utf-8,则长度 3n + 2 数值类型 tinyint:1字节
    smallint:2字节
    int:4字节
    bigint:8字节
时间类型
    date:3字节
    timestamp:4字节
    datetime:8字节
复制代码
复制代码

注意若是字段容许为 NULL,须要1字节记录是否为 NULL

索引最大长度是768字节,当字符串过长时,mysql会作一个相似左前缀索引的处理,将前半部分的字符提取出来作索引。

8. ref列

这一列显示了在 key 列记录的索引中,表查找值所用到的列或常量,常见的有:const(常量),字段名(例:film.id)。

9. rows列

这一列是mysql估计要读取并检测的行数,注意这个不是结果集里的行数。扫描的索引可能的行数

10. Extra列

这一列展现的是额外信息。常见的重要值以下:

Using index >  Using index condition > Using where 

(1)Using index:使用覆盖索引;覆盖索引是select的数据列只用从索引中就可以取得,没必要读取数据行,换句话说查询列要被所建的索引覆盖。也就是查询的结果集中的全部字段都是在索引中的;

mysql> explain select film_id from film_actor where film_id = 1;

 

 

 

 

(2)Using index condition:查询的列不彻底被索引覆盖,where条件中是一个联合索引的前导列的范围;

mysql> explain select * from film_actor where film_id > 1;

 

 

(3)Using where:使用 where 语句来处理结果,查询的列未被索引覆盖;在查找使用索引的状况下,须要回表去查询所需的数据

mysql> explain select * from actor where name = 'a';

 

 

(4)Using temporary:mysql须要建立一张临时表来处理查询。出现这种状况通常是要进行优化的,首先是想到用索引来优化。

   <1>  actor.name没有索引,此时建立了张临时表来 distinct;(distinct 查询可能会使用到临时表)

mysql> explain select distinct name from actor;

   <2> film.name 创建了 idx_name 索引,此时查询时 extra 是 using index, 没有用临时表;将索引树加载到内存中,而后去重;

mysql> explain select distinct name from film;

 (5)Using filesort:将用外部排序而不是索引排序,数据较小时从内存排序,不然须要在磁盘完成排序。这种状况下通常也是要考虑使用索引来优化的。

  <1> actor.name未建立索引,会浏览actor整个表,保存排序关键字name和对应的id,而后排序name并检索行记录

mysql> explain select * from actor order by name;

 

 

  <2> film.name创建了idx_name索引,此时查询时extra是using index

mysql> explain select * from film order by name;

 

 

 (6)Select tables optimized away:使用某些聚合函数(好比 max、min)来访问存在索引的某个字段;已经被 MySQL 优化过了;

mysql> explain select min(id) from film;

 

 

索引实践

 示例表的建立

复制代码
复制代码
CREATE TABLE `employees` (
    `id` int(11) NOT NULL AUTO_INCREMENT,
    `name` varchar(24) NOT NULL DEFAULT '' COMMENT '姓名',
    `age` int(11) NOT NULL DEFAULT '0' COMMENT '年龄',
    `position` varchar(20) NOT NULL DEFAULT '' COMMENT '职位',
    `hire_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '入职时间',
    PRIMARY KEY (`id`),
    KEY `idx_name_age_position` (`name`,`age`,`position`) USING BTREE
) ENGINE=InnoDB AUTO_INCREMENT=4 DEFAULT CHARSET=utf8 COMMENT='员工记录表';

INSERT INTO employees(name,age,position,hire_time) VALUES('LiLei',22,'manager',NOW());
INSERT INTO employees(name,age,position,hire_time) VALUES('HanMeimei',23,'dev',NOW());
INSERT INTO employees(name,age,position,hire_time) VALUES('Lucy',23,'dev',NOW());
复制代码
复制代码

一、全值匹配

EXPLAIN SELECT * FROM employees WHERE name= 'LiLei';

 

 

name 是 联合索引 idx_name_age_position 的前导字段; 

 key_len 为 74,name为 varchar(24),则 3 * 24 + 2 = 74,因此使用联合索引中的 name 字段走的索引;

EXPLAIN SELECT * FROM employees WHERE name= 'LiLei' AND age = 22;

 

 

 name,age 是联合索引 idx_name_age_position 的字段; 

 key_len 为 78,name为 varchar(24),则 3 * 24 + 2 = 74;age 为 int ,因此值为4 ; 74 + 4 = 78,因此使用联合索引中的 name,age 字段走的索引;

EXPLAIN SELECT * FROM employees WHERE name= 'LiLei' AND age = 22 AND position ='manager';

 

  name,age,position 是联合索引 idx_name_age_position 的字段; 

 

 

 key_len 为 140,name为 varchar(24) 类型,则 3 * 24 + 2 = 74;age 为 int 类型,因此值为4;position 为 varchaer(20),因此值为 3 * 20 + 2 = 62; 74 + 4 + 62 = 140,因此使用联合索引中的 name,age,position 字段走的索引;

 2.最左前缀法则

 若是创建了联合索引,要遵照最左前缀法则。指的是查询从联合索引的最左前列开始而且不跳过索引中的列。 

(1)使用了联合索引的前两个字段查询;

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' and age = 22; #name,age 都走了索引

 

 

 key_len 为 78,(3 * 24 + 2) + 4 = 78;走了 name 和 age 索引;

 (2)使用联合索引的第1, 3 字段查询

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' and position ='manager'; #只有 name 走了索引

 

 

 key_len 为 74,name 的 长恰好为 74,因此只有 name 走了索引;

分析:联合索引的底层存储是 先比较最前面的字段,最前面的字段同样则比较第2个字段,第2个同样才去比较第3个字段;第1个字段 name 去比较了,能够搜索到一部分, position 为 联合索引的第3个字段,可是索引在存储和查找时候不可能跳过第2个字段直接去比较第3个字段的,position 字段仍是要列出大范围的数据作查询,所以 name 走了索引,position 没有走索引。

3. 不在索引列上作任何操做(计算、函数、(自动or手动)类型转换),会致使索引失效而转向全表扫描

(1)不给索引列进行函数操做

EXPLAIN SELECT * FROM employees WHERE left(name,3) = 'LiLei';

 

 

通常来讲,只要给索引列增长了函数操做,MySQL的底层直接就不会使用索引去处理的。

(2)给 hire_time 增长一个普通索引:

ALTER TABLE `employees`
ADD INDEX `idx_hire_time` (`hire_time`) USING BTREE ;
EXPLAIN select * from employees where date(hire_time) ='2018-09-30'; #不会走索引

 针对以上的SQL,转化为日期范围查询,就会走索引

EXPLAIN select * from employees where hire_time >='2018-09-30 00:00:00' and hire_time <='2018-09-30 23:59:59';

 还原最初索引状态

ALTER TABLE `employees`
DROP INDEX `idx_hire_time`;

4.存储引擎不能使用索引中范围查找条件右边的列  

联合索引的字段顺序,范围查找以后的列都不会去走索引;

EXPLAIN SELECT * FROM employees WHERE name= 'LiLei' AND age = 22 AND position ='manager'; #3个字段索引都会走
EXPLAIN SELECT * FROM employees WHERE name= 'LiLei' AND age > 22 AND position ='manager';

 

 

 只会走前两个字段的索引。 第一个字段 name 使用的相等,因此能够找到具体的数据,第2个字段会缩小到一个范围,第3个字段是在这个范围里作相等的查询,仍是会要将这个范围去遍历一遍的,因此只有 name,age 走了索引。

5.尽可能使用覆盖索引(只访问索引的查询(索引列包含查询列)),减小select *语句  

EXPLAIN SELECT name,age FROM employees WHERE name= 'LiLei' AND age = 23 AND position ='manager';

 

 

EXPLAIN SELECT * FROM employees WHERE name= 'LiLei' AND age = 23 AND position ='manager';

 

 

 6. mysql在使用不等于(!=或者<>)的时候没法使用索引会致使全表扫描

EXPLAIN SELECT * FROM employees WHERE name != 'LiLei';

 7. is null, is not null 也没法使用索引

建议在创建字段的时候都设置为 not null,设置一个默认的值;

EXPLAIN SELECT * FROM employees WHERE name is null

 8. like以通配符开头('$abc...')mysql索引失效会变成全表扫描操做

EXPLAIN SELECT * FROM employees WHERE name like '%Lei'

EXPLAIN SELECT * FROM employees WHERE name like 'Lei%'

模糊查找的时候,前模糊不走索引,后模糊会走索引;

由于在后模糊的时候,咱们知道了这个字段的前面有几个字符,咱们在索引中比较的只去比较前面的几个字符就行了;

问题:解决like '%字符串%'索引不被使用的方法?  

(a)使用覆盖索引,查询字段必须是创建覆盖索引字段  

EXPLAIN SELECT name,age,position FROM employees WHERE name like '%Lei%';

 (b)若是不能使用覆盖索引则可能须要借助搜索引擎

9. 字符串不加单引号索引失效  

EXPLAIN SELECT * FROM employees WHERE name = '1000'; #会走索引
EXPLAIN SELECT * FROM employees WHERE name = 1000;   #不会走索引

 由于 name 为字符串类型,MySql 会作隐式的类型转换,作了类型的转换,因此不会去走索引;

10.少用or或in,用它查询时,mysql不必定使用索引,mysql内部优化器会根据检索比例、表大小等多个因素总体评估是否使用索引,详见范围查询优化

EXPLAIN SELECT * FROM employees WHERE name = 'LiLei' or name = 'HanMeimei';

 11.范围查询优化

给年龄添加单值索引 : ALTER TABLE `employees` ADD INDEX `idx_age` (`age`) USING BTREE ;

explain select * from employees where age >=1 and age <=2000;

从执行计划的结果能够看出,以上的范围查找不会走索引;

没走索引缘由:mysql内部优化器会根据检索比例、表大小等多个因素总体评估是否使用索引。好比这个例子,多是因为单次数据量查询过大致使优化器最终选择不走索引

优化方法:能够将大的范围拆分红多个小范围

explain select * from employees where age >=1 and age <=1000;
explain select * from employees where age >=1001 and age <=2000;

 还原最初索引状态:ALTER TABLE `employees` DROP INDEX `idx_age`;

索引使用总结(通常状况下)

创建了一个联合索引: (a, b,c)

 like KK%至关于常量,因此走索引;%KK和%KK% 至关于范围,因此不走索引;

没走索引缘由:mysql内部优化器会根据检索比例、表大小等多个因素总体评估是否使用索引。好比这个例子,多是因为单次数据量查询过大致使优化器最终选择不走索引优化方法:能够讲大的范围拆分红多个小范围。

使用覆盖索引的时候就会出现

相关文章
相关标签/搜索