62 mysql 定位慢查询和索引优化

1 什么是慢查询? 如何定位数据库慢查询?

2,如何使用执行计划EXPLAIN 分析sql语句?

3,EXPLAIN select_type , type,key_len, Extra 有哪些作用?

4, 索引优化实战联合索需要遵循最佳左前缀法则。

5, like 查询如何使用索引避免全表扫描

联合索引查询需要注意的事项?
遵循最佳左前缀法则,

6, mysql索引优化方案注意事项。
导入的mysql https://note.youdao.com/ynoteshare1/index.html?id=7e550bfe5c734cec8413985b8351d9f8&type=note
慢查询:
SHOW VARIABLES LIKE '%query%' 查询慢日志相关信息
slow_query_log 默认是off关闭的,使用时,需要改为on 打开      
slow_query_log_file 记录的是慢日志的记录文件
long_query_time 默认是10S,每次执行的sql达到这个时长,就会被记录
SHOW STATUS LIKE '%slow_queries%' 查看慢查询状态

set global long_query_time = 1 修改慢查询时间1s
set global slow_query_log ='ON' #开启慢查询

注意:修改慢查询时间后,记得需要重新连接才可以生效

mysql sql 语句性能调优。
优化查询语句 : select
定位慢查询。
慢查询语句的定义: 在规定的时间内没有查询到结果。
通过执行计划 EXPLAIN

如何定位sql慢查询
SHOW VARIABLES LIKE '%query%'

执行计划EXPLAIN

通过慢查询定位一些查询比较慢的sql语句,在使用explain 工具排查该sql语句索引是否有生效。
EXPLAIN select * from mayikt_user where id=1;
EXPLAIN select * from mayikt_user where user_name='mayikt001';

id:选择标识符
select_type:表示查询的类型。
table:输出结果集的表
partitions:匹配的分区
type:表示表的连接类型
possible_keys:表示查询时,可能使用的索引
key:表示实际使用的索引
key_len:索引字段的长度
ref:列与索引的比较
rows:扫描出的行数(估算的行数)
filtered:按表条件过滤的行百分比
Extra:执行情况的描述和说明询,又是上述三种复杂查询中

explain 中的列

Id id列的编号是select 的序列号 id如果越大表示越优先执行。
id列的编号是 select 的序列号,有几个selcet 就有几个id,并且id的顺序是按 select 出现的顺序增长的。 MySql 将 select 查询分为简单查询(SIMPLE) 和复杂查询(PRIMARY)。
复杂查询分为三类: 简单子查询,派生表(from 语句中的子查询),union查询。
id 列越大执行优先级越高,id 相同则从上往下执行,id为null 最后执行。

EXPLAIN SELECT (SELECT 1 from mayikt_student WHERE id=1) from(SELECT * from mayikt_class WHERE id=1) m;
1 简单的子查询
EXPLAIN SELECT (SELECT 1 from mayikt_student LIMIT 1) from mayikt_class


image.png

2 from 的子查询

explain select id from (select id from mayikt_student) as mayikt_temp;

image.png

这个查询执行时有个临时表别名 mayikt_temp.外部 select 查询引用了这个临时表。
3,union 查询。
explain select 1 union all select 1

union结果总是放在一个匿名临时表中,临时表不在SQL中出现,因此它的id是NULL。
union查询就是把2条或者多条sql的查询结果合并成1个结果集。

2, select_type 列
表示查询的类型。
1, SIMPLE(简单select 不使用UNION查询或者子查询等)

  1. PRIMARY (子查询中的最外层查询,查询中若包含任何复杂的子部分,最外层的select 被标记为PRIMARY)
    3,UNION(UNION中的第二个或后面的SELECT语句)

4, DEPENDENT UNION(UNION 中的第二个或后面的SELECT语句,取决于外面的查询)
5,UNION RESULT(UNION 的结果,union语句中第二个select开始后面所有的select)
6,SUBQUERY(子查询中的第一个SELECT,结果不依赖于外部查询)
7, DEPENDENT SUBQUERY(子查询中的第一个select, 依赖于外部查询)
8,DERIVED(派生表的 SELECT ,FROm 字句的子查询)
9,UNCACHEABLE SUBQUERY(一个子查询的结果不能被缓存,必须重新评估外链接的第一行)

simple:简单查询。查询中不包含子查询和union

 
 explain select * from mayikt_student where id=1

image.png

2,primary: 复杂查询中最外层的select

  1. subquery: 包含在select 中 的子查询(不在from 子句中)
    4, derived: 包含在 from 子句中的子查询。MYSQL会将结果存放在一个临时表中,也称为派生表(derived 的英文含义)
 EXPLAIN SELECT(select 1 from  mayikt_student WHERE  id=1) FROM (SELECT * from mayikt_class where id=1) ma

image.png

union: 在 union 中的第二个和随后的select
union result: 从union 临时表检索出来的结果的 select


explain  select 1 union all  select 1
image.png

Mysql UNION 操作符用于连接2个以上的select 语句的结果组合到一个结果中,多个 select 语句会删除重复的语句。

Table
这一列表示explain 的一行正在访问那个表
当from 子句中有子查询的时候,table 列是格式,表示当前查询依赖于

id=n的查询,于是先执行 id=n的查询。
当有 union 时,UNION RESULT 的table 列的值为 ,1和2 表示参与 union的select 行id

 explain select * from mayikt_student where id=1

image.png

type 列
这一列表示 关联类型或访问类型,即 MYSql 决定如何查询表中的行,查询数据行记录的大概范围。
依次从最优到最差: system>const>eq_ref>ref>rang>index>ALL
一般来说,得保证查询达到rang 级别,,最好达到ref级别。
NuLL: mysql 能够在优化阶段分解查询语句,在执行阶段用不着在访问表或者索引,例如,在索引列中选取最小值。可以单独查询索引来完成。不需要在执行时访问表。
1, ALL: Full Table Scan, MySql 将遍历全表以找到匹配的行
2,index: Full Index Scan index与All 的区别为index类型值遍历索引树
3,rang: 只检索给定范围的行,使用一个索引来选择行
4, ref: 表示上述表的连接匹配条件,即那些列或常量被用于查找索引列上的值。
5, eq_ref 类似ref,区别在于使用的索引是唯一 的索引,对于每个索引键值,表中只有一条记录匹配,简单来说,就是多表连接中使用primary key 或者unique key 作为关联条件。
6, const ,system: 当mysql对查询某部分进行优化,并转换一个常量时候,使用这些类型进行访问,如将主键置于 where 列表中,mysql 就能将该查询转换为一个常量,system是const类型,当查询的表只有一行的情况下,使用system

7, null: mysql 在优化的过程中分解语句,执行时候甚至不用访问表或者索引。例如一个索引选取最小值可以通过单独索引查找完成。

1,const,system: mysql 能对查询的某部分进行优化并将其转换成一个常量(可以看show warnings的结果),用于primarykey 或unique key 的所有列与常数比较时,所以表最多有一个匹配行。读取一次,速度比较快,system是const的特例,表里只有一条元组匹配时为system


explain  select * from (select * from mayikt_student where id=1) m
image.png

2, eq_ref: primary key 或unique key 索引的所有部分被连接使用,最多只会返回一条符合条件的记录,这可能是在const 之外最好的连接类型了, 简单的select 查询不会出现这种type。



explain  select  * from  mayikt_student_class left  join mayikt_class  on  mayikt_student_class.id=mayikt_class.id
image.png

3, ref相比 eq_ref, 不使用唯一的索引,而是使用普通索引或者唯一性索引的部分前缀,索引要和某个值比较,可能会找到多个符合条件的行。

explain select * from mayikt_class where name = "第一期"; 
image.png

4,rang 范围扫描通常出现在 in() ,between,>,<,>= 等操作中,使用一个索引来检索给定范围的行。
···
explain select * from mayikt_student where id>10
···

image.png

5, index 扫描全表索引,这通常比all 快一些,(index 是从索引中读取的。而all 是从硬盘中读取的)

image.png

6, All: 既全表扫描,意味着mysql 需要从头到尾去查找所需要的行,通常情况下需要增加索引来优化了。


EXPLAIN SELECT * from mayikt_student
image.png

7, possible_keys
这一列显示查询可能使用安歇索引来查找。
explain 时可能 出现possible_keys 列 ,而key显示null 的情况,这种情况是因为表中数据不多,mysql 认为索引对此查询帮助不大,选择了全表查询。
如果该列是null ,则没有相关的索引,在这种情况下可以通过坚持where字句看是否可以创造个适当的索引来提高查询性能, 然后explain 查看效果

explain select * from mayikt_student where id>10

explain select * from mayikt_student_class where class_id='1';
image.png

8, key_len 计算规则如下:
字符串
char(n) n 字节长度
varchar(n) 2字节存储字符串长度,如果是utf-8,,则长度是3n+2
数值类型
tinyint : 1字节
smallint : 2字节
bigin: 8个字节:

时间类型
date: 3个字节
timestamp: 4个字节
datetime: 8个字节
如果字段允许null ,需要1字节记录是否为null
索引最大长度是768字节,当字符串过长时,mysql会做一个类似左前缀索引的处理,将前半部分的字符串提取出来做索引。

explain select * from mayikt_student_class where class_id='1' and student_id='1';
image.png

9,Extra列:
Extra 表示附加信息,常见的有几种(也按照查询效率从高到低排列);
1, Using index: 表示使用索引, 如果只有Using index,说明他没有查询到数据表,只用索引表就完成了这个查询,这个叫做覆盖索引。如果同时出现Using where 代表使用索引来查找读取记录,也可以

2.Using where:表示条件查询,如果不读取表的所有数据,或不是仅仅通过索引就可以获取所有需要的数据,则会出现 Using where。如果type列是ALL或index,而没有出现该信息,则你有可能在执行错误的查询:返回所有数据。
3.Using filesort:不是“使用文件索引”的含义!filesort是MySQL所实现的一种排序策略,通常在使用到排序语句ORDER BY的时候,会出现该信息。
4.Using temporary:表示为了得到结果,使用了临时表,这通常是出现在多表联合查询,结果排序的场合。

Using index: 查询的列被索引覆盖,并且where筛选条件时索引的前导列,是性能高的表现。一般使用了覆盖索引,对于innodb来说 ,如果是辅助索引性能会题海不少。
explain select class_id,id from mayikt_student_class where class_id='1';

[图片上传失败...(image-6ecde5-1603242755319)]

Using where:查询的列未被索引覆盖,where筛选条件非索引的前导列

Using where Using index:查询的列被索引覆盖,并且where筛选条件是索引列之一但是不是索引的前导列,意味着无法直接通过索引查找来查询到符合条件的数据

explain select class_id from mayikt_student_class where student_id='1';

explain select * from mayikt_student_class where student_id='1';

Using filesort mysql 会对结果使用一个外部索引排序,而不是按索引次序从表里读取行。此时mysql会根据联接类型浏览所有符合条件的记录,并保存排序关键字和行指针,然后排序关键字并按顺序检索行信息。这种情况下一般也是要考虑使用索引来优化的。

explain select * from mayikt_student ORDER BY name ;

注意:误区

如果问Using filesort是什么意思,大多数人应该会回答“基于硬盘的排序”或者“数据太多不适合内存,所以在硬盘上排序”。然而这些解释是错误的。

Using filesort仅仅表示没有使用索引的排序,事实上filesort这个名字很糟糕,并不意味着在硬盘上排序,filesort与文件无关。因此消除Using filesort的方法就是让查询sql的排序走索引。

explain select * from mayikt_class order by name;

索引优化:

SET FOREIGN_KEY_CHECKS=0;

-- ----------------------------
-- Table structure for employees
-- ----------------------------
DROP TABLE IF EXISTS `employees`;
CREATE TABLE `employees` (
  `id` int(11) NOT NULL AUTO_INCREMENT,
  `name` varchar(24) NOT NULL DEFAULT '' COMMENT '姓名',
  `age` int(11) NOT NULL DEFAULT '0' COMMENT '年龄',
  `position` varchar(20) NOT NULL DEFAULT '' COMMENT '职位',
  `hire_time` timestamp NOT NULL DEFAULT CURRENT_TIMESTAMP COMMENT '入职时间',
  PRIMARY KEY (`id`),
  KEY `idx_name_age_position` (`name`,`age`,`position`) USING BTREE
) ENGINE=InnoDB AUTO_INCREMENT=7 DEFAULT CHARSET=utf8 COMMENT='员工记录表';

-- ----------------------------
-- Records of employees
-- ----------------------------
INSERT INTO `employees` VALUES ('4', 'meite', '22', 'ceo', '2020-10-13 19:33:27');
INSERT INTO `employees` VALUES ('5', 'xiaowei', '23', 'kefu', '2020-10-13 19:33:27');
INSERT INTO `employees` VALUES ('6', 'xiaomin', '23', 'kefu', '2020-10-13 19:33:27');


1.全值匹配

EXPLAIN SELECT * FROM employees WHERE name= 'meite'; 74
EXPLAIN SELECT * FROM employees WHERE name= 'meite' AND age = 22; 78
EXPLAIN SELECT * FROM employees WHERE name= 'meite' AND age = 22 AND position ='ceo'; 140

2, 遵循最佳左前缀法则:


EXPLAIN SELECT * FROM employees WHERE age = 22 AND position ='ceo';
EXPLAIN SELECT * FROM employees WHERE position = 'ceo';
EXPLAIN SELECT * FROM employees WHERE name = 'meite';
EXPLAIN SELECT * FROM employees WHERE name= 'meite'  AND position ='ceo'; 

3,不要在索引上做任何操作(计算,函数,(自动or手动)类型转换,会导致索引失效而转向全表扫描)

4, 尽量使用覆盖索引(只访问索引的查询(索引列包含查询列)),减少select*语句。

5,mysql在使用不等于(!= 或者<>)的时候无法使用索引导致全表扫描

6, isnull is not null 也无法使用索引。

8.like以通配符开头('$abc...')mysql索引失效会变成全表扫描操作
EXPLAIN SELECT * FROM employees WHERE name like '%mei';
EXPLAIN SELECT * FROM employees WHERE name like 'mei%';

问题:解决like'%字符串%'索引不被使用的方法?
a)使用覆盖索引,查询字段必须是建立覆盖索引字段
EXPLAIN SELECT name FROM employees WHERE name like '%mei';

9.字符串不加单引号索引失效
EXPLAIN SELECT * FROM employees WHERE name = 644064779;
EXPLAIN SELECT * FROM employees WHERE name = '644064779';

10.少用or,用它连接时很多情况下索引会失效
EXPLAIN SELECT * FROM employees WHERE name = 'meite' or name = 'wangmazi';


你可能感兴趣的:(62 mysql 定位慢查询和索引优化)