一次MySQL的优化之旅

一、问题

有一张数据表，表数据现在200W条左右。表结构如下：

CREATE TABLE `device_desk` ( `id` int(11) NOT NULL AUTO_INCREMENT, `running_number` varchar(45) DEFAULT NULL COMMENT '流水号', `time` timestamp NULL DEFAULT NULL COMMENT '时间', `temperature` double DEFAULT NULL COMMENT '温度', `humidity` double DEFAULT NULL COMMENT '湿度', `body_infrared` int(11) DEFAULT NULL COMMENT '人体红外', `particulate_matter` int(11) DEFAULT NULL COMMENT 'PM2.5', `air_quality` int(11) DEFAULT NULL COMMENT '空气质量', `brightness` int(11) DEFAULT NULL COMMENT '灯光亮度', `device_id` int(11) DEFAULT NULL COMMENT '设备编号', `phone` varchar(45) DEFAULT NULL COMMENT '手机号码', `origin` varchar(100) DEFAULT NULL COMMENT '原始值', `color` varchar(45) DEFAULT NULL COMMENT '颜色(用于自定义备注)', `remark` varchar(45) DEFAULT NULL COMMENT '备注' PRIMARY KEY (`id`), KEY `fk_device_idx` (`device_id`), KEY `index_common_2` (`body_infrared`,`day`,`device_id`,`phone`,`time`), CONSTRAINT `fk_device2` FOREIGN KEY (`device_id`) REFERENCES `device` (`id`) ON DELETE NO ACTION ON UPDATE NO ACTION ) ENGINE=InnoDB AUTO_INCREMENT=2123065 DEFAULT CHARSET=utf8 COMMENT='桌子数据';

业务：
需要找出手机号码为13800000000，绑定的设备编号为164,在2015年11月26日有人在的时间段。body_infrared字段0表示无人，1、16、17都表示有人。

查询语句为：

select * from device_desk t where t.body_infrared>0 and t.phone='13800000000' and t.device_id=164 and t.time like '2015-11-25%' order by t.time;

得到查询结果所需耗时为83秒。

下面我们相办法把这个查询时间尽可能缩短。

二、优化过程

1、使用精确的字段代替*

其实我这里需要获取的只有时间time,备注remark,和颜色color。

select t.time,t.remark,t.color from device_desk t where t.body_infrared>0 and t.phone='13800000000' and t.device_id=164 and t.time like '2015-11-25%' order by t.time;

特别是使用Hibernate作为ORM中间件的朋友,会习惯性地使用HQL获取整表的所有数据，然后部分数据竟然要比获取所有数据要快。

2、优化时间的模糊查询

timestamp 类型的字段可以通过类字符串比较的方式来作为模糊查询的条件。而MySQL对于like %关键字作为查询条件是全表扫描的，则没法使用索引。因为我要查询的是当天（某天）的数据，因为我为这张表增加一个day字段，用于保存每天的日期。

增加day字段：

ALTER TABLE `time_table`.`device_desk` ADD COLUMN `day` VARCHAR(45) NULL COMMENT '日期' AFTER `remark`;

为原有的数据的day字段赋值：

update device_desk t set t.day= DATE_FORMAT(`t`.`time`, '%Y-%m-%d') where t.day is null; 

这个操作涉及数据比较多，执行过程会比较长。

更新查询语句为：

select t.time,t.remark,t.color from device_desk t where t.body_infrared>0 and t.phone='13800000000' and t.device_id=164 and t.day='2015-11-25' order by t.time;

3、建立索引

为数据表增加一个组合索引：

ALTER TABLE `time_table`.`device_desk` ADD INDEX `index_common_2` (`body_infrared` ASC, `day` DESC, `device_id` ASC, `phone` ASC, `time` DESC);

索引建立成功后，执行查询语句的时候发生需要的时间还是很长。
查看一下查询语句的执行过程：

explain select t.time,t.remark,t.color from device_desk t where t.body_infrared>0 and t.phone='13800000000' and t.device_id=164 and t.day='2015-11-25' order by t.time;

结果：

这里发现我们的select语句并没有使用到我们建立的索引。
经过一番度娘谷哥后，发现MySQL的where条件中用到大于或者小于时，也是进行全表扫描，是不会使用索引查询的。所以把这个大于查询更换掉就好。

explain select t.time,t.remark,t.color from device_desk t where (t.body_infrared=1 or t.body_infrared=16 or t.body_infrared=17) and t.day= '2015-11-25' and t.device_id=164 and t.phone='13800000000' order by t.time;

这样就使用到我们建立的索引了。

查询效率也得到了大大的改善。