MySQL - 如何提高SQL的查询效率(where条件优化)

目录

说在前面

35条优化规则

总结


说在前面

整天说SQL优化,SQL优化,到底怎么才算是SQL优化呢,下面从百度总结了一些关于Oracle里常用的一些有效的优化方法。仅供参考,文章内容来源于网络。

35条优化规则

(1)优先考虑建立索引

对查询进行优化,应尽量避免全表扫描,首先应考虑在 where 及 order by 涉及的列上建立索引。

(2)需要当心的WHERE子句

应尽量避免在 where 子句中使用!=或<>操作符,否则将引擎放弃使用索引而进行全表扫描。

  • ‘!=' 将不使用索引。记住, 索引只能告诉你什么存在于表中, 而不能告诉你什么不存在于表中

  • ‘||'是字符连接函数。就象其他函数那样, 停用了索引。 

  • ‘+'是数学函数。就象其他数学函数那样, 停用了索引。 

  • 相同的索引列不能互相比较,这将会启用全表扫描。 

(3)避免在索引列上使用IS NULL和IS NOT NULL

应尽量避免在 where 子句中对字段进行 null 值判断,否则将导致引擎放弃使用索引而进行全表扫描,如:

低效: (索引失效)

select id from t where num is null;

高效:(索引有效) 

可以在num上设置默认值0,确保表中num列没有null值,然后这样查询:

select id from t where num = 0;

(4)用UNION替换OR (适用于索引列)

应尽量避免在 where 子句中使用 or 来连接条件,否则将导致引擎放弃使用索引而进行全表扫描,如:

低效: (索引失效)

select id from t where num=10 or num=20;

高效:(索引有效) 

可以这样查询:

select id from t where num=10

union all

select id from t where num=20

(5)模糊查询也将会导致全表扫描

select id from t where name like '%abc%';

若要提高效率,可以考虑全文检索。

(6)IN 和 NOT IN 也要谨慎使用

否则会导致全表扫描

低效: 

select id from t where num in(1,2,3);

高效:

对于连续的数值,能用 between 就不要用 in 了:

select id from t where num between 1 and 3;

(7)避免在WHERE 子句中使用参数

如果在 where 子句中使用参数,也会导致全表扫描。因为SQL只有在运行时才会解析局部变量,但优化程序不能将访问计划的选择推迟到运行时;它必须在编译时进行选择。然而,如果在编译时建立访问计划,变量的值还是未知的,因而无法作为索引选择的输入项。如下面语句将进行全表扫描:

低效: 

  select id from t where num=@num

高效:

  可以改为强制查询使用索引:

  select id from t with(index(索引名)) where num=@num

(8)避免在 WHERE 子句中对字段进行表达式操作

这将导致引擎放弃使用索引而进行全表扫描。如:

低效:select id from t where num/2=100;

高效:  select id from t where num=100*2;

(9)避免在WHERE 子句中对字段进行函数操作

这将导致引擎放弃使用索引而进行全表扫描。如:

低效: 

name以abc开头的id :select id from t where substring(name,1,3)='abc'

'2005-11-30'生成的id:select id from t where datediff(day,createdate,'2005-11-30')=0

高效:

  select id from t where name like 'abc%'

  select id from t where createdate>='2005-11-30' and createdate<'2005-12-1'

(10)不要在 WHERE 子句中的“=”左边进行运算

包括不限于函数、算术运算或其他表达式运算,否则系统将可能无法正确使用索引。

(11)复合索引注意事项

在使用索引字段作为条件时,如果该索引是复合索引,那么必须使用到该索引中的第一个字段作为条件时才能保证系统使用该索引,否则该索引将不会被使用,并且应尽可能的让字段顺序与索引顺序相一致。

(12)不要写一些没有意义的查询

如需要生成一个空表结构:

select col1,col2 into #t from t where 1=0

这类代码不会返回任何结果集,但是会消耗系统资源的,应改成这样:

create table #t(...)

(13)用EXISTS替代IN、用NOT EXISTS替代NOT IN

在许多基于基础表的查询中,为了满足一个条件,往往需要对另一个表进行联接。在这种情况下,使用EXISTS(或NOT EXISTS)通常将提高查询的效率。在子查询中,NOT IN子句将执行一个内部的排序和合并。无论在哪种情况下,NOT IN都是最低效的 (因为它对子查询中的表执行了一个全表遍历)。为了避免使用NOT IN ,我们可以把它改写成外连接(Outer Joins)或NOT EXISTS。

低效: select num from a where num in(select num from b)

高效: select num from a where exists(select 1 from b where num=a.num)

(14)当索引数目大于一定比例时,索引则无效

并不是所有索引对查询都有效,SQL是根据表中数据来进行查询优化的,当索引列有大量数据重复时,SQL查询可能不会去利用索引,如一表中有字段sex,male、female几乎各一半,那么即使在sex上建了索引也对查询效率起不了作用。

(15)索引数目最好保持在6个左右

索引并不是越多越好,索引固然可以提高相应的 select 的效率,但同时也降低了 insert 及 update 的效率,因为 insert 或 update 时有可能会重建索引,所以怎样建索引需要慎重考虑,视具体情况而定。一个表的索引数最好不要超过6个,若太多则应考虑一些不常使用到的列上建的索引是否有必要。

(16)避免更新 clustered 索引数据列

应尽可能的避免更新 clustered 索引数据列,因为 clustered 索引数据列的顺序就是表记录的物理存储顺序,一旦该列值改变将导致整个表记录的顺序的调整,会耗费相当大的资源。若应用系统需要频繁更新 clustered 索引数据列,那么需要考虑是否应将该索引建为 clustered 索引。

(17)尽量使用数字型字段

若只含数值信息的字段尽量不要设计为字符型,这会降低查询和连接的性能,并会增加存储开销。这是因为引擎在处理查询和连接时会逐个比较字符串中每一个字符,而对于数字型而言只需要比较一次就够了。

(18)使用 varchar/nvarchar 代替 char/nchar

因为首先变长字段存储空间小,可以节省存储空间,其次对于查询来说,在一个相对较小的字段内搜索效率显然要高些。

(19)SELECT子句中避免使用‘*’

任何地方都不要使用 select * from t ,用具体的字段列表代替“*”,不要返回用不到的任何字段。

(20)尽量使用表变量来代替临时表

如果表变量包含大量数据,请注意索引非常有限(只有主键索引)。

(21)避免频繁创建和删除临时表

以减少系统表资源的消耗。

(22)适当的使用临时表

临时表并不是不可使用,适当地使用它们可以使某些例程更有效,例如:

当需要重复引用大型表或常用表中的某个数据集时。但是,对于一次性事件,最好使用导出表。

(23)使用 select into 代替 create table

在新建临时表时,如果一次性插入数据量很大,那么可以使用 select into 代替 create table,避免造成大量 log ,以提高速度;如果数据量不大,为了缓和系统表的资源,应先create table,然后insert。

(24)显式删除临时表

如果使用到了临时表,在存储过程的最后务必将所有的临时表显式删除,先 truncate table ,然后 drop table ,这样可以避免系统表的较长时间锁定。

(25)尽量避免使用游标

因为游标的效率较差,如果游标操作的数据超过1万行,那么就应该考虑改写。

(26)基于集的方法通常更有效

使用基于游标的方法或临时表方法之前,应先寻找基于集的解决方案来解决问题,基于集的方法通常更有效。

(27)根据情况去使用游标

与临时表一样,游标并不是不可使用。对小型数据集使用 FAST_FORWARD 游标通常要优于其他逐行处理方法,尤其是在必须引用几个表才能获得所需的数据时。在结果集中包括“合计”的例程通常要比使用游标执行的速度快。如果开发时间允许,基于游标的方法和基于集的方法都可以尝试一下,看哪一种方法的效果更好。

(28)无需在执行存储过程和触发器的每个语句后向客户端发送 DONE_IN_PROC 消息

在所有的存储过程和触发器的开始处设置 SET NOCOUNT ON ,在结束时设置 SET NOCOUNT OFF 。无需在执行存储过程和触发器的每个语句后向客户端发送 DONE_IN_PROC 消息。

(29)尽量避免向客户端返回大数据量

若数据量过大,应该考虑相应需求是否合理。

(30)尽量避免大事务操作

尽量避免大事务操作,提高系统并发能力。

(31)不要轻易用order by rand()

绝对不要轻易用order by rand() ,很可能会导致mysql的灾难!!

(32)每个表都应该设置一个ID主键

每个表都应该设置一个ID主键,最好的是一个INT型,并且设置上自动增加的  AUTO_INCREMENT标志,这点其实应该作为设计表结构的第一件必然要做的事!!
(33)拆分大的 DELETE 或 INSERT 语句

因为这两个操作是会锁表的,表一锁住了,别的操作都进不来了,就我来说 有时候我宁愿用for循环来一个个执行这些操作。
(34)永远别要用复杂的mysql语句来显示你的聪明

就我来说,看到一次关联了三,四个表的语句,只会让人觉得很不靠谱。 

(35)什么情况下无法使用索引

  • 以%开头的like查询;
  • 数据类型出现隐式转换的时候也不会使用索引,特别是当列类型是字符串,那么一定记得在where条件中把字符串常量值用引号引起来,否则即便这个列上有索引,MySQL也不会用到,因为MySQL默认把输入的常量值进行转换以后才进行检索;
  • 复合索引的情况下,如果查询条件不包含索引列的最左边部分,即不满足最左前缀原则,则不会使用索引;
  • 如果mysql估计使用索引扫描比全表扫描更慢,则不使用索引。(扫描数据超过30%,都会走全表);
  • 用or分割开的条件,如果 or前的条件中的列有索引,而后面的列中没有索引,那么涉及的索引都不会被用到;
  • 字段使用函数,将无法使用索引;
  • Join 语句中 Join 条件字段类型不一致的时候 MySQL 无法使用索引。

总结

以上优化,包括不限于Where条件语句优化,以及在where时索引如何使用,哪些失效以及避免产生的问题的总结。不仅仅适用于MySQL,本文仅根据 MySQL 为栗子。

关于Oracle 查询优化,这里个人总结了34条优化规则,可以点击:

https://blog.csdn.net/Soinice/article/details/84494737

你可能感兴趣的:(MySQL,MySQL,查询优化,数据库,SQL优化,索引处理)