初识Mysql--存储引擎篇(学优化必看,附各性能对比结果)

Mysql存储引擎

  • Mysql常用存储引擎
  • MyISAM
    • MyISAM的特点介绍
    • MyIAM支持的存储格式:
    • MyISAM适用的生产场景
  • InnoDB
    • InnoDB特点介绍
    • InnoDB适用生产场景
  • NDB
  • 修改存储引擎
  • 常用存储引擎对比
  • 【实验】测试相同环境下,Innodb和MyISAM 这两个引擎的读写性能创造实验环境,模拟大量数据(模拟200万条记录)

Mysql常用存储引擎

  • mysql常用的存储引擎有MyISAM,InnoDB和NDB等,这里主要介绍这3个存储引擎:

MyISAM

  • 它主要用于大多数的Web、数据仓库(OLAP)和其它应用中。

MyISAM存储引擎, MyISAM特点是不支持事务,适合olap应用, MyISAM表由MYD和MYI组成。mysql-5.0版本之前, MyISAM默认支持的表大小为4G,从MySQL-5.0以后, MyISAM默认支持256T的表单数据。 MyISAM只缓存索引数据,MySQL-5.1.23版本之前无论32、64位操作系统环境下,缓存索引的缓冲区最大只能4G,在之后的版本中,64位系统可以支持大于4G的索引缓冲区。

MyISAM的特点介绍

MyISAM不支持事务,也不支持外键约束,只支持全文索引,数据文件和索引文件是分开保存的。

  • 访问速度快,对事务完整性没有要求
  • MyISAM 适合查询、插入为主的应用
  • MyISAM在磁盘上存储成三个文件,文件名和表名都相同,但是扩展名分别为:
    .frm 文件存储表结构的定义
    数据文件的扩展名为 .MYD (MYData)
    索引文件的扩展名是 .MYI (MYIndex)

表级锁定形式,数据在更新时锁定整个表

数据库在读写过程中相互阻塞:

会在数据写入的过程阻塞用户数据的读取,也会在数据读取的过程中阻塞用户的数据写入

数据单独写入或读取,速度过程较快且占用资源相对少

MyIAM支持的存储格式:

1、静态表
静态(固定长度)表
静态表是默认的存储格式。静态表中的字段都是非可变字段,这样每个记录都是固定长度的,这种存储方式的优点是存储非常迅速,容易缓存,出现故障容易恢复;缺点是占用的空间通常比动态表多。

2、动态表
动态表包含可变字段,记录不是固定长度的,这样存储的优点是占用空间较少,但是频繁的更新、删除记录会产生碎片,需要定期执行 OPTIMIZE TABLE 语句或 myisamchk -r 命令来改善性能,并且出现故障的时候恢复相对比较困难。

3、压缩表
压缩表由 myisamchk 工具创建,占据非常小的空间,因为每条记录都是被单独压缩的,所以只有非常小的访问开支

MyISAM适用的生产场景

  • 公司业务不需要事务的支持
  • 单方面读取或写入数据比较多的业务
  • MyISAM存储引擎数据读写都比较频繁场景不适合
  • 使用读写并发访问相对较低的业务
  • 数据修改相对较少的业务
  • 对数据业务一致性要求不是非常高的业务
  • 服务器硬件资源相对比较差

InnoDB

  • 主要用于事务处理应用,并且支持事务的ACID特性和外键。

Innodb存储引擎,特点支持外键、行锁、非锁定读(默认情况下读取不会产生锁)、mysql-4.1开始支持每个innodb引擎的表单独放到一个表空间里。innodb通过使用MVCC来获取高并发性,并且实现sql标准的4种隔离级别,同时使用一种被称成next-key locking的策略来避免换读(phantom)现象。除此之外innodb引擎还提供了插入缓存(insert buffer)、二次写(double write)、自适应哈西索引(adaptive hash index)、预读(read ahead)等高性能技术。

InnoDB特点介绍

  • 支持事务,支持4个事务隔离级别
  • MySQL从5.5.5版本开始,默认的存储引擎为 InnoDB
  • 读写阻塞与事务隔离级别相关
  • 能非常高效的缓存索引和数据
  • 表与主键以簇的方式存储
  • 支持分区、表空间,类似oracle数据库
  • 支持外键约束,5.5前不支持全文索引,5.5后支持全文索引
  • 对硬件资源要求还是比较高的场合
  • 行级锁定,但是全 表扫描仍然会是表级锁定,如
  • update table set a=1 where user like ‘%zhang%’

InnoDB 中不保存表的行数,如 select count() from table; 时,InnoDB 需要扫描一遍整个表来计算有多少行,但是 MyISAM 只要简单的读出保存好的行数即可。需要注意的是,当 count()语句包含 where 条件时 MyISAM 也需要扫描整个表
对于自增长的字段,InnoDB 中必须包含只有该字段的索引,但是在 MyISAM 表中可以和其他字段一起建立组合索引
清空整个表时,InnoDB 是一行一行的删除,效率非常慢。MyISAM 则会重建表

InnoDB适用生产场景

  • 业务需要事务的支持
  • 行级锁定对高并发有很好的适应能力,但需确保查询是通过索引来完成
  • 业务数据更新较为频繁的场景
    如:论坛,微博等
  • 业务数据一致性要求较高
    如:银行业务
    硬件设备内存较大,利用InnoDB较好的缓存能力来提高内存利用率,减少磁盘IO的压力

NDB

支持COMMIT,ROLLBACK和其它事务特性。

  • NDB存储引擎,2003年MySQL从索爱公司收购的NDB引擎,NDB的特点是数据放在内存中,MySQL-5.1版本开始可以将非索引数据放到磁盘上。NDB之前的缺陷是join查询是MySQL数据库层完成的,而不是存储引擎完成的,复杂的join查询需要巨大的网络开销,速度很慢。当前MySQL cluster7.2版本中已经解决此问题,join查询效率提高了70倍

修改存储引擎

(1) 修改配置文件

可以通过修改数据库配置文件my.cnf中的storage_engine选项来改变默认的存储引擎。

例如:storage_engine = InnoDB

Mysql 5.5开始,默认为InnoDB

(2)在创建表的时候指定引擎

例如:

CREATE TABLE mytable (id int, title char(20)) ENGINE = INNODB

(3)修改表

ALTER TABLE mytable ENGINE = MyISAM

常用存储引擎对比

初识Mysql--存储引擎篇(学优化必看,附各性能对比结果)_第1张图片

【实验】测试相同环境下,Innodb和MyISAM 这两个引擎的读写性能创造实验环境,模拟大量数据(模拟200万条记录)

===================
InnoDB(test1)
mysql> create table test1(id int)
-> partition by hash(id) partitions 5;
Query OK, 0 rows affected (0.52 sec)

mysql> insert into test1 values(1);
Query OK, 1 row affected (0.05 sec)
.
.
mysql> insert into test1 values(10);
Query OK, 1 row affected (0.07 sec)

mysql> insert into test1 select * from test1;
Query OK, 2621440 rows affected (20.57 sec)
Records: 2621440 Duplicates: 0 Warnings: 0

=================
MyISAM(test3)
mysql> create table test3(id int) engine=myisam
-> partition by hash(id) partitions 5;
Query OK, 0 rows affected (0.34 sec)

mysql> insert into test3 values(1);
Query OK, 1 row affected (0.00 sec)
.
.
mysql> insert into test3 values(10);
Query OK, 1 row affected (0.00 sec)

mysql> insert into test3 select * from test3;
Query OK, 2621440 rows affected (1.37 sec)
Records: 2621440 Duplicates: 0 Warnings: 0

mysql> show table status like ‘test1’\G;
*************************** 1. row ***************************
Name: test1
Engine: InnoDB
Version: 10
Row_format: Compact
Rows: 11369271
Avg_row_length: 31
Data_length: 359661568
Max_data_length: 0
Index_length: 35209216
Data_free: 47185920
Auto_increment: NULL
Create_time: NULL
Update_time: NULL
Check_time: NULL
Collation: utf8_general_ci
Checksum: NULL
Create_options: partitioned
Comment:
1 row in set (2.47 sec)

ERROR:
No query specified

mysql> show table status like ‘test3’\G;
*************************** 1. row ***************************
Name: test3
Engine: MyISAM
Version: 10
Row_format: Fixed
Rows: 9437184
Avg_row_length: 7
Data_length: 66060288
Max_data_length: 0
Index_length: 213734400
Data_free: 0
Auto_increment: NULL
Create_time: 2021-01-31 09:01:20
Update_time: 2021-01-31 09:01:52
Check_time: 2021-01-31 09:02:01
Collation: utf8_general_ci
Checksum: NULL
Create_options: partitioned
Comment:
1 row in set (0.04 sec)

ERROR:
No query specified

=======================
下面是增删改操作的效率对比
(1)插入数据
mysql> insert into test3 select * from test3;
Query OK, 5242880 rows affected (2.81 sec) — MyISAM
Records: 5242880 Duplicates: 0 Warnings: 0

mysql> insert into test1 select * from test1;
Query OK, 5242880 rows affected (1 min 19.74 sec)— InnoDB
Records: 5242880 Duplicates: 0 Warnings: 0

结论:插入数据:MyISAM 效率优于 InnoDB

(2)UPDATE
mysql> update test1 set id=1 where id=2;
Query OK, 1048576 rows affected (38.26 sec) — InnoDB
Rows matched: 1048576 Changed: 1048576 Warnings: 0

mysql> update test3 set id=1 where id=2;
Query OK, 1048576 rows affected (8.86 sec)— MyISAM
Rows matched: 1048576 Changed: 1048576 Warnings: 0

结论:UPDATE:MyISAM 优于 InnoDB

(3)创建索引
mysql> create index id on test1(id);
Query OK, 0 rows affected (1 min 35.15 sec)— InnoDB
Records: 0 Duplicates: 0 Warnings: 0

mysql> create index id on test3(id);
Query OK, 9437184 rows affected (41.02 sec)— MyISAM
Records: 9437184 Duplicates: 0 Warnings: 0

创建索引速度:MyISAM 优于 InnoDB

(4)DELETE
mysql> delete from test1 where id=‘10’;
Query OK, 1048576 rows affected (2 min 15.21 sec)— InnoDB

mysql> delete from test3 where id=‘10’;
Query OK, 1048576 rows affected (11.37 sec)— MyISAM

DELETE:MyISAM 优于 InnoDB

可以看到,MyISAM存储引擎,在增删改方面明显比InnoDB存储引擎的效率要高,这也是为什么仍有那么多数据库使用MyISAM存储引擎的原因。建议在不需要支持事务的时候,选择MyISAM 效果会更好。

你可能感兴趣的:(Mysql数据库,mysql,mysql优化,sql,运维,sqlserver)