半个月时间把 MySQL 重新巩固了一遍,梳理了一篇几万字 “超硬核” 文章!

在这之前,我们学习过了:数据库的核心知识点是哪些关系型数据工作流程设计理论与流程,以及SQL 语法基础、语句练习与优化。以上这些,都是学习数据库的必备入门基础知识点,需要重点掌握。

今天开始,我们进入死磕数据库系列之:MySQL 数据库的学习之旅。

注:本文是不定期更新内容的,如有帮助,大家点赞支持一波!!!!

MySQL 数据库简介

MySQL 是最流行的关系型数据库管理系统,在 WEB 应用方面 MySQL 是最好的 RDBMS(Relational Database Management System:关系数据库管理系统)应用软件之一。

MySQL 是一个关系型数据库管理系统,由瑞典 MySQL AB 公司开发,目前属于 Oracle 公司。MySQL 是一种关联数据库管理系统,关联数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。

  • MySQL 是开源的,目前隶属于 Oracle 旗下产品。
  • MySQL 支持大型的数据库。可以处理拥有上千万条记录的大型数据库。
  • MySQL 使用标准的 SQL 数据语言形式。
  • MySQL 可以运行于多个系统上,并且支持多种语言。这些编程语言包括 C、C++、Python、Java、Perl、PHP、Eiffel、Ruby 和 Tcl 等。
  • MySQL 对PHP有很好的支持,PHP 是目前最流行的 Web 开发语言。
  • MySQL 支持大型数据库,支持 5000 万条记录的数据仓库,32 位系统表文件最大可支持 4GB,64 位系统支持最大的表文件为8TB。
  • MySQL 是可以定制的,采用了 GPL 协议,你可以修改源码来开发自己的 MySQL 系统。

在日常工作与学习中,无论是开发、运维、还是测试,对于数据库的学习是不可避免的,同时也是日常工作的必备技术之一。在互联网公司,开源产品线比较多,互联网企业所用的数据库占比较重的还是MySQL。更多关于MySQL数据库的介绍,有兴趣的读者可以参考官方网站的文档和这篇文章:可能是全网最好的MySQL重要知识点

MySQL 安装

MySQL 8正式版8.0.11已发布,官方表示MySQL8要比MySQL 5.7快2倍,还带来了大量的改进和更快的性能!到底谁最牛呢?请看:MySQL 5.7 vs 8.0,哪个性能更牛?

详细的安装步骤请参阅:CentOS 下 MySQL 8.0 安装部署,超详细!

MySQL 多实例配置

MySQL数据库入门——多实例配置

MySQL 命令基础操作

Windows服务

-- 启动MySQL
net start mysql

-- 创建Windows服务
sc create mysql binPath= mysqld_bin_path(注意:等号与值之间有空格)

连接与断开服务器

mysql -h 地址 -P 端口 -u 用户名 -p 密码

SHOW PROCESSLIST -- 显示哪些线程正在运行
SHOW VARIABLES -- 显示系统变量信息

数据库操作

-- 查看当前数据库
SELECT DATABASE();

-- 显示当前时间、用户名、数据库版本
SELECT now(), user(), version();

-- 创建库
CREATE DATABASE[ IF NOT EXISTS] 数据库名 数据库选项
    数据库选项:
        CHARACTER SET charset_name
        COLLATE collation_name

-- 查看已有库
    SHOW DATABASES[ LIKE 'PATTERN']

-- 查看当前库信息
    SHOW CREATE DATABASE 数据库名

-- 修改库的选项信息
    ALTER DATABASE 库名 选项信息

-- 删除库
    DROP DATABASE[ IF EXISTS] 数据库名
        同时删除该数据库相关的目录及其目录内容

更多相关的操作基础知识点请参阅以下文章:

1047 行 MySQL 详细学习笔记(值得学习与收藏)

MySQL 数据类型

字段类型

整型

TINYINT, SMALLINT, MEDIUMINT, INT, BIGINT 分别使用 8, 16, 24, 32, 64 位存储空间,一般情况下越小的列越好。

INT(11) 中的数字只是规定了交互工具显示字符的个数,对于存储和计算来说是没有意义的。

浮点数

FLOAT 和 DOUBLE 为浮点类型,DECIMAL 为高精度小数类型。CPU 原生支持浮点运算,但是不支持 DECIMAl 类型的计算,因此 DECIMAL 的计算比浮点类型需要更高的代价。

FLOAT、DOUBLE 和 DECIMAL 都可以指定列宽,例如 DECIMAL(18, 9) 表示总共 18 位,取 9 位存储小数部分,剩下 9 位存储整数部分。

字符串

主要有 CHAR 和 VARCHAR 两种类型,一种是定长的,一种是变长的。

VARCHAR 这种变长类型能够节省空间,因为只需要存储必要的内容。但是在执行 UPDATE 时可能会使行变得比原来长,当超出一个页所能容纳的大小时,就要执行额外的操作。MyISAM 会将行拆成不同的片段存储,而 InnoDB 则需要分裂页来使行放进页内。

VARCHAR 会保留字符串末尾的空格,而 CHAR 会删除。

时间和日期

MySQL 提供了两种相似的日期时间类型: DATETIME 和 TIMESTAMP。

1.DATETIME

能够保存从 1001 年到 9999 年的日期和时间,精度为秒,使用 8 字节的存储空间。

它与时区无关。

默认情况下,MySQL 以一种可排序的、无歧义的格式显示 DATETIME 值,例如“2008-01-16 22:37:08”,这是 ANSI 标准定义的日期和时间表示方法。

2.TIMESTAMP

和 UNIX 时间戳相同,保存从 1970 年 1 月 1 日午夜(格林威治时间)以来的秒数,使用 4 个字节,只能表示从 1970 年 到 2038 年。

它和时区有关,也就是说一个时间戳在不同的时区所代表的具体时间是不同的。

MySQL 提供了 FROM_UNIXTIME() 函数把 UNIX 时间戳转换为日期,并提供了 UNIX_TIMESTAMP() 函数把日期转换为 UNIX 时间戳。

默认情况下,如果插入时没有指定 TIMESTAMP 列的值,会将这个值设置为当前时间。

应该尽量使用 TIMESTAMP,因为它比 DATETIME 空间效率更高。

关于MySQL 数据类型与存储引擎的更多详细介绍:死磕数据库系列(五):MySQL 数据类型与存储引擎介绍

MySQL 索引详解

什么是索引?

索引是辅助存储引擎高效获取数据的一种数据结构。

半个月时间把 MySQL 重新巩固了一遍,梳理了一篇几万字 “超硬核” 文章!_第1张图片

半个月时间把 MySQL 重新巩固了一遍,梳理了一篇几万字 “超硬核” 文章!_第2张图片

很多人形象的说索引就是数据的目录,便于存储引擎快速的定位数据。

索引的分类

我们经常从以下几个方面对索引进行分类

从数据结构的角度对索引进行分类
  • B+tree
  • Hash
  • Full-texts索引
从物理存储的角度对索引进行分类
  • 聚簇索引
  • 二级索引(辅助索引)
从索引字段特性角度分类
  • 主键索引
  • 唯一索引
  • 普通索引
  • 前缀索引
从组成索引的字段个数角度分类
  • 单列索引
  • 联合索引(复合索引)
  • 数据结构角度看索引

下表是MySQL常见的存储引擎InnoDB,MyISAM和Memory分别支持的索引类型

半个月时间把 MySQL 重新巩固了一遍,梳理了一篇几万字 “超硬核” 文章!_第3张图片

半个月时间把 MySQL 重新巩固了一遍,梳理了一篇几万字 “超硬核” 文章!_第4张图片

在实际使用中,InnoDB作为MySQL建表时默认的存储引擎

对上表进行横向查看可以了解到,B+tree是MySQL中被存储引擎采用最多的索引类型。

详细内容:死磕数据库系列(六):MySQL 索引详解

MySQL 性能优化

MySQL优化方案

想必大家都知道,面试期间一提到数据库,就会聊到数据库优化相关问题。网上关于数据库优化的文章也是眼花缭乱,层出不穷。今天将会通过这篇文章细分几点给大家汇总整理出一套关于MySQL数据库的优化方案,让大家通过学习这篇文章不再被面试官吊打!

半个月时间把 MySQL 重新巩固了一遍,梳理了一篇几万字 “超硬核” 文章!_第5张图片

半个月时间把 MySQL 重新巩固了一遍,梳理了一篇几万字 “超硬核” 文章!_第6张图片

成本:硬件优化 > 系统配置优化 > 表结构优化 > SQL语句优化 > 索引优化。

效果:索引优化 > SQL语句优化 > 表结构优化 > 系统配置优化 > 硬件优化。

死磕数据库系列(七):MySQL 性能优化(硬件,系统配置,表结构,SQL语句)

MySQL 主从复制

MySQL复制有两种方法:

  • 传统方式:基于主库的bin-log将日志事件和事件位置复制到从库,从库再加以 应用来达到主从同步的目的。
  • Gtid方式:global transaction identifiers是基于事务来复制数据,因此也就不 依赖日志文件位置,同时又能更好的保证主从库数据一致性。

MySQL数据库主从同步实战过程

MySQL 主从同步架构中你不知道的“坑”(上)

MySQL 主从同步架构中你不知道的“坑”(下)

这里顺便提一下:ROW 还是 STATEMENT?线上 MySQL Binlog 怎么选? 这篇文章,就这三种模式有何区别,在生产如何选择,做一个具体的案例详解。

MySQL复制有多种类型:

  • 异步复制:一个主库,一个或多个从库,数据异步同步到从库。
  • 同步复制:在MySQL Cluster中特有的复制方式。
  • 半同步复制:在异步复制的基础上,确保任何一个主库上的事务在提交之前至 少有一个从库已经收到该事务并日志记录下来。
  • 延迟复制:在异步复制的基础上,人为设定主库和从库的数据同步延迟时间, 即保证数据延迟至少是这个参数。

MySQL主从复制延迟解决方案:高可用数据库主从复制延时的解决方案

MySQL另一种主从同步的方案:基于 Gtid 的 MySQL 主从同步实践

MySQL 数据备份与恢复

数据备份多种方式:

  • 物理备份是指通过拷贝数据库文件的方式完成备份,这种备份方式适用于数据库很大,数据重要且需要快速恢复的数据库
  • 逻辑备份是指通过备份数据库的逻辑结构(create database/table语句)和数据内容(insert语句或者文本文件)的方式完成备份。这种备份方式适用于数据库不是很大,或者你需要对导出的文件做一定的修改,又或者是希望在另外的不同类型服务器上重新建立此数据库的情况
  • 通常情况下物理备份的速度要快于逻辑备份,另外物理备份的备份和恢复粒度范围为整个数据库或者是单个文件。对单表是否有恢复能力取决于存储引擎,比如在MyISAM存储引擎下每个表对应了独立的文件,可以单独恢复;但对于InnoDB存储引擎表来说,可能每个表示对应了独立的文件,也可能表使用了共享数据文件
  • 物理备份通常要求在数据库关闭的情况下执行,但如果是在数据库运行情况下执行,则要求备份期间数据库不能修改
  • 逻辑备份的速度要慢于物理备份,是因为逻辑备份需要访问数据库并将内容转化成逻辑备份需要的格式;通常输出的备份文件大小也要比物理备份大;另外逻辑备份也不包含数据库的配置文件和日志文件内容;备份和恢复的粒度可以是所有数据库,也可以是单个数据库,也可以是单个表;逻辑备份需要再数据库运行的状态下执行;它的执行工具可以是mysqldump或者是select … into outfile两种方式
  • 生产数据库备份方案:高逼格企业级MySQL数据库备份方案
  • MySQL数据库物理备份方式:Xtrabackup实现数据的备份与恢复

MySQL 高可用架构设计与实战

高可用架构对于互联网服务基本是标配,无论是应用服务还是数据库服务都需要做到高可用。对于一个系统而言,可能包含很多模块,比如前端应用,缓存,数据库,搜索,消息队列等,每个模块都需要做到高可用,才能保证整个系统的高可用。对于数据库服务而言,高可用可能更复杂,对用户的服务可用,不仅仅是能访问,还需要有正确性保证,因此数据库的高可用方案是一直以来的讨论热点,今天就各种的高可用方案,谈一下个人的一些看法,如有错误,还请指正!!

具体的几种高可用方案介绍请参阅:浅谈MySQL集群高可用架构

MySQL高可用方案:MySQL 同步复制及高可用方案总结
官方也提供一种高可用方案:官方工具|MySQL Router 高可用原理与实战
MHA
  • MHA(Master High Availability)目前在MySQL高可用方面是一个相对成熟的解决方案,该软件由两部分组成:MHA Manager(管理节点)和MHA Node(数据节点。
  • MHA Manager: 可以单独部署在一台独立的机器上管理多个master-slave集群,也可以部署在一台slave节点上。
  • MHA Node: 行在每台MySQL服务器上。
  • MHA Manager会定时探测集群中的master节点,当master出现故障时,它可以自动将最新数据的slave提升为新的master,然后将所有其他的slave重新指向新的master。整个故障转移过程对应用程序完全透明。

MHA高可用方案实战:MySQL集群高可用架构之MHA

MGR
  • Mysql Group Replication(MGR)是从5.7.17版本开始发布的一个全新的高可用和高扩张的MySQL集群服务。
  • 高一致性,基于原生复制及paxos协议的组复制技术,以插件方式提供一致数据安全保证;
  • 高容错性,大多数服务正常就可继续工作,自动不同节点检测资源征用冲突,按顺序优先处理,内置动防脑裂机制;
  • 高扩展性,自动添加移除节点,并更新组信息;
  • 高灵活性,单主模式和多主模式。单主模式自动选主,所有更新操作在主进行;多主模式,所有server同时更新。

MySQL 数据库读写分离高可用(待更新)

MySQL 分库分库(待更新)

MySQL性能监控(待更新)

MySQL 管理工具(待更新)

MySQL 开发规范与使用技巧(待更新)

。。。。。。。。。。。还有,暂时目录没有完成。敬请期待。

你可能感兴趣的:(数据库mysql后端运维程序员)