京淘后端商品管理-Day10
1.注意事项
schema.xml 配置文件中有多余的注释 注意一下
1.知识复习
1.1安装数据库
1).安装数据库 yum install mariadb-server
2).启动数据库 systemctl start mariadb
3).配置数据库 mysql_secure_installation
4).开放数据库的对外访问权限
操作mysql库中的user表 修改数据库信息 之后重启数据库/刷新权限 flush privileges;
5).导入jtdb的数据库
1.2操作防火墙
1).配置开关 标识防火墙的以后的操作 systemctl disable firewalld.service
2).临时操作 操作防火墙现在的状态 systemctl stop firewalld.service
3).检查防火墙状态 firewall-cmd --state
1.3部署服务器
1).配置JDK tar -xvf jdk-8u51-linux-x64.tar.gz vim /etc/profile source /etc/profile
2).部署服务项 8081/8082/8083
3).设定后台启动
4).设定脚本启动
1.4安装nginx
1).下载nginx安装包
2).配置/编译/安装 ./configure make make install
3).查找nginx工作目录
4).启动nginx
5).配置nginx配置文件 实现反向代理
2.实现数据库高可用
2.1 项目部署之后弊端
问题描述1: 当数据库宕机之后,可能导致数据丢失.必须通过某些策略,保证数据的有效性.
问题描述2: 如果后端数据库宕机,则通过某些技术手段可以实现高可用(可以实现自动的故障迁移)
2.1 数据库数据同步
2.1.1 数据库数据同步的流程图
目的:为了保证数据不丢失
2.1.2 数据库热备份原理图
冷备份说明: 定期将数据库内容进行转储. 弊端:可能丢失数据. 公司中也会采用冷备份的方式以防万一.
2)数据库热备份原理
特点:可以保证数据的实时备份.
工作原理说明:
1.数据库主库将更新的数据信息写入到二进制日志文件中.
2.数据库从库通过IO线程去主库中获取二进制文件修改内容. 之后写入到中继日志中
3.数据库从库中的Sql线程读取中继日志中的信息,实现数据的同步.
并且为了降低组件之间的耦合性,采用异步的方式处理.
2.2 准备第二台Linux操作系统
2.2.1 复制虚拟机文件
运行虚拟机-并且修改名称
2.2.2 修改虚拟机IP地址
规定: 主机IP地址 192.168.126.129 从机 192.168.126.130
1).进入修改IP地址目录
cd /etc/sysconfig/network-scripts/
2).修改配置文件信息
3).重置网卡
2.3在slave中安装数据库
根据之前的笔记自己独立完成数据库安装
2.3.1 利用sqlYog工具链接从库
2.3.2 实现数据库导入导出
说明:在实现数据库主从之前,最好让主库和从库的数据一致.
2.4 数据库主从配置
2.4.1 开启数据库二进制文件
说明:默认条件下 数据库二进制文件是关闭的.如果需要开启,则必须手动配置. 之后重启数据库.
修改配置文件: vim /etc/my.cnf
2).修改之后,重启数据库
2.4.2 从库开启二进制文件
说明:修改从库之后,重启数据库
2).执行重启数据库指令
2.4.3 查询主库状态
说明:在数据库中执行如下指令
命令: show master status;
2.4.4 主从数据库挂载
说明:如果需要实现数据库的主从同步,应该由从库向主库进行挂载.
/*130是从机 实现主从的挂载 host/port/user/password/二进制文件/位置*/
change MASTER to MASTER_HOST="192.168.126.129",
MASTER_PORT=3306,
MASTER_USER="root",
MASTER_PASSWORD="root",
MASTER_LOG_FILE="mysql-bin.000001",
MASTER_LOG_POS=245;
/*开启主从服务*/
start slave;
/*检查主从同步状态*/
show SLAVE status;
主从状态说明
2.4.5 挂载报错的说明
1.先查询日志信息
2.修改数据库配置之后重启
3.停止主从服务 STOP SLAVE;
4.重新挂载数据库
/*130是从机 实现主从的挂载 host/port/user/password/二进制文件/位置*/
CHANGE MASTER TO MASTER_HOST="192.168.126.129",
MASTER_PORT=3306,
MASTER_USER="root",
MASTER_PASSWORD="root",
MASTER_LOG_FILE="mysql-bin.000001",
MASTER_LOG_POS=245;
/*开启主从服务*/
START SLAVE;
2.4.6 测试主从同步
说明:操作数据库主库,检查数据库从库是否正确.
2.5 数据库读写分离-负载均衡机制
2.5.1 读写分离说明
当数据库执行写操作时,应该操作主库. 如果用户进行读操作时应该读从库.
实现该机制需要准备一个代理数据库服务器.
2.5.2 Mycat介绍
2.5.3 Mycat安装
1).上传Mycat安装包
2).解压Mycat安装包
tar -xvf Mycat-server-1.7.0-DEV-20170416134921-linux.tar.gz
2.5.4 server.xml
注意事项: 数据库代理的端口号 8066端口
<!--用户标签-->
<user name="root">
<property name="password">root</property>
<!--与schema.xml中的配置相同 注意数据库的大小写-->
<property name="schemas">jtdb</property>
</user>
<user name="user">
<property name="password">user</property>
<property name="schemas">jtdb</property>
<property name="readOnly">true</property>
</user>
2.5.5 schema.xml
配置说明:该配置表示了读写分离/负载均衡的设置.
<writeHost host="hostM1" url="192.168.126.129:3306" user="root" password="root">
<!--读数据库1-->
<readHost host="hostS1" url="192.168.126.130:3306" user="root" password="root" />
<!--读数据库2-->
<readHost host="hostS2" url="192.168.126.129:3306" user="root" password="root" />
</writeHost>
2.5.6 上传配置文件
1).删除原有配置文件信息
rm -rf schema.xml server.xml
2).上传新的配置文件
2.5.7 启动mycat服务器
启动mycat ./mycat start
启动效果:
2.5.8 修改数据源配置
spring:
datasource:
#引入druid数据源
#type: com.alibaba.druid.pool.DruidDataSource
#driver-class-name: com.mysql.cj.jdbc.Driver
url: jdbc:mysql://192.168.126.129:8066/jtdb?serverTimezone=GMT%2B8&useUnicode=true&characterEncoding=utf8&autoReconnect=true&allowMultiQueries=true
username: root
password: root
2.5.9 负载均衡测试
启动程序链接数据库，检查数据访问是否正常。之后修改从库信息 检查负载均衡是否正确。
2.6 数据库的双机热备
2.6.1 数据库搭建原理
2.6.2 双主模式配置
注意事项: 搭建之前保证数据库的数据一致(更新操作)!!!
1).检查主库的状态
2).实现主从挂载
/*我之前是主库 现在是从库*/
CHANGE MASTER TO
MASTER_HOST="192.168.126.130",
MASTER_PORT=3306,
MASTER_user="root",
MASTER_PASSWORD="root",
MASTER_LOG_FILE="mysql-bin.000001",
MASTER_LOG_POS=482;
/* 启动主从服务*/
start slave
show SLAVE status;
3).主从状态检查
2.7 配置数据库高可用
2.7.1 什么是数据库高可用
说明: 当其中有一台数据库宕机之后,用户依然可以正确的访问数据库不受任何影响,(实现了故障迁移).主要数据库能够正常的工作,则重新启动数据库之后则可以实现自动的数据的同步.
2.7.2 实现数据库高可用配置
<?xml version="1.0"?>
<!DOCTYPE mycat:schema SYSTEM "schema.dtd">
<mycat:schema xmlns:mycat="http://io.mycat/">
<!--name属性是自定义的 dataNode表示数据库的节点信息 jtdb表示逻辑库-->
<schema name="jtdb" checkSQLschema="false" sqlMaxLimit="100" dataNode="jtdb"/>
<!--定义节点名称/节点主机/数据名称-->
<dataNode name="jtdb" dataHost="localhost1" database="jtdb" />
<!--参数介绍-->
<!--balance 0表示所有的读操作都会发往writeHost主机 -->
<!--1表示所有的读操作发往readHost和闲置的主节点中-->
<!--writeType=0 所有的写操作都发往第一个writeHost主机-->
<!--writeType=1 所有的写操作随机发往writeHost中-->
<!--dbType 表示数据库类型 mysql/oracle-->
<!--dbDriver="native" 固定参数 不变-->
<!--switchType=-1 表示不自动切换, 主机宕机后不会自动切换从节点-->
<!--switchType=1 表示会自动切换(默认值)如果第一个主节点宕机后,Mycat会进行3次心跳检测,如果3次都没有响应,则会自动切换到第二个主节点-->
<!--并且会更新/conf/dnindex.properties文件的主节点信息 localhost1=0 表示第一个节点.该文件不要随意修改否则会出现大问题-->
<dataHost name="localhost1" maxCon="1000" minCon="10" balance="1"
writeType="0" dbType="mysql" dbDriver="native" switchType="1" slaveThreshold="100">
<!--心跳检测策略-->
<heartbeat>select 1</heartbeat>
<!--配置第一台主机主要进行写库操作,在默认的条件下Mycat主要操作第一台主机在第一台主机中已经实现了读写分离.因为默认写操作会发往137的数据库.读的操作默认发往141.如果从节点比较忙,则主节点分担部分压力.
-->
<writeHost host="hostM1" url="192.168.126.129:3306" user="root" password="root">
<!--读数据库1-->
<readHost host="hostS1" url="192.168.126.130:3306" user="root" password="root" />
<!--读数据库2-->
<readHost host="hostS2" url="192.168.126.129:3306" user="root" password="root" />
</writeHost>
<!--定义第二台主机 由于数据库内部已经实现了双机热备.-->
<!--Mycat实现高可用.当第一个主机137宕机后.mycat会自动发出心跳检测.检测3次.-->
<!--如果主机137没有给Mycat响应则判断主机死亡.则回启东第二台主机继续为用户提供服务.-->
<!--如果137主机恢复之后则处于等待状态.如果141宕机则137再次持续为用户提供服务.-->
<!--前提:实现双机热备.-->
<writeHost host="hostM2" url="192.168.126.130:3306" user="root" password="root">-
<!--读数据库1-->
<readHost host="hostS1" url="192.168.126.130:3306" user="root" password="root" />
<!--读数据库2-->
<readHost host="hostS2" url="192.168.126.129:3306" user="root" password="root" />
</writeHost>
</dataHost>
</mycat:schema>
2.7.3 实现数据库高可用
1).将修改好的配置文件导入mycat
2).重启mycat服务器
3).测试数据库高可用
先将主库宕机,之后查询数据,之后重启主库 检查主从同步的状态是否正确.
2.8 作业
1).实现数据库高可用 1.配置数据库主从 2.配置双机热备形式 3.利用mycat实现读写分离/主从复制/负载均衡/高可用
2).将项目完整的发布 要求tomcat集群连接数据库代理服务器.