Appleseseses
Appleseseses

MySQL高可用架构-MMM环境部署记录

 MMM介绍
MMM（Master-Master replication manager for MySQL）是一套支持双主故障切换和双主日常管理的脚本程序。MMM使用Perl语言开发，主要用来监控和管理MySQL Master-Master（双主）复制，可以说是mysql主主复制管理器。虽然叫做双主复制，但是业务上同一时刻只允许对一个主进行写入，另一台备选主上提供部分读服务，以加速在主主切换时刻备选主的预热，可以说MMM这套脚本程序一方面实现了故障切换的功能，另一方面其内部附加的工具脚本也可以实现多个slave的read负载均衡。关于mysql主主复制配置的监控、故障转移和管理的一套可伸缩的脚本套件（在任何时候只有一个节点可以被写入），这个套件也能对居于标准的主从配置的任意数量的从服务器进行读负载均衡，所以你可以用它来在一组居于复制的服务器启动虚拟ip，除此之外，它还有实现数据备份、节点之间重新同步功能的脚本。

MMM提供了自动和手动两种方式移除一组服务器中复制延迟较高的服务器的虚拟ip，同时它还可以备份数据，实现两节点之间的数据同步等。由于MMM无法完全的保证数据一致性，所以MMM适用于对数据的一致性要求不是很高，但是又想最大程度的保证业务可用性的场景。MySQL本身没有提供replication failover的解决方案，通过MMM方案能实现服务器的故障转移，从而实现mysql的高可用。对于那些对数据的一致性要求很高的业务，非常不建议采用MMM这种高可用架构。

从网上分享一个Mysql-MMM的内部架构图：


MySQL高可用架构-MMM环境部署记录_第1张图片
 

MySQL-MMM优缺点

1
2
优点：高可用性，扩展性好，出现故障自动切换，对于主主同步，在同一时间只提供一台数据库写操作，保证的数据的一致性。
缺点：Monitor节点是单点，可以结合Keepalived实现高可用。

MySQL-MMM工作原理

1
2
3
4
5
6
7
8
9
MMM(Master-Master replication managerfor Mysql，Mysql主主复制管理器)是一套灵活的脚本程序，基于perl实现，用来对mysql replication进行监控和故障迁移，
并能管理mysql Master-Master复制的配置(同一时间只有一个节点是可写的)。
mmm_mond：监控进程，负责所有的监控工作，决定和处理所有节点角色活动。此脚本需要在监管机上运行。
mmm_agentd：运行在每个mysql服务器上(Master和Slave)的代理进程，完成监控的探针工作和执行简单的远端服务设置。此脚本需要在被监管机上运行。
mmm_control：一个简单的脚本，提供管理mmm_mond进程的命令。
 
mysql-mmm的监管端会提供多个虚拟IP（VIP），包括一个可写VIP，多个可读VIP，通过监管的管理，这些IP会绑定在可用mysql之上，当某一台mysql宕机时，监管会将VIP迁移
至其他mysql。在整个监管过程中，需要在mysql中添加相关授权用户，以便让mysql可以支持监理机的维护。授权的用户包括一个mmm_monitor用户和一个mmm_agent用户，如果
想使用mmm的备份工具则还要添加一个mmm_tools用户。

MySQL-MMM高可用架构环境部署记录(自动切换读写分离)

0）机器配置信息

1
2
3
4
5
6
7
8
9
10
11
角色                  ip地址                 主机名字                  server- id
monitoring           182.48.115.233         mmm-monit                -
master1              182.48.115.236         db-master1               1
master2              182.48.115.237         db-master2               2
slave1               182.48.115.238         db-slave                 3
  
业务中的服务ip（vip）信息如下所示：
ip地址                     角色             描述
182.48.115.234            write           应用程序连接该ip对主库进行写请求
182.48.115.235             read              应用程序连接该ip进行读请求
182.48.115.239             read              应用程序连接该ip进行读请求

1）配置/etc/hosts（所有机器都要操作）

1
2
3
4
5
6
[root@mmm-monit ~] # cat /etc/hosts
.......
182.48.115.233   mmm-monit               
182.48.115.236   db-master1              
182.48.115.237   db-master2              
182.48.115.238   db-slave

2）首先在3台主机上安装mysql，部署复制环境

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
其中：182.48.115.236和182.48.115.237互为主从，182.48.115.238为1182.48.115.236的从
........................................................................
mysql安装参考：http: //www .cnblogs.com /kevingrace/p/6109679 .html
mysql主从/主主配置参考：http: //www .cnblogs.com /kevingrace/p/6256603 .html
........................................................................
---------182.48.115.236的my.cnf添加配置---------
server- id   = 1
log-bin = mysql-bin
log_slave_updates = 1
auto-increment-increment = 2
auto-increment-offset = 1
---------182.48.115.237的my.cnf添加配置---------
server- id   = 2
log-bin = mysql-bin
log_slave_updates = 1
auto-increment-increment = 2
auto-increment-offset = 2
---------182.48.115.238的my.cnf添加配置---------
server- id   = 3
log-bin = mysql-bin
log_slave_updates = 1
 
注意：
上面的server- id 不一定要按顺序来，只要没有重复即可。
然后182.48.115.236和182.48.115.237相互授权连接；182.48.115.236授权给182.48.115.238连接。
最后通过 "change master...." 做对应的主主和主从复制，具体操作步骤在此省略，可以参考上面给出的文档。

3）安装MMM（所有机器上都要执行）

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
.......先安装MMM所需要的Perl模块.......
[root@db-master1 ~] # vim install.sh        //在所有机器上执行下面的安装脚本
#!/bin/bash
wget http: //xrl .us /cpanm   --no-check-certificate
mv   cpanm  /usr/bin
chmod   755  /usr/bin/cpanm
cat   >  /root/list   << EOF
install   Algorithm::Diff
install   Class::Singleton
install   DBI
install   DBD::mysql
install   File::Basename
install   File::stat
install   File::Temp
install   Log::Dispatch
install   Log::Log4perl
install   Mail::Send
install   Net::ARP
install   Net::Ping
install   Proc::Daemon
install   Thread::Queue
install   Time::HiRes
EOF
 
for   package  in   ` cat   /root/list `
do
     cpanm $package
done
[root@db-master1 ~] # chmod 755 install.sh
[root@db-master1 ~] # ./install.sh
 
.........下载mysql-mmm软件，在所有服务器上安装............
[root@db-master1 ~] # wget http://mysql-mmm.org/_media/:mmm2:mysql-mmm-2.2.1.tar.gz
[root@db-master1 ~] # mv :mmm2:mysql-mmm-2.2.1.tar.gz mysql-mmm-2.2.1.tar.gz
[root@db-master1 ~] # tar -zvxf mysql-mmm-2.2.1.tar.gz
[root@db-master1 ~] # cd mysql-mmm-2.2.1
[root@db-master1 mysql-mmm-2.2.1] # make install
 
mysql-mmm安装后的主要拓扑结构如下所示（注意：yum安装的和源码安装的路径有所区别）：
/usr/lib/perl5/vendor_perl/5 .8.8 /MMM                      MMM使用的主要perl模块
/usr/lib/mysql-mmm                                        MMM使用的主要脚本
/usr/sbin                                                 MMM使用的主要命令的路径
/etc/init .d/                                            MMM的agent和monitor启动服务的目录
/etc/mysql-mmm                                            MMM配置文件的路径，默认所以的配置文件位于该目录下
/var/log/mysql-mmm                                        默认的MMM保存日志的位置
 
到这里已经完成了MMM的基本需求，接下来需要配置具体的配置文件，其中mmm_common.conf，mmm_agent.conf为agent端的配置文件，mmm_mon.conf为monitor端的配置文件。

4）配置agent端的配置文件，需要在db-master1 ，db-master2，db-slave上分别配置(配置内容一样)

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
先在db-master1主机上配置agent的mmm_common.conf文件（这个在所有机器上都要配置,包括monitor机器）
[root@db-master1 ~] # cd /etc/mysql-mmm/
[root@db-master1 mysql-mmm] # cp mmm_common.conf  mmm_common.conf.bak
[root@db-master1 mysql-mmm] # vim mmm_common.conf
active_master_role      writer
         cluster_interface               eth0
   
         pid_path                                 /var/run/mmm_agentd .pid
         bin_path                                 /usr/lib/mysql-mmm/
         replication_user                        slave                        // 注意这个账号和下面一行的密码是在前面部署主主/主从复制时创建的复制账号和密码
         replication_password                    slave@123
         agent_user                              mmm_agent
         agent_password                          mmm_agent
< /host >
         ip                                              182.48.115.236
         mode                                            master
         peer                                            db-master1
< /host >
         ip                                              182.48.115.237
         mode                                            master
         peer                                            db-master2
< /host >
         ip                                              182.48.115.238
         mode                                            slave
< /host >
         hosts                                           db-master1, db-master2
         ips                                             182.48.115.234
         mode                                            exclusive
< /role >
  
         hosts                                           db-master2, db-slave
         ips                                             182.48.115.235, 182.48.115.239
         mode                                            balanced
< /role >
  
配置解释，其中：
replication_user  用于检查复制的用户
agent_user为agent的用户
mode标明是否为主或者备选主，或者从库。
mode exclusive主为独占模式，同一时刻只能有一个主
中hosts表示目前的主库和备选主的真实主机ip或者主机名，ips为对外提供的虚拟机ip地址
中hosts代表从库真实的ip和主机名，ips代表从库的虚拟ip地址。
   
可以直接把mmm_common.conf从db-master1拷贝到db-master2、db-slave和mmm-monit三台主机的 /etc/mysql-mmm 下。
[root@db-master1 ~] # scp /etc/mysql-mmm/mmm_common.conf db-master2:/etc/mysql-mmm/
[root@db-master1 ~] # scp /etc/mysql-mmm/mmm_common.conf db-slave:/etc/mysql-mmm/
[root@db-master1 ~] # scp /etc/mysql-mmm/mmm_common.conf mmm-monit:/etc/mysql-mmm/
 
分别在db-master1，db-master2，db-slave三台主机的 /etc/mysql-mmm 配置mmm_agent.conf文件，分别用不同的字符标识。注意这个文件的this db1这行内容要修改
为各自的主机名。比如本环境中，db-master1要配置this db-master1，db-master2要配置为this db-master2，而db-slave要配置为this db-slave。
   
在db-master1（182.48.115.236）上：
[root@db-master1 ~] # vim /etc/mysql-mmm/mmm_agent.conf
include mmm_common.conf
this db-master1                                      
   
在db-master2（182.48.115.237）上：
[root@db-master2 ~] # vim /etc/mysql-mmm/mmm_agent.conf
include mmm_common.conf
this db-master2
   
在db-slave（182.48.115.238）上：
[root@db-slave ~] # vim /etc/mysql-mmm/mmm_agent.conf
include mmm_common.conf
this db-slave
   
------------------------------------------------------------------------------------------------------
接着在mmm-monit（182.48.115.233）配置monitor的配置文件：
[root@mmm-monit ~] # cp /etc/mysql-mmm/mmm_mon.conf  /etc/mysql-mmm/mmm_mon.conf.bak
[root@mmm-monit ~] # vim /etc/mysql-mmm/mmm_mon.conf
include mmm_common.conf
  
     ip                  182.48.115.233
     pid_path             /var/run/mysql-mmm/mmm_mond .pid
     bin_path             /usr/libexec/mysql-mmm
     status_path          /var/lib/mysql-mmm/mmm_mond .status
     ping_ips            182.48.115.238,182.48.115.237,182.48.115.236
     auto_set_online     10                // 发现节点丢失，则过10秒进行切换
< /monitor >
  
     monitor_user        mmm_monitor
     monitor_password    mmm_monitor
< /host >
  
debug 0                                  
   
这里只在原有配置文件中的ping_ips添加了整个架构被监控主机的ip地址，而在中配置了用于监控的用户。

5）创建监控用户，这里需要创建3个监控用户

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
具体描述：
用户名                 描述                                               权限
monitor user          MMM的monitor端监控所有的mysql数据库的状态用户           REPLICATION CLIENT
agent user            主要是MMM客户端用于改变的master的read_only状态用户      SUPER,REPLICATION CLIENT,PROCESS
repl                  用于复制的用户                                       REPLICATION SLAVE
 
在3台服务器(db-master1,db-master2,db-slave）进行授权，因为之前部署的主主复制，以及主从复制已经是ok的，所以这里在其中一台服务器执行就ok了,执行后
权限会自动同步到其它两台机器上。用于复制的账号之前已经有了，所以这里就授权两个账号。
 
在db-master1上进行授权操作：
mysql> GRANT SUPER, REPLICATION CLIENT, PROCESS ON *.* TO  'mmm_agent' @ '182.48.115.%'     IDENTIFIED BY  'mmm_agent' ;
Query OK, 0 rows affected (0.00 sec)
 
mysql> GRANT REPLICATION CLIENT ON *.* TO  'mmm_monitor' @ '182.48.115.%'   IDENTIFIED BY  'mmm_monitor' ;
Query OK, 0 rows affected (0.01 sec)
 
mysql> flush privileges;
Query OK, 0 rows affected (0.00 sec)
 
然后在db-master2和db-slave两台机器上查看，发现上面在db-master1机器上授权的账号已经同步过来了！

6）启动agent和monitor服务

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
最后分别在db-master1，db-master2，db-slave上启动agent
[root@db-master1 ~] # /etc/init.d/mysql-mmm-agent start     //将start替换成status，则查看agent进程起来了没？
Daemon bin:  '/usr/sbin/mmm_agentd'
Daemon pid:  '/var/run/mmm_agentd.pid'
Starting MMM Agent daemon... Ok
  
[root@db-master2 ~] # /etc/init.d/mysql-mmm-agent start
Daemon bin:  '/usr/sbin/mmm_agentd'
Daemon pid:  '/var/run/mmm_agentd.pid'
Starting MMM Agent daemon... Ok
  
[root@db-slave ~] # /etc/init.d/mysql-mmm-agent start
Daemon bin:  '/usr/sbin/mmm_agentd'
Daemon pid:  '/var/run/mmm_agentd.pid'
Starting MMM Agent daemon... Ok
  
接着在mmm-monit上启动monitor程序
[root@mmm-monit ~] # mkdir /var/run/mysql-mmm
[root@mmm-monit ~] # /etc/init.d/mysql-mmm-monitor start       
Daemon bin:  '/usr/sbin/mmm_mond'
Daemon pid:  '/var/run/mmm_mond.pid'
Starting MMM Monitor daemon: Ok
........................................................................................................
如果monitor程序启动出现如下报错：
Daemon bin:  '/usr/sbin/mmm_mond'
Daemon pid:  '/var/run/mmm_mond.pid'
Starting MMM Monitor daemon: Base class package  "Class::Singleton"   is empty.
     (Perhaps you need to  'use'   the module  which   defines that package first,
     or  make   that module available  in   @INC (@INC contains:  /usr/local/lib64/perl5   /usr/local/share/perl5   /usr/lib64/perl5/vendor_perl   /usr/share/perl5/vendor_perl   /usr/lib64/perl5   /usr/share/perl5   .).
  at  /usr/share/perl5/vendor_perl/MMM/Monitor/Agents .pm line 2
BEGIN failed--compilation aborted at  /usr/share/perl5/vendor_perl/MMM/Monitor/Agents .pm line 2.
Compilation failed  in   require at  /usr/share/perl5/vendor_perl/MMM/Monitor/Monitor .pm line 15.
BEGIN failed--compilation aborted at  /usr/share/perl5/vendor_perl/MMM/Monitor/Monitor .pm line 15.
Compilation failed  in   require at  /usr/sbin/mmm_mond   line 28.
BEGIN failed--compilation aborted at  /usr/sbin/mmm_mond   line 28.
failed
  
解决办法：
[root@mmm-monit ~] # perl -MCPAN -e shell
...............................................
如是执行这个命令后，有如下报错：
Can't  locate   CPAN.pm  in   @INC (@INC contains:  /usr/local/lib64/perl5   /usr/local/share/perl5   /usr/lib64/perl5/vendor_perl   /usr/share/perl5/vendor_perl   /usr/lib64/perl5   /usr/share/perl5   .).
BEGIN failed--compilation aborted.
  
解决：
[root@mmm-monit ~] # rpm -q perl-CPAN
package perl-CPAN is not installed
[root@mmm-monit ~] # yum install perl-CPAN
...............................................
执行上面的 "perl -MCPAN -e shell" 命令后，出现下面的安装命令
......
cpan[1]>  install   MIME::Entity           // 依次输入这些安装命令
cpan[2]>  install   MIME::Parser
cpan[3]>  install   Crypt::PasswdMD5
cpan[4]>  install   Term::ReadPassword
cpan[5]>  install   Crypt::CBC
cpan[6]>  install   Crypt::Blowfish
cpan[7]>  install   Daemon::Generic
cpan[8]>  install   DateTime
cpan[9]>  install   SOAP::Lite
  
或者直接执行下面的安装命令的命令也行：
[root@mmm-monit ~] # perl -MCPAN -e 'install HTML::Template'
[root@mmm-monit ~] # perl -MCPAN -e 'install MIME::Entity'
[root@mmm-monit ~] # perl -MCPAN -e 'install Crypt::PasswdMD5'
[root@mmm-monit ~] # perl -MCPAN -e 'install Term::ReadPassword'
[root@mmm-monit ~] # perl -MCPAN -e 'install Crypt::CBC'
[root@mmm-monit ~] # perl -MCPAN -e 'install Crypt::Blowfish'
[root@mmm-monit ~] # perl -MCPAN -e 'install Daemon::Generic'
[root@mmm-monit ~] # perl -MCPAN -e 'install DateTime'
[root@mmm-monit ~] # perl -MCPAN -e 'install SOAP::Lite'
............................................................................................................
 
monitor进程启动后，如下查看，发现进程并没有起来！
[root@mmm-monit ~] # /etc/init.d/mysql-mmm-monitor status
Daemon bin:  '/usr/sbin/mmm_mond'
Daemon pid:  '/var/run/mmm_mond.pid'
Checking MMM Monitor process: not running.
 
解决办法：
将mmm_mon.conf的debug模式开启设为1，即打开debug模式，然后执行:
[root@mmm-monit ~] # /etc/init.d/mysql-mmm-monitor start
.......
open2:  exec   of  /usr/libexec/mysql-mmm/monitor/checker    ping_ip failed at  /usr/share/perl5/vendor_perl/MMM/Monitor/Checker .pm line 143.
2017 /06/01   20:16:02  WARN Checker  'ping_ip'   is dead!
2017 /06/01   20:16:02  INFO Spawning checker  'ping_ip' ...
2017 /06/01   20:16:02 DEBUG Core: reaped child 17439 with  exit   65280
 
原因是mmm_mon.conf文件里check的bin_path路径写错了
[root@mmm-monit ~] # cat /etc/mysql-mmm/mmm_mon.conf|grep bin_path
     bin_path             /usr/libexec/mysql-mmm
将上面的bin_path改为 /usr/lib/mysql-mmm   即可解决！即：
[root@mmm-monit ~] # cat /etc/mysql-mmm/mmm_mon.conf|grep bin_path
     bin_path             /usr/lib/mysql-mmm
 
接着再次启动monitor进程
[root@mmm-monit ~] # /etc/init.d/mysql-mmm-monitor start
.......
FATAL Couldn 't open status file ' /var/lib/mysql-mmm/mmm_mond .status': Starting up without status inf
.......
Error  in   tempfile() using template  /var/lib/mysql-mmm/mmm_mond .statusXXXXXXXXXX: Parent directory ( /var/lib/mysql-mmm/ ) does not exist at  /usr/share/perl5/vendor_perl/MMM/Monitor/Agents .pm line 158.
Perl exited with active threads:
     6 running and unjoined
     0 finished and unjoined
     0 running and detached
 
原因是mmm_mon.conf文件里check的status_path路径写错了
[root@mmm-monit ~] # cat /etc/mysql-mmm/mmm_mon.conf |grep status_path
     status_path          /var/lib/mysql-mmm/mmm_mond .status
将上面的status_path改为 /var/lib/misc//mmm_mond .status 即可解决！即：
[root@mmm-monit ~] # cat /etc/mysql-mmm/mmm_mon.conf|grep status_path
     status_path          /var/lib/misc/mmm_mond .status
 
然后再次启动monitor进程
[root@mmm-monit ~] # /etc/init.d/mysql-mmm-monitor restart
........
2017 /06/01   20:57:14 DEBUG Sending  command   'SET_STATUS(ONLINE, reader(182.48.115.235), db-master1)'   to db-master2 (182.48.115.237:9989)
2017 /06/01   20:57:14 DEBUG Received Answer: OK: Status applied successfully!|UP:885492.82
2017 /06/01   20:57:14 DEBUG Sending  command   'SET_STATUS(ONLINE, writer(182.48.115.234), db-master1)'   to db-master1 (182.48.115.236:9989)
2017 /06/01   20:57:14 DEBUG Received Answer: OK: Status applied successfully!|UP:65356.14
2017 /06/01   20:57:14 DEBUG Sending  command   'SET_STATUS(ONLINE, reader(182.48.115.239), db-master1)'   to db-slave (182.48.115.238:9989)
2017 /06/01   20:57:14 DEBUG Received Answer: OK: Status applied successfully!|UP:945625.05
2017 /06/01   20:57:15 DEBUG Listener: Waiting  for   connection...
2017 /06/01   20:57:17 DEBUG Sending  command   'SET_STATUS(ONLINE, reader(182.48.115.235), db-master1)'   to db-master2 (182.48.115.237:9989)
2017 /06/01   20:57:17 DEBUG Received Answer: OK: Status applied successfully!|UP:885495.95
2017 /06/01   20:57:17 DEBUG Sending  command   'SET_STATUS(ONLINE, writer(182.48.115.234), db-master1)'   to db-master1 (182.48.115.236:9989)
2017 /06/01   20:57:17 DEBUG Received Answer: OK: Status applied successfully!|UP:65359.27
2017 /06/01   20:57:17 DEBUG Sending  command   'SET_STATUS(ONLINE, reader(182.48.115.239), db-master1)'   to db-slave (182.48.115.238:9989)
2017 /06/01   20:57:17 DEBUG Received Answer: OK: Status applied successfully!|UP:945628.17
2017 /06/01   20:57:18 DEBUG Listener: Waiting  for   connection...
.........
 
只要上面在启动过程中的check检查中没有报错信息，并且有successfully信息，则表示monitor进程正常了。
[root@mmm-monit ~] # ps -ef|grep monitor
root     30651 30540  0 20:59 ?        00:00:00 perl  /usr/lib/mysql-mmm/monitor/checker   ping_ip
root     30654 30540  0 20:59 ?        00:00:00 perl  /usr/lib/mysql-mmm/monitor/checker   mysql
root     30656 30540  0 20:59 ?        00:00:00 perl  /usr/lib/mysql-mmm/monitor/checker   ping
root     30658 30540  0 20:59 ?        00:00:00 perl  /usr/lib/mysql-mmm/monitor/checker   rep_backlog
root     30660 30540  0 20:59 ?        00:00:00 perl  /usr/lib/mysql-mmm/monitor/checker   rep_threads
 
那么，最终mmm_mon.cnf文件的配置如下：
[root@mmm-monit ~] # cat /etc/mysql-mmm/mmm_mon.conf
include mmm_common.conf
 
     ip                  182.48.115.233
     pid_path             /var/run/mysql-mmm/mmm_mond .pid
     bin_path             /usr/lib/mysql-mmm
     status_path          /var/lib/misc/mmm_mond .status
     ping_ips            182.48.115.238,182.48.115.237,182.48.115.236
     auto_set_online     10
< /monitor >
 
     monitor_user        mmm_monitor
     monitor_password    mmm_monitor
< /host >
 
debug 1
 
[root@mmm-monit ~] # ll /var/lib/misc/mmm_mond.status
-rw-------. 1 root root 121 6月   1 21:06  /var/lib/misc/mmm_mond .status
[root@mmm-monit ~] # ll /var/run/mysql-mmm/mmm_mond.pid
-rw-r--r--. 1 root root 5 6月   1 20:59  /var/run/mysql-mmm/mmm_mond .pid
 
－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－－
其中agent的日志存放在 /var/log/mysql-mmm/mmm_agentd .log，monitor日志放在 /var/log/mysql-mmm/mmm_mond .log，
启动过程中有什么问题，通常日志都会有详细的记录。

7）在monitor主机上检查集群主机的状态

1
2
3
4
5
6
7
8
9
10
11
12
13
[root@mmm-monit ~] # mmm_control checks all
db-master2   ping           [last change: 2017 /06/01   20:59:39]  OK
db-master2  mysql        [last change: 2017 /06/01   20:59:39]  OK
db-master2  rep_threads  [last change: 2017 /06/01   20:59:39]  OK
db-master2  rep_backlog  [last change: 2017 /06/01   20:59:39]  OK: Backlog is null
db-master1   ping           [last change: 2017 /06/01   20:59:39]  OK
db-master1  mysql        [last change: 2017 /06/01   20:59:39]  OK
db-master1  rep_threads  [last change: 2017 /06/01   20:59:39]  OK
db-master1  rep_backlog  [last change: 2017 /06/01   20:59:39]  OK: Backlog is null
db-slave     ping           [last change: 2017 /06/01   20:59:39]  OK
db-slave    mysql        [last change: 2017 /06/01   20:59:39]  OK
db-slave    rep_threads  [last change: 2017 /06/01   20:59:39]  OK
db-slave    rep_backlog  [last change: 2017 /06/01   20:59:39]  OK: Backlog is null

8）在monitor主机上检查集群环境在线状况

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
[root@mmm-monit ~] # mmm_control show
   db-master1(182.48.115.236) master /ONLINE . Roles: writer(182.48.115.234)
   db-master2(182.48.115.237) master /ONLINE . Roles: reader(182.48.115.235)
   db-slave(182.48.115.238) slave /ONLINE . Roles: reader(182.48.115.239)
 
然后到mmm agent机器上查看，就会发现vip已经绑定了
[root@db-master1 ~] # ip addr
1: lo: mtu 65536 qdisc noqueue state UNKNOWN
     link /loopback   00:00:00:00:00:00 brd 00:00:00:00:00:00
     inet 127.0.0.1 /8   scope host lo
     inet6 ::1 /128   scope host
        valid_lft forever preferred_lft forever
2: eth0: mtu 1500 qdisc pfifo_fast state UP qlen 1000
     link /ether   52:54:00:5f:58: dc   brd ff:ff:ff:ff:ff:ff
     inet 182.48.115.236 /27   brd 182.48.115.255 scope global eth0
     inet 182.48.115.234 /32   scope global eth0
     inet6 fe80::5054:ff:fe5f:58dc /64   scope link
        valid_lft forever preferred_lft forever
 
[root@db-master2 mysql-mmm] # ip addr
1: lo: mtu 65536 qdisc noqueue state UNKNOWN
     link /loopback   00:00:00:00:00:00 brd 00:00:00:00:00:00
     inet 127.0.0.1 /8   scope host lo
     inet6 ::1 /128   scope host
        valid_lft forever preferred_lft forever
2: eth0: mtu 1500 qdisc pfifo_fast state UP qlen 1000
     link /ether   52:54:00:1b:6e:53 brd ff:ff:ff:ff:ff:ff
     inet 182.48.115.237 /27   brd 182.48.115.255 scope global eth0
     inet 182.48.115.235 /32   scope global eth0
     inet6 fe80::5054:ff:fe1b:6e53 /64   scope link
        valid_lft forever preferred_lft forever
  
  [root@db-slave ~] # ip addr
1: lo: mtu 65536 qdisc noqueue state UNKNOWN
     link /loopback   00:00:00:00:00:00 brd 00:00:00:00:00:00
     inet 127.0.0.1 /8   scope host lo
     inet6 ::1 /128   scope host
        valid_lft forever preferred_lft forever
2: eth0: mtu 1500 qdisc pfifo_fast state UP qlen 1000
     link /ether   52:54:00:ca:d5:f8 brd ff:ff:ff:ff:ff:ff
     inet 182.48.115.238 /27   brd 182.48.115.255 scope global eth0
     inet 182.48.115.239 /27   brd 182.48.115.255 scope global secondary eth0:1
     inet6 fe80::5054:ff:feca:d5f8 /64   scope link
        valid_lft forever preferred_lft forever
 
从上面输出信息中可以看出，虚拟ip已经绑定到各agent上了。其中：
182.48.115.234顺利添加到182.48.115.236上作为主对外提供写服务
182.48.115.235顺利添加到182.48.115.237上作为主对外提供读服务
182.48.115.239顺利添加到182.48.115.238上作为主对外提供读服务

9）online（上线）所有主机

1
2
3
4
5
6
7
8
9
这里主机已经在线了，如果没有在线，可以使用下面的命令将相关主机online
[root@mmm-monit ~] # mmm_control set_online db-master1
OK: This host is already ONLINE. Skipping  command .
[root@mmm-monit ~] # mmm_control set_online db-master2
OK: This host is already ONLINE. Skipping  command .
[root@mmm-monit ~] # mmm_control set_online db-slave
OK: This host is already ONLINE. Skipping  command .
 
提示主机已经在线，已经跳过命令执行了。到这里整个集群就配置完成了。

--------------------------------------------------MMM高可用测试-------------------------------------------------------
已经完成高可用环境的搭建了，下面我们就可以做MMM的HA测试咯。

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
首先查看整个集群的状态，可以看到整个集群状态正常。
[root@mmm-monit ~] # mmm_control show
   db-master1(182.48.115.236) master /ONLINE . Roles: writer(182.48.115.234)
   db-master2(182.48.115.237) master /ONLINE . Roles: reader(182.48.115.235)
   db-slave(182.48.115.238) slave /ONLINE . Roles: reader(182.48.115.239)
  
1）模拟db-master2（182.48.115.237）宕机，手动停止mysql服务.
[root@db-master2 ~] # /etc/init.d/mysql stop
Shutting down MySQL.... SUCCESS!
  
在mmm-monit机器上观察monitor日志
[root@mmm-monit ~] # tail -f /var/log/mysql-mmm/mmm_mond.log
.........
2017 /06/01   21:28:17 FATAL State of host  'db-master2'   changed from ONLINE to HARD_OFFLINE ( ping : OK, mysql: not OK)
  
重新查看mmm集群的最新状态：
[root@mmm-monit ~] # mmm_control show
   db-master1(182.48.115.236) master /ONLINE . Roles: writer(182.48.115.234)
   db-master2(182.48.115.237) master /HARD_OFFLINE . Roles:
   db-slave(182.48.115.238) slave /ONLINE . Roles: reader(182.48.115.235), reader(182.48.115.239)
  
发现之前添加到db-master2对外提供读服务器的虚拟ip，即182.48.115.235已经漂移到db-slave机器上了.
[root@db-slave ~] # ip addr
1: lo: mtu 65536 qdisc noqueue state UNKNOWN
     link /loopback   00:00:00:00:00:00 brd 00:00:00:00:00:00
     inet 127.0.0.1 /8   scope host lo
     inet6 ::1 /128   scope host
        valid_lft forever preferred_lft forever
2: eth0: mtu 1500 qdisc pfifo_fast state UP qlen 1000
     link /ether   52:54:00:ca:d5:f8 brd ff:ff:ff:ff:ff:ff
     inet 182.48.115.238 /27   brd 182.48.115.255 scope global eth0
     inet 182.48.115.235 /32   scope global eth0
     inet 182.48.115.239 /27   brd 182.48.115.255 scope global secondary eth0:1
     inet6 fe80::5054:ff:feca:d5f8 /64   scope link
        valid_lft forever preferred_lft forever
  
测试mysql数据同步：
虽然db-master2机器的mysql服务关闭，但是由于它的vip漂移到db-slave机器上了，所以此时db-master1和db-slave这个时候是主从复制关系。
在db-master1数据库里更新数据，会自动更新到db-slave数据库里。
------------------
接着重启db-master2的mysql服务，可以看到db-master2由HARD_OFFLINE转到AWAITING_RECOVERY。这时候db-master2再次接管读请求。
[root@db-master2 ~] # /etc/init.d/mysql start
Starting MySQL.. SUCCESS!
  
在mmm-monit机器上观察monitor日志
[root@mmm-monit ~] # tail -f /var/log/mysql-mmm/mmm_mond.log
.........
2017 /06/01   21:36:00 FATAL State of host  'db-master2'   changed from HARD_OFFLINE to AWAITING_RECOVERY
2017 /06/01   21:36:12 FATAL State of host  'db-master2'   changed from AWAITING_RECOVERY to ONLINE because of auto_set_online(10 seconds). It was  in   state AWAITING_RECOVERY  for   12 seconds
  
[root@mmm-monit ~] # mmm_control show
   db-master1(182.48.115.236) master /ONLINE . Roles: writer(182.48.115.234)
   db-master2(182.48.115.237) master /ONLINE . Roles: reader(182.48.115.235)
   db-slave(182.48.115.238) slave /ONLINE . Roles: reader(182.48.115.239)
  
[root@db-master2 mysql-mmm] # ip addr
1: lo: mtu 65536 qdisc noqueue state UNKNOWN
     link /loopback   00:00:00:00:00:00 brd 00:00:00:00:00:00
     inet 127.0.0.1 /8   scope host lo
     inet6 ::1 /128   scope host
        valid_lft forever preferred_lft forever
2: eth0: mtu 1500 qdisc pfifo_fast state UP qlen 1000
     link /ether   52:54:00:1b:6e:53 brd ff:ff:ff:ff:ff:ff
     inet 182.48.115.237 /27   brd 182.48.115.255 scope global eth0
     inet 182.48.115.235 /32   scope global eth0
     inet6 fe80::5054:ff:fe1b:6e53 /64   scope link
        valid_lft forever preferred_lft forever
  
发现之前的vip资源又回到了db-master2机器上，db-master2重新接管了服务。并且db-master2恢复后，在故障期间更新的数据也会自动和其它两台机器同步！
  
---------------------------------------------------------------------------------------------------
2）模拟db-master1主库宕机,手动关闭mysql服务
[root@db-master1 ~] # /etc/init.d/mysql stop
Shutting down MySQL.... SUCCESS!
  
在mmm-monit机器上观察monitor日志
[root@mmm-monit ~] # tail -f /var/log/mysql-mmm/mmm_mond.log
.........
2017 /06/01   21:43:36 FATAL State of host  'db-master1'   changed from ONLINE to HARD_OFFLINE ( ping : OK, mysql: not OK)
  
查看mmm集群状态：
[root@mmm-monit ~] # mmm_control show
   db-master1(182.48.115.236) master /HARD_OFFLINE . Roles:
   db-master2(182.48.115.237) master /ONLINE . Roles: reader(182.48.115.235), writer(182.48.115.234)
   db-slave(182.48.115.238) slave /ONLINE . Roles: reader(182.48.115.239)
  
从上面可以发现，db-master1由以前的ONLINE转化为HARD_OFFLINE，移除了写角色，因为db-master2是备选主，所以接管了写角色，db-slave指向新的主库db-master2，
应该说db-slave实际上找到了db-master2的sql现在的位置，即db-master2的show master返回的值，然后直接在db-slave上change master to到db-master2。
  
db-master2机器上可以发现，db-master1对外提供写服务的vip漂移过来了
[root@db-master2 mysql-mmm] # ip addr
1: lo: mtu 65536 qdisc noqueue state UNKNOWN
     link /loopback   00:00:00:00:00:00 brd 00:00:00:00:00:00
     inet 127.0.0.1 /8   scope host lo
     inet6 ::1 /128   scope host
        valid_lft forever preferred_lft forever
2: eth0: mtu 1500 qdisc pfifo_fast state UP qlen 1000
     link /ether   52:54:00:1b:6e:53 brd ff:ff:ff:ff:ff:ff
     inet 182.48.115.237 /27   brd 182.48.115.255 scope global eth0
     inet 182.48.115.235 /32   scope global eth0
     inet 182.48.115.234 /32   scope global eth0
     inet6 fe80::5054:ff:fe1b:6e53 /64   scope link
        valid_lft forever preferred_lft forever
  
这个时候，在db-master2数据库里更新数据，db-slave数据库会自动同步过去。
  
------------------------
接着重启db-master1的mysql
[root@db-master1 ~] # /etc/init.d/mysql start
Starting MySQL.. SUCCESS!
  
在mmm-monit机器上观察monitor日志
[root@mmm-monit ~] # tail -f /var/log/mysql-mmm/mmm_mond.log
.........
2017 /06/01   21:52:14 FATAL State of host  'db-master1'   changed from HARD_OFFLINE to AWAITING_RECOVERY
  
再次查看mmm集群状态（发现写服务的vip转移到db-master2上了）：
[root@mmm-monit ~] # mmm_control show
   db-master1(182.48.115.236) master /ONLINE . Roles:
   db-master2(182.48.115.237) master /ONLINE . Roles: reader(182.48.115.235), writer(182.48.115.234)
   db-slave(182.48.115.238) slave /ONLINE . Roles: reader(182.48.115.239)
  
发现db-master1虽然恢复了，并已经上线在集群中，但是其之前绑定的写服务的vip并没有从db-master2上转移回来，即db-master1恢复后没有重新接管服务。
只有等到db-master2发生故障时，才会把182.48.115.234的写服务的vip转移到db-master1上，同时把182.48.115.235的读服务的vip转移到db-slave
机器上（然后db-master2恢复后，就会把转移到db-slave上的182.48.115.235的读服务的vip再次转移回来）。
 
---------------------------------------------------------------------------------------------------
再接着模拟db-slave从库宕机，手动关闭mysql服务
[root@db-slave ~] # /etc/init.d/mysql stop
Shutting down MySQL..                                      [确定]
 
在mmm-monit机器上观察monitor日志
[root@mmm-monit ~] # tail -f /var/log/mysql-mmm/mmm_mond.log
.........
2017 /06/01   22:42:24 FATAL State of host  'db-slave'   changed from ONLINE to HARD_OFFLINE ( ping : OK, mysql: not OK)
 
查看mmm集群的最新状态：
[root@mmm-monit ~] # mmm_control show
   db-master1(182.48.115.236) master /ONLINE . Roles: writer(182.48.115.234)
   db-master2(182.48.115.237) master /ONLINE . Roles: reader(182.48.115.235), reader(182.48.115.239)
   db-slave(182.48.115.238) slave /HARD_OFFLINE . Roles:
 
发现db-slave发生故障后，其读服务的182.48.115.239的vip转移到db-master2上了。
[root@db-master2 mysql-mmm] # ip addr
1: lo: mtu 65536 qdisc noqueue state UNKNOWN
     link /loopback   00:00:00:00:00:00 brd 00:00:00:00:00:00
     inet 127.0.0.1 /8   scope host lo
     inet6 ::1 /128   scope host
        valid_lft forever preferred_lft forever
2: eth0: mtu 1500 qdisc pfifo_fast state UP qlen 1000
     link /ether   52:54:00:1b:6e:53 brd ff:ff:ff:ff:ff:ff
     inet 182.48.115.237 /27   brd 182.48.115.255 scope global eth0
     inet 182.48.115.235 /32   scope global eth0
     inet 182.48.115.239 /32   scope global eth0
     inet6 fe80::5054:ff:fe1b:6e53 /64   scope link
 
当db-slave恢复后，读服务的vip还是再次转移回来，即重新接管服务。并且故障期间更新的数据会自动同步回来。
 
需要注意：
db-master1，db-master2，db-slave之间为一主两从的复制关系，一旦发生db-master2，db-slave延时于db-master1时，这个时刻db-master1 mysql宕机，
db-slave将会等待数据追上db-master1后，再重新指向新的主db-master2，进行change master to db-master2操作，在db-master1宕机的过程中，一旦db-master2
落后于db-master1，这时发生切换，db-master2变成了可写状态，数据的一致性将会无法保证。

总结：MMM不适用于对数据一致性要求很高的环境。但是高可用完全做到了。 

 

你可能感兴趣的:(MySQL)

  • mysql禁用远程登录 igotyback mysql
    去mysql库中的user表里，将host都改成localhost之后刷新权限FLUSHPRIVILEGES;
  • MYSQL面试系列-04 king01299 面试mysql面试
    MYSQL面试系列-0417.关于redolog和binlog的刷盘机制、redolog、undolog作用、GTID是做什么的？innodb_flush_log_at_trx_commit及sync_binlog参数意义双117.1innodb_flush_log_at_trx_commit该变量定义了InnoDB在每次事务提交时，如何处理未刷入（flush）的重做日志信息（redolog）。它
  • 关于Mysql 中 Row size too large (＞ 8126) 错误的解决和理解 秋刀prince mysqlmysql数据库
    提示：啰嗦一嘴，数据库的任何操作和验证前，一定要记得先备份！！！不会有错；文章目录问题发现一、问题导致的可能原因1、页大小2、行格式2.1compact格式2.2Redundant格式2.3Dynamic格式2.4Compressed格式3、BLOB和TEXT列二、解决办法1、修改页大小（不推荐）2、修改行格式3、修改数据类型为BLOB和TEXT列4、其他优化方式（可以参考使用）4.1合理设置数据
  • MongoDB知识概括 GeorgeLin98 持久层mongodb
    MongoDB知识概括MongoDB相关概念单机部署基本常用命令索引-IndexSpirngDataMongoDB集成副本集分片集群安全认证MongoDB相关概念业务应用场景：传统的关系型数据库（如MySQL），在数据操作的“三高”需求以及应对Web2.0的网站需求面前，显得力不从心。解释：“三高”需求：①Highperformance-对数据库高并发读写的需求。②HugeStorage-对海量数
  • 入门MySQL——查询语法练习 K_un
    前言：前面几篇文章为大家介绍了DML以及DDL语句的使用方法，本篇文章将主要讲述常用的查询语法。其实MySQL官网给出了多个示例数据库供大家实用查询，下面我们以最常用的员工示例数据库为准，详细介绍各自常用的查询语法。1.员工示例数据库导入官方文档员工示例数据库介绍及下载链接：https://dev.mysql.com/doc/employee/en/employees-installation.h
  • 博客网站制作教程 2401_85194651 javamaven
    首先就是技术框架：后端：Java+SpringBoot数据库：MySQL前端：Vue.js数据库连接：JPA(JavaPersistenceAPI)1.项目结构blog-app/├──backend/│├──src/main/java/com/example/blogapp/││├──BlogApplication.java││├──config/│││└──DatabaseConfig.java
  • ubuntu安装wordpress lissettecarlr
    1安装nginx网上安装方式很多，这就就直接用apt-get了apt-getinstallnginx不用启动啥，然后直接在浏览器里面输入IP:80就能看到nginx的主页了。如果修改了一些配置可以使用下列命令重启一下systemctlrestartnginx.service2安装mysql输入安装前也可以更新一下软件源，在安装过程中将会让你输入数据库的密码。sudoapt-getinstallmy
  • 计算机毕业设计PHP仓储综合管理系统（源码+程序+VUE+lw+部署） java毕设程序源码王哥 php课程设计vue.js
    该项目含有源码、文档、程序、数据库、配套开发软件、软件安装教程。欢迎交流项目运行环境配置：phpStudy+Vscode+Mysql5.7+HBuilderX+Navicat11+Vue+Express。项目技术：原生PHP++Vue等等组成，B/S模式+Vscode管理+前后端分离等等。环境需要1.运行环境：最好是小皮phpstudy最新版，我们在这个版本上开发的。其他版本理论上也可以。2.开发
  • You have an error in your SQL syntax； check the manual that corresponds to your MySQL server version 努力的菜鸟~ sql数据库
    YouhaveanerrorinyourSQLsyntax;checkthemanualthatcorrespondstoyourMySQLserverversionfortherightsyntaxtousenear‘IDENTIFIEDBY‘123456’WITHGRANTOPTION’atline1在mysql5.7之前GRANTALLPRIVILEGESON*.*TO'root'@'%'I
  • mysql学习教程，从入门到精通，TOP 和MySQL LIMIT 子句（15） 知识分享小能手 大数据数据库MySQLmysql学习oracle数据库开发语言adb大数据
    1、TOP和MySQLLIMIT子句内容在SQL中，不同的数据库系统对于限制查询结果的数量有不同的实现方式。TOP关键字主要用于SQLServer和Access数据库中，而LIMIT子句则主要用于MySQL、PostgreSQL（通过LIMIT/OFFSET语法）、SQLite等数据库中。下面将分别详细介绍这两个功能的语法、语句以及案例。1.1、TOP子句（SQLServer和Access）1.1
  • 鲲鹏 ARM 架构 麒麟 Lylin v10 安装 Nginx (离线) 焚木灵 arm开发架构nginx服务器
    最近做一个银行的项目，银行的服务器是鲲鹏ARM架构的服务器，并且是麒麟v10的系统，这里记录一下在无法访问外网安装Nginx的方法。其他文章：鲲鹏ARM架构麒麟Lylinv10安装Mysql8.3(离线)-CSDN博客鲲鹏ARM架构麒麟Lylinv10安装Node和NVM(离线)-CSDN博客鲲鹏ARM架构麒麟Lylinv10安装Pm2(离线)-CSDN博客鲲鹏ARM架构麒麟Lylinv10安装P
  • Kubernetes部署MySQL数据持久化 沫殇-MS KubernetesMySQL数据库kubernetesmysql容器
    一、安装配置NFS服务端1、安装nfs-kernel-server：sudoapt-yinstallnfs-kernel-server2、服务端创建共享目录#列出所有可用块设备的信息lsblk#格式化磁盘sudomkfs-text4/dev/sdb#创建一个目录：sudomkdir-p/data/nfs/mysql#更改目录权限：sudochown-Rnobody:nogroup/data/nfs
  • MySQL事务隔离级别和MVCC 简书徐小耳
    MySQL事务隔离级别和MVCC参考：https://mp.weixin.qq.com/s/Jeg8656gGtkPteYWrG5_Nw1.MVCC只对读已提交和可重复的读有效果，而未提交读和串行则无意义。2.每条记录都会有trx_id(事务修改记录的id）和roll_pointer是一个指针指向旧版本的undo日志链表（row_id不是必必要的，如果有主键存在就不需要了）3.版本链的头结点就是记
  • CentOS7 安装MySQL5.7.44 不要Null了 javacentosmysql
    1.下载mysql安装包，我放在百度网盘里(下方链接)链接：https://pan.baidu.com/s/1_Mn1XW_1mWdTV4mhnLG66A提取码：s31n2.首先看看以前是否安装过mysqlrpm-qa|grep-imysql如果已经安装过mysql会提示卸载mysqlrpm-emysql-…3.使用FinallShell或者Xftp进行上传放到/usr/local/mysql，没
  • 非关系型数据库 天秤-white nosql
    一、为什么要用Nosql1.单机MySQL的时代。一个基本的网站访问量一般不会太大，单个数据库完全足够。那时候更多使用的静态网页html，服务器根本没有太大压力。这时候网站的瓶颈是什么？-数据量如果太大，一个机器放不下。-数据量太大需要建立数据的索引（B+Tree），一个服务器内存放不下。-访问量读写混合，一个服务器承受不了。2.memcached缓存+MySQL+垂直拆分（读写分离）。网站80%
  • 六、全局锁和表锁：给表加个字段怎么有这么多阻碍 nieniemin
    数据库锁设计的初衷是处理并发问题。作为多用户共享的资源，当出现并发访问的时候，数据库需要合理地控制资源的访问规则。而锁就是用来实现这些访问规则的重要数据结构。根据加锁的范围，MySQL里面的锁大致可以分成全局锁、表级锁和行锁三类。6.1全局锁全局锁就是对整个数据库实例加锁。MySQL提供了一个加全局读锁的方法，命令是Flushtableswithreadlock(FTWRL)。当你需要让整个库处于
  • Kubernetes 自定义控制器开发 IT回忆录 Kubeneteskubernetes
    目录前言一、CRD二、创建数据库表（Mysql）二、控制器开发1.使用kubernetes的examplecontroller模板2.在controller.go中新增数据表监听方法3.修改tools工具生成资源对象结构体定义这里记录开发k8s控制器的一般方式，controller开发主要使用k8s提供的client-go库进行。前言Controller监听集群内部资源对象的变化，编辑资源对象(增
  • 【K8s】专题十一：Kubernetes 集群证书过期处理方法 行者Sun1989 Kuberneteskubernetes云原生容器
    本文内容均来自个人笔记并重新梳理，如有错误欢迎指正！如果对您有帮助，烦请点赞、关注、转发、订阅专栏！专栏订阅入口Linux专栏|Docker专栏|Kubernetes专栏往期精彩文章【Docker】（全网首发）KylinV10下MySQL容器内存占用异常的解决方法【Docker】（全网首发）KylinV10下MySQL容器内存占用异常的解决方法（续）【Docker】MySQL源码构建Docker镜
  • MySQl篇（SQL - 基本介绍）（持续更新迭代） wclass-zhengge mysqlsql数据库
    目录一、简介二、SQL方言（分页查询为例）1.简介2.SQL方言大比拼2.1.Oracle2.1.1.使用ROWNUM实现分页查询2.1.2.使用ROW_NUMBER()实现分页查询2.2.MySQL2.3.PostgreSQL三、语法规范四、注释五、MySQL脚本中的标点符号一、简介1、SQL是结构化查询语言（StructureQueryLanguage），专门用来操作/访问关系型数据库的通用语
  • 跟着黑马学mysql（5） 小杜不吃糖 mysql数据库
    17.DQL-聚合函数DQL-聚合函数介绍将一列数据作为一个整体，进行纵向计算。常见聚合函数函数功能count统计数量max最大值min最小值avg平均值sum求和语法SELECT聚合函数(字段列表)FROM表名;注意：所有的null值不参与聚合函数的运算18.DQL-分组查询语法SELECT字段列表FROM表名[WHERE条件]GROUPBY分组字段名[HAVING分组后的过滤条件];where
  • 梧桐数据库（WuTongDB）：数据库技术中都有哪些常见的优化器 鲁鲁517 梧桐数据库梧桐数据库
    以下是一些常见的数据库优化器：1.CBO（Cost-BasedOptimizer）应用场景：广泛应用于关系型数据库中，如Oracle、PostgreSQL、MySQL等。工作原理：通过计算不同执行计划的代价（如CPU、I/O等资源消耗），选择最低代价的执行计划。代表数据库：Oracle、PostgreSQL、MySQL。特点：CBO使用统计信息（如表大小、索引分布）来评估查询的代价。2.RBO（R
  • MySQL日志 沉着冷静2024 MySQLmysql数据库
    MySQL日志文章目录MySQL日志MySQL三大日志binlog的三种格式redolog和binlog的区别和应用场景为什么崩溃恢复不用binlog而用redolog？redolog如何实现持久化redolog还能做什么？redolog的三种刷盘策略两阶段提交什么是？为什么？两阶段提交过程MySQL三大日志1.undologundolog是InnoDB存储引擎层的日志，实现了事务的原子性，主要用
  • MySQL锁 沉着冷静2024 MySQLmysql数据库
    MySQL锁文章目录MySQL锁MySQL中锁的分类创建索引时会锁表吗线上修改表结构会加什么锁Innodb存储引擎的行级锁有哪些Update语句中，不带where条件，加什么锁？MySQL实现乐观锁MySQL死锁MySQL死锁是怎么发生的？检查死锁如何避免死锁MySQL中锁的分类全局锁：主要用于全库逻辑备份表级锁：表锁、元数据锁、意向锁表锁：通过locktables语句对表进行加锁，它不仅限制其他
  • Python实现mysql命令行 xu-jssy pythonmysqladb
    一、源码importosimportpymysqldefsql_shell():password=input("EnterPassword:")#访问密码ifpassword.strip()!="yyds":print("Bye")return#清空控制台输出os.system("cls"ifos.name=="nt"else"clear")try:#连接到MySQL数据库conn=pymysql
  • mysql case 干货 lack倪酱
    这是我舍友@某人提供的是为了做酒店时判断每个楼栋有几间空房子的。房间表与数据楼栋表与数据查询楼栋房间总数查询空房间数当时就在想怎么把后一个单列的数据合并到前面那三列的数据里呢？又是百度，又是谷歌，都是什么“unitall”。。表示我要的不是这个。有点难为我小脑瓜，实在是对数据库不了解，只会日常操作。最后是我舍友想出了解决办法直接贴图好了，如果想要了解case是什么，你可以自行查资料。学习查东西也是
  • 计算机毕设Node.js+Vue校园易购二手交易平台（程序+LW+部署） Node程序源码强子 vue.js课程设计node.js
    项目运行环境配置：Node.js最新版+Vscode+Mysql5.7+HBuilderX+Navicat11+Vue。项目技术：Express框架+Node.js+Vue等等组成，B/S模式+Vscode管理+前后端分离等等。环境需要1.运行环境：最好是Nodejs最新版，我们在这个版本上开发的。其他版本理论上也可以。2.开发
  • MySQL 源码｜55 - 语法解析(V2)：基础查询语句（query_specification）｜V20240915 长行 MySQL源码mysql源码语法解析查询
    目录文档：MySQL源码｜源码剖析文档目录源码位置（版本=MySQL8.0.37）：sql/sql_yacc.yy前置文档：MySQL源码｜68-语法解析(V2)：LOCKING子句（锁定读取）｜V20240909MySQL源码｜39-语法解析(V2)：ORDERBY子句｜V20240814｜V20240912（第2版）MySQL源码｜40-语法解析(V2)：GROUPBY子句｜V20240814
  • 老生常谈：MySQL高可用架构 我有一头小花驴 mysql架构数据库
    引言“高可用”是互联网一个永恒的话题，先避开MySQL不谈，为了保证各种服务的高可用有几种常用的解决方案。服务冗余：把服务部署多份，当某个节点不可用时，切换到其他节点。服务冗余对于无状态的服务是相对容易的。服务备份：有些服务是无法同时存在多个运行时的，比如说：Nginx的反向代理，一些集群的leader节点。这时可以存在一个备份服务，处于随时待命状态。自动切换：服务冗余之后，当某个节点不可用时，要
  • mysql 隐秘后门_【技术分享】CVE-2016-5483：利用mysqldump备份可生成后门 Toby Dai mysql隐秘后门
    预估稿费：100RMB投稿方式：发送邮件至linwei#360.cn，或登陆网页版在线投稿前言mysqldump是用来创建MySQL数据库逻辑备份的一个常用工具。它在默认配置下可以生成一个.sql文件，其中包含创建/删除表和插入数据等。在导入转储文件的时候，攻击者可以通过制造恶意表名来实现任意SQL语句查询和shell命令执行的目的。另一个与之相关的漏洞利用场景可以参考。攻击场景攻击者已经能够访问
  • 处理绿盟科技安全评估的系统漏洞 自我修炼的小石头 数据库运维开发工具
    如下图一次扫描,中度风险39个,这个是必须要处理的.其中mysql占了36个,一看这个感觉整个人都不好了.但是最后解决的办法也很简单,就是升级.系统版本Redhat7.31.telnet因为要升级openssh,openssl,为了避免意外,首先要开启telnet服务,并把所有相关的包上传到服务器.1.1确认是否安装了telnet和xinetd（默认是没有安装）rpm-qatelnet*rpm-q
  • linux系统服务器下jsp传参数乱码 3213213333332132 javajsplinuxwindowsxml
    在一次解决乱码问题中， 发现jsp在windows下用js原生的方法进行编码没有问题，但是到了linux下就有问题， escape,encodeURI,encodeURIComponent等都解决不了问题 但是我想了下既然原生的方法不行，我用el标签的方式对中文参数进行加密解密总该可以吧。于是用了java的java.net.URLDecoder,结果还是乱码，最后在绝望之际，用了下面的方法解决了
  • Spring 注解区别以及应用 BlueSkator spring
    1. @Autowired @Autowired是根据类型进行自动装配的。如果当Spring上下文中存在不止一个UserDao类型的bean，或者不存在UserDao类型的bean，会抛出 BeanCreationException异常，这时可以通过在该属性上再加一个@Qualifier注解来声明唯一的id解决问题。   2. @Qualifier 当spring中存在至少一个匹
  • printf和sprintf的应用 dcj3sjt126com PHPsprintfprintf
    <?php printf('b: %b <br>c: %c <br>d: %d <bf>f: %f', 80,80, 80, 80); echo '<br />'; printf('%0.2f <br>%+d <br>%0.2f <br>', 8, 8, 1235.456); printf('th
  • config.getInitParameter 171815164 parameter
    web.xml <servlet> <servlet-name>servlet1</servlet-name> <jsp-file>/index.jsp</jsp-file> <init-param> <param-name>str</param-name>
  • Ant标签详解--基础操作 g21121 ant
            Ant的一些核心概念：         build.xml：构建文件是以XML 文件来描述的，默认构建文件名为build.xml。        project：每个构建文
  • [简单]代码片段_数据合并 53873039oycg 代码
            合并规则:删除家长phone为空的记录,若一个家长对应多个孩子,保留一条家长记录,家长id修改为phone,对应关系也要修改。         代码如下:        
  • java 通信技术 云端月影 Java 远程通信技术
    在分布式服务框架中，一个最基础的问题就是远程服务是怎么通讯的，在Java领域中有很多可实现远程通讯的技术，例如：RMI、MINA、ESB、Burlap、Hessian、SOAP、EJB和JMS等，这些名词之间到底是些什么关系呢，它们背后到底是基于什么原理实现的呢，了解这些是实现分布式服务框架的基础知识，而如果在性能上有高的要求的话，那深入了解这些技术背后的机制就是必须的了，在这篇blog中我们将来
  • string与StringBuilder 性能差距到底有多大 aijuans
              之前也看过一些对string与StringBuilder的性能分析，总感觉这个应该对整体性能不会产生多大的影响，所以就一直没有关注这块！         由于学程序初期最先接触的string拼接，所以就一直没改变过自己的习惯！        
  • 今天碰到 java.util.ConcurrentModificationException 异常 antonyup_2006 java多线程工作IBM
    今天改bug，其中有个实现是要对map进行循环，然后有删除操作，代码如下： Iterator<ListItem> iter = ItemMap.keySet.iterator(); while(iter.hasNext()){ ListItem it = iter.next(); //...一些逻辑操作 ItemMap.remove(it); } 结果运行报Con
  • PL/SQL的类型和JDBC操作数据库 百合不是茶 PL/SQL表标量类型游标PL/SQL记录
    PL/SQL的标量类型:    字符,数字,时间,布尔,%type五中类型的 --标量：数据库中预定义类型的变量 --定义一个变长字符串 v_ename varchar2(10); --定义一个小数,范围 -9999.99~9999.99 v_sal number(6,2); --定义一个小数并给一个初始值为5.4 :=是pl/sql的赋值号
  • Mockito：一个强大的用于 Java 开发的模拟测试框架实例 bijian1013 mockito单元测试
    Mockito框架：         Mockito是一个基于MIT协议的开源java测试框架。         Mockito区别于其他模拟框架的地方主要是允许开发者在没有建立“预期”时验证被测系统的行为。对于mock对象的一个评价是测试系统的测
  • 精通Oracle10编程SQL(10)处理例外 bijian1013 oracle数据库plsql
    /* *处理例外 */ --例外简介 --处理例外-传递例外 declare v_ename emp.ename%TYPE; begin SELECT ename INTO v_ename FROM emp where empno=&no; dbms_output.put_line('雇员名：'||v_ename); exceptio
  • 【Java】Java执行远程机器上Linux命令 bit1129 linux命令
    Java使用ethz通过ssh2执行远程机器Linux上命令，   封装定义Linux机器的环境信息   package com.tom; import java.io.File; public class Env { private String hostaddr; //Linux机器的IP地址 private Integer po
  • java通信之Socket通信基础 白糖_ javasocket网络协议
    正处于网络环境下的两个程序，它们之间通过一个交互的连接来实现数据通信。每一个连接的通信端叫做一个Socket。一个完整的Socket通信程序应该包含以下几个步骤： ①创建Socket； ②打开连接到Socket的输入输出流； ④按照一定的协议对Socket进行读写操作； ④关闭Socket。   Socket通信分两部分：服务器端和客户端。服务器端必须优先启动，然后等待soc
  • angular.bind boyitech AngularJSangular.bindAngularJS APIbind
    angular.bind 描述：         上下文，函数以及参数动态绑定，返回值为绑定之后的函数. 其中args是可选的动态参数，self在fn中使用this调用。 使用方法：          angular.bind(se
  • java-13个坏人和13个好人站成一圈，数到7就从圈里面踢出一个来，要求把所有坏人都给踢出来，所有好人都留在圈里。请找出初始时坏人站的位置。 bylijinnan java
    import java.util.ArrayList; import java.util.List; public class KickOutBadGuys { /** * 题目：13个坏人和13个好人站成一圈，数到7就从圈里面踢出一个来，要求把所有坏人都给踢出来，所有好人都留在圈里。请找出初始时坏人站的位置。 * Maybe you can find out
  • Redis.conf配置文件及相关项说明（自查备用） Kai_Ge redis
       Redis.conf配置文件及相关项说明 # Redis configuration file example # Note on units: when memory size is needed, it is possible to specifiy # it in the usual form of 1k 5GB 4M and so forth: #
  • [强人工智能]实现大规模拓扑分析是实现强人工智能的前奏 comsci 人工智能
         真不好意思,各位朋友...博客再次更新...      节点数量太少,网络的分析和处理能力肯定不足,在面对机器人控制的需求方面,显得力不从心....      但是,节点数太多,对拓扑数据处理的要求又很高,设计目标也很高,实现起来难度颇大...
  • 记录一些常用的函数 dai_lm java
    public static String convertInputStreamToString(InputStream is) { StringBuilder result = new StringBuilder(); if (is != null) try { InputStreamReader inputReader = new InputStreamRead
  • Hadoop中小规模集群的并行计算缺陷 datamachine mapreducehadoop并行计算
    注：写这篇文章的初衷是因为Hadoop炒得有点太热，很多用户现有数据规模并不适用于Hadoop，但迫于扩容压力和去IOE（Hadoop的廉价扩展的确非常有吸引力）而尝试。尝试永远是件正确的事儿，但有时候不用太突进，可以调优或调需求，发挥现有系统的最大效用为上策。 -----------------------------------------------------------------
  • 小学4年级英语单词背诵第二课 dcj3sjt126com englishword
    egg  蛋 twenty 二十 any 任何 well 健康的，好   twelve 十二 farm 农场 every 每一个 back 向后，回   fast 快速的 whose 谁的 much 许多 flower 花   watch 手表 very 非常，很 sport 运动 Chinese 中国的  
  • 自己实践了github的webhooks, linux上面的权限需要注意 dcj3sjt126com githubwebhook
    环境, 阿里云服务器   1. 本地创建项目, push到github服务器上面   2. 生成www用户的密钥 sudo -u www ssh-keygen -t rsa -C "[email protected]"     3. 将密钥添加到github帐号的SSH_KEYS里面   3. 用www用户执行克隆, 源使
  • Java冒泡排序 蕃薯耀 冒泡排序Java冒泡排序Java排序
    冒泡排序 >>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>>> 蕃薯耀 2015年6月23日 10:40:14 星期二 http://fanshuyao.iteye.com/
  • Excle读取数据转换为实体List【基于apache-poi】 hanqunfeng apache
    1.依赖apache-poi   2.支持xls和xlsx   3.支持按属性名称绑定数据值   4.支持从指定行、列开始读取   5.支持同时读取多个sheet   6.具体使用方式参见org.cpframework.utils.excelreader.CP_ExcelReaderUtilTest.java 比如： Str
  • 3个处于草稿阶段的Javascript API介绍 jackyrong JavaScript
    原文： http://www.sitepoint.com/3-new-javascript-apis-may-want-follow/?utm_source=html5weekly&utm_medium=email   本文中，介绍3个仍然处于草稿阶段，但应该值得关注的Javascript API. 1) Web Alarm API   &
  • 6个创建Web应用程序的高效PHP框架 lampcy Web框架PHP
    以下是创建Web应用程序的PHP框架，有coder bay网站整理推荐： 1. CakePHP CakePHP是一个PHP快速开发框架，它提供了一个用于开发、维护和部署应用程序的可扩展体系。CakePHP使用了众所周知的设计模式，如MVC和ORM，降低了开发成本，并减少了开发人员写代码的工作量。 2. CodeIgniter CodeIgniter是一个非常小且功能强大的PHP框架，适合需
  • 评"救市后中国股市新乱象泛起"谣言 nannan408
    首先来看百度百家一位易姓作者的新闻： 三个多星期来股市持续暴跌，跌得投资者及上市公司都处于极度的恐慌和焦虑中，都要寻找自保及规避风险的方式。面对股市之危机，政府突然进入市场救市，希望以此来重建市场信心，以此来扭转股市持续暴跌的预期。而政府进入市场后，由于市场运作方式发生了巨大变化，投资者及上市公司为了自保及为了应对这种变化，中国股市新的乱象也自然产生。 首先，中国股市这两天
  • 页面全屏遮罩的实现 方式 Rainbow702 htmlcss遮罩mask
    之前做了一个页面，在点击了某个按钮之后，要求页面出现一个全屏遮罩，一开始使用了position:absolute来实现的。当时因为画面大小是固定的，不可以resize的，所以，没有发现问题。 最近用了同样的做法做了一个遮罩，但是画面是可以进行resize的，所以就发现了一个问题，当画面被reisze到浏览器出现了滚动条的时候，就发现，用absolute 的做法是有问题的。后来改成fixed定位就
  • 关于angularjs的点滴 tntxia AngularJS
      angular是一个新兴的JS框架，和以往的框架不同的事，Angularjs更注重于js的建模，管理，同时也提供大量的组件帮助用户组建商业化程序，是一种值得研究的JS框架。   Angularjs使我们可以使用MVC的模式来写JS。Angularjs现在由谷歌来维护。   这里我们来简单的探讨一下它的应用。   首先使用Angularjs我
  • Nutz--->>反复新建ioc容器的后果 xiaoxiao1992428 DAOmvcIOCnutz
    问题： public class DaoZ {     public static Dao dao() { // 每当需要使用dao的时候就取一次     Ioc ioc = new NutIoc(new JsonLoader("dao.js"));     return ioc.get(
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他