ac425e1b10bb
ac425e1b10bb

mysql-MIC高可用集群

1.介绍

MySQL InnoDB集群提供了一个集成的，本地的，HA解决方案。MysqlInnodb Cluster是利用组复制的 paxos 协议，保障数据一致性，组复制支持单主模式和多主模式。
MySQL InnoDB集群由以下几部分组成：
-  MySQL Servers with Group Replication：向集群的所有成员复制数据，同时提供容错、自动故障转移和弹性。MySQL Server 5.7.17或更高的版本。
-  MySQL Router：确保客户端请求是负载平衡的，并在任何数据库故障时路由到正确的服务器。MySQL Router 2.1.3或更高的版本。
-  MySQL Shell：通过内置的管理API创建及管理Innodb集群。MySQLShell 1.0.9或更高的版本。

下载地址：https://dev.mysql.com/downloads/

2.主机 规划列表

IP                            HOSTNAME            主机角色         安装软件
192.168.137.100     master                    master             mysql、mysqlsh
192.168.137.101     slave1                     slave1             mysql、mysqlsh
192.168.137.102     slave2                     slave2             mysql、mysqlsh
192.168.137.103     manager                 manager         mysqlsh、mysql-router

3.准备MIC基础环境(3台)

tar xf mysql-router-8.0.21-linux-glibc2.12-x86_64.tar.xz
ln -s mysql-8.0.20-linux-glibc2.12-x86_64 mysql
ln -s mysql-router-8.0.20-linux-glibc2.12-x86_64 mysqlroute
ln -s mysql-shell-8.0.20-linux-glibc2.12-x86-64bit mysqlshell

4.配置环境遍变量(3台)

vim /etc/profile.d/mysql.sh
export PATH=/usr/local/mysql/bin:$PATH:/root/mysqlsh/bin:$PATH
source /etc/profile.d/mysqld.sh

5.按照规划列表，将所有主机名和hosts文件全部解析

vim /etc/hosts
192.168.137.100 master
192.168.137.101 slave1
192.168.137.102 slave2
192.168.137.103 manage

6.准备三台数据库节点（100、102、103）


master节点
cat > /etc/my.cnf <[client]
socket=/tmp/mysql.sock
[mysqld]
user=mysql
port=3306
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
log_bin=/usr/local/mysql/binlog
log_error=/usr/local/mysql/data/err.log
server_id=100
socket=/tmp/mysql.sock
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
log_slave_updates=ON
tmpdir = /tmp
default-storage-engine=INNODB
disabled_storage_engines =MyISAM,BLACKHOLE,FEDERATED,CSV,ARCHIVE
max_connections=500
max_allowed_packet=32M
default_authentication_plugin=mysql_native_password
binlog_checksum=NONE
binlog_transaction_dependency_tracking = WRITESET
transaction_write_set_extraction=XXHASH64
loose-group_replication_group_name="fe6a56f8-1ba4-4a6e-a6ac-81148224101a"
loose-group_replication_start_on_boot=OFF
loose-group_replication_local_address= "master:33061"
loose-group_replication_group_seeds="master:33061,slave1:33062,slave2:33063"
loose-group_replication_bootstrap_group=OFF
loose-group_replication_ip_whitelist="master,slave1,slave2,manager"
[mysql]
socket=/tmp/mysql.sock
prompt=master [\\d]>
EOF

slav1节点
cat > /etc/my.cnf <[client]
socket=/tmp/mysql.sock
[mysqld]
user=mysql
port=3306
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
log_bin=/usr/local/mysql/binlog
log_error=/usr/local/mysql/data/err.log
server_id=101
socket=/tmp/mysql.sock
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
log_slave_updates=ON
tmpdir = /tmp
default-storage-engine=INNODB
disabled_storage_engines =MyISAM,BLACKHOLE,FEDERATED,CSV,ARCHIVE
max_connections=500
max_allowed_packet=32M
default_authentication_plugin=mysql_native_password
binlog_checksum=NONE
binlog_transaction_dependency_tracking = WRITESET
transaction_write_set_extraction=XXHASH64
loose-group_replication_group_name="fe6a56f8-1ba4-4a6e-a6ac-81148224101a"
loose-group_replication_start_on_boot=OFF
loose-group_replication_local_address= "slave1:33061"
loose-group_replication_group_seeds="master:33061,slave1:33062,slave2:33063"
loose-group_replication_bootstrap_group=OFF
loose-group_replication_ip_whitelist="master,slave1,slave2,manager"
[mysql]
socket=/tmp/mysql.sock
prompt=slave1 [\\d]>
EOF

slav2节点
cat > /etc/my.cnf <[client]
socket=/tmp/mysql.sock
[mysqld]
user=mysql
port=3306
basedir=/usr/local/mysql
datadir=/usr/local/mysql/data
log_bin=/usr/local/mysql/binlog
log_error=/usr/local/mysql/data/err.log
server_id=102
socket=/tmp/mysql.sock
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
log_slave_updates=ON
tmpdir = /tmp
default-storage-engine=INNODB
disabled_storage_engines =MyISAM,BLACKHOLE,FEDERATED,CSV,ARCHIVE
max_connections=500
max_allowed_packet=32M
default_authentication_plugin=mysql_native_password
binlog_checksum=NONE
binlog_transaction_dependency_tracking = WRITESET
transaction_write_set_extraction=XXHASH64
loose-group_replication_group_name="fe6a56f8-1ba4-4a6e-a6ac-81148224101a"
loose-group_replication_start_on_boot=OFF
loose-group_replication_local_address= "slave2:33061"
loose-group_replication_group_seeds="master:33061,slave1:33062,slave2:33063"
loose-group_replication_bootstrap_group=OFF
loose-group_replication_ip_whitelist="master,slave1,slave2,manager"
[mysql]
socket=/tmp/mysql.sock
prompt=slave2 [\\d]>
EOF

7.所有数据库节点初始化集群实例

master [(none)]> alter user root@'%' identified with mysql_native_password by '123';


8.初始化配置集群实例(100，101，102)

[root@master bin]# mysqlsh
MySQL JS > shell.connect('root@master:3306');

MySQL JS >dba.configureLocalInstance();

MySQL JS > dba.checkInstanceConfiguration("root@localhost:3306");

9. 创建集群并添加节点
MySQL localhost:3306 ssl JS > shell.connect('root@master:3306'); #连接主库

MySQL master:3306 ssl JS > var cluster = dba.createCluster('abc'); #创建一个"abc"集群

''

MySQL master:3306 ssl JS > cluster.status(); #查询集群状态

9.1添加slave1\slave2节点

MySQL master:3306 ssl JS > cluster.addInstance('root@slave1:3306');

MySQL master:3306 ssl JS > cluster.addInstance('root@slave2:3306');

10.配置启动 mysql-router(103)

上传mysqlsh和mysqlroute,并做软连接和环境变量

环境变量如下:

[root@manage ~]# cat /etc/profile.d/mysql.sh
export PATH=/usr/local/mysql/bin:$PATH:/root/mysqlroute/bin:/root/mysqlshell/bin:$PATH

[root@manage ~]# mysqlrouter --bootstrap root@master:3306 -d myrouter --user=root  #注册router到集群，生成myrouter目录, 并生成启动程序和配置文件
[root@manage ~]# ll
drwx------  5 root root        118 9月  6 10:38 myrouter

[root@manage ~]# myrouter/start.sh # 启动myrouter

验证连接router

a) 管理节点本机mysql-shell连接:
mysqlsh --uri root@localhost:6446

b) 管理节点本机mysql连接:
mysql -u root -h 127.0.0.1 -P 6446 -p

c) 远程客户机通过route连接mysql

mysql -u root -h manager_ip -P 6446 -p

验证cluster集群

1.登陆后，新建一个表，往里面写进数据，查看从节点数据会不会同步；#表必须要有主键,否则插入不了数据
create table t(id int PRIMARY key auto_increment,name varchar(10) );

2.关闭master的mysql服务，route将主节点自动切换到slave1，slave1从只读变为可读写，重新启动master mysql后，master变为只读模式。

[root@master mysql]# /etc/init.d/mysqld start
[root@master mysql]# mysql -uroot -p123 -P6446 -h192.168.137.103
master [(none)]>select @@server_id;

3. 验证读写分离功能


主节点：

mysqlshell 清空集群

dba.dropMetadataSchema()

mysql> stop group_replication;

mysql> reset master;        （清空日志，确保和从库的表没有冲突奥，）

mysql> reset slave

其他节点(主要清理和主库的主从信息， 确保主库和从库的表没有冲突奥)

mysql> stop group_replication;

mysql> reset master;

mysql> reset slave


11.MIC集群常用管理命令汇总

MySQL localhost:3306 ssl JS > shell.connect('root@master:3306');
MySQL master:3306 ssl JS > var cluster = dba.getCluster('abc'); #用于不同集群的切换

信息查询
# 检查节点是否符合集群标准

dba.checkInstanceConfiguration()

# 集群结构信息描述
cluster.describe()

# 集群状态总览
cluster.status()

# 查看集群名字
dba.getCluster();

#查看router信息
cluster.listRouters()


集群创建及节点管理

# dba.createCluster()
例：
var cluster = dba.createCluster('oldguo'); 

# Cluster.addInstance()
例：
cluster.addInstance('root@slave1:3306');

# Cluster.removeInstance()
例：
cluster.removeInstance('root@slave1:3306');

# Cluster.rejoinInstance()
如果实例离开集群，比如丢失连接，并且没有自动重新加入集群。可以通过

cluster.rejoinInstance()方法将实例重新加入到集群中。
# Cluster.setPrimaryInstance(instance)

在线切换primary 实例。
例：
cluster.setPrimaryInstance('root@slave1:3306')
cluster.status()

cluster.setPrimaryInstance('root@master:3306')
cluster.setPrimaryInstance('root@master:3306')
cluster.status()

切换为多primary模式。
cluster.switchToMultiPrimaryMode()

注：在切换为多 primary 模式后，6447端口（默认只读）接收读写，并且可通过该端口访问所有集群成员。而6446端口（默认读写）只能连接到其中一个成员（之前的primary成员）。

多primary模式切换成单pirmary模式
cluster.switchToSinglePrimaryMode('root@master:3306')

12.集群故障处理

dba.rebootClusterFromCompleteOutage()
用于在集群完全断电后重新配置集群。如果dba.rebootClusterFromCompleteOutage() 方法失败，可以通过一下方式删除所有集群元数据。

# dba.dropMetadataSchema()
删除集群元数据，然后dba.createCluster() 重建集群。

#删除已注册的router
Cluster.removeRouterMetadata(router)




你可能感兴趣的:(mysql-MIC高可用集群)

  • 二进制方式部署K8s高可用集群 麻辣头马头 kubernetes容器云原生运维服务器docker网络
    1二进制方式部署K8s高可用集群1.1kubeadm和二进制安装k8s适用场景分析kubeadm是官方提供的开源工具，是一个开源项目，用于快速搭建kubernetes集群，目前是比较方便和推荐使用的。kubeadminit以及kubeadmjoin这两个命令可以快速创建kubernetes集群。Kubeadm初始化k8s，所有的组件都是以pod形式运行的，具备故障自恢复能力。kubeadm是工具，
  • 【深入学习Redis丨第三篇】深入详解Redis高可用集群模式 陈橘又青 深入学习Redis学习redis数据库高可用集群
    前言本文我们将介绍Redis的四种模式及各自优缺点分析。Redis一共4种模式：1、主从复制模式2、(Sentinel)哨兵模式3、(Cluster)集群模式4、代理模式文章目录前言1.**主从模式****1.1简介****1.2工作机制**2.**哨兵模式****2.1简介****2.2工作机制****2.3注意点**3.**Cluster模式****3.1简介****3.2工作机制****3.
  • Docker搭建MongoDB Replica Set高可用集群+数据丢失&被黑解决+自动备份与恢复脚本+持久化慢查询记录 秋风お亦冷 运维企业实战笔录运维dockermongodb数据库
    文章目录引节点规划配置文件创建持久化目录创建并推送证书启动临时容器修改配置文件单节点参考mongod.confdocker-compose.ymlReplicaSet参考mongod.confdocker-compose.yml部署与配置部署集群配置集群验证集群增删节点增加节点删除节点查看节点常用命令重置集群备份数据关闭服务删除持久化数据启动集群配置集群验证集群创建用户验证集群用户管理权限说明创建
  • 81.MySQL-PXC高可用集群 戒掉贪嗔痴(薛双奇) 数据库运维-MySQLmysql数据库
    1.第一个节点启动。Linux7:my.cnf文件需要拷贝到：/etc/my.cnf(非常重要)[root@mysql51~]#mysqlpxcbootstrap-pxcBootstrappingPXC(PerconaXtraDBCluster)InitializingMySQ[OK]se:StartingMySQL(PerconaXtraDBCluster)..[OK]当前集群只有一个节点。my
  • MySQL 高可用--PXC 行走的猫儿 MySQL
    1.PXC(PerconaXtradbCluster)Percona：基于MySQL数据库已二次开发的数据库产品xtradb：存储引擎Cluster：集群1.1概念：PXC是属于一套比较完美的MySQL高可用集群解决方案，相比较传统的基于主从复制的架构，基本上可以达到实时同步。且节点与节点之间是相互低等的，不存在主从关系。2.PXC实现的功能1）多主复制：真正的多点读写集群，在任何时候都写数据都是
  • keepalived mysql双主架构图_通过KeepAlived搭建MySQL双主模式的高可用集群系统 尤亚洲 keepalivedmysql双主架构图
    通过KeepAlived搭建MySQL双主模式的高可用集群系统一、整体架构企业级mysql集群具备高可用、可扩展、易管理、低成本的特点。下面将介绍企业环境中经常应用的一个解决方案，即MySQL的双主互备架构，主要设计思路是通过MySQLReplication技术将两台MySQLServer互相将对方作为自己的Master，自己又同时作为对方的Slave来进行复制。这样就实现了高可用构架中的数据同步
  • 【Mysql】通过Keepalived搭建mysql双主高可用集群 维运 数据库mysql数据库
    一、环境信息主机名ip操作系统mysql版本VIP（虚拟ip）hadoop01192.168.10.200centos7_x865.7192.168.10.253hadoop03192.168.10.202centos7_x865.7二、mysql集群搭建两台节点，如果未部署mysql服务，部署文档请看【Mysql】mysql三种安装方式（二进制、yum、docker）-CSDN博客三、配置文件修
  • 基于Zookeeper搭建Kafka高可用集群 数字游牧人0v0 大数据BigDatakafkajava-zookeeperzookeeper大数据
    基于Zookeeper搭建Kafka高可用集群一、Zookeeper集群搭建为保证集群高可用，Zookeeper集群的节点数最好是奇数，最少有三个节点，所以这里搭建一个三个节点的集群。1.1下载&解压下载对应版本Zookeeper，这里我下载的版本3.4.14。官方下载地址：https://archive.apache.org/dist/zookeeper/#下载wgethttps://archi
  • 从零开始搭建Aliyun ESC高可用集群 (HaVip+KeepAlived) cloud_ether 云原生运维lvs高性能集群keepalivedlvs高可用集群高性能集群云原生
    从零开始搭建AliyunESC高可用集群(HaVip+KeepAlived)架构架构本设计方案采用两台阿里云ECS服务器搭建Keepalived结合LVS的高可用集群。使用LVS的TUN模式进行负载均衡，同时利用阿里云的弹性IP（EIP）与高可用虚拟HaVIP实现跨服务器的高可用性。架构中，一台ECS服务器作为主LVSDirector节点，另一台作为备份LVSDirector节点，两者通过Keep
  • Zabbix HA高可用集群搭建 KK小草莓 zabbix
    ZabbixHA高可用集群搭建ZabbixHA高可用集群搭建一、Zabbix高可用集群（ZabbixHA）二、部署Zabbix高可用集群1、两个服务端配置1.1主节点ZabbixServer配置1.2备节点ZabbixServer配置1.3主备节点添加监控主机1.4查看高可用集群状态2、两个客户端配置2.1修改agent01和agent02的配置文件2.2查看web页面3、故障模拟和效果测试3.1
  • HA集群--一起学习吧之架构 wd90119 学习架构
    今天想和大家一起学习HA集群。首先，上定义~一、HA定义HA（HighAvailability）集群，即高可用集群，是一种以减少服务中断时间为目的的服务器集群技术。它通过保护用户业务程序对外不间断地提供服务，把因软件、硬件、人为造成的故障对业务的影响降低到最小程度，从而保证公司业务7*24小时不宕机。HA集群一般包含两个或两个以上的节点，且分为活动节点及备用节点。通常把正在执行业务的节点称为活动节
  • kubeasz部署k8s高可用集群 时空无限 kubernetes
    前言：如无特殊说明，所有操作都用root账号在所有节点执行。说明：kubeasz是一款国产开源的k8s部署软件，采用ansiblerole的部署方式，部署k8s二进制集群。熟悉ansiblerole的用该软件部署k8s方便快捷。一、机器deploy#部署机器master01master02node01二、环境2.1部署机器环境[root@localhostopt]#cat/etc/redhat-r
  • Centos7.9基于Kubeasz部署k8s 1.27.1高可用集群 Arnold.Shen Kubernetesdocker运维kubernetes
    一：kubeasz的介绍kubeasz致力于提供快速部署高可用k8s集群的工具,同时也努力成为k8s实践、使用的参考书；基于二进制方式部署和利用ansible-playbook实现自动化；既提供一键安装脚本,也可以根据安装指南分步执行安装各个组件。kubeasz从每一个单独部件组装到完整的集群，提供最灵活的配置能力，几乎可以设置任何组件的任何参数；同时又为集群创建预置一套运行良好的默认配置，甚至自
  • 中间件-Nginx学习笔记 笑一笑、 Javanginx服务器linux
    目录nginx简介Linux安装Nginxnginx常用命令nginx.conf配置文件nginx反向代理nginx负载均衡nginx动静分离nginx搭建高可用集群高可用配置（主从配置）高可用主从配置文件详解nginx原理nginx简介什么是nginxNginx(enginex)是一个高性能的HTTP和反向代理]web服务器，同时也提供了IMAP/POP3/SMTP服务。Nginx可以作为静态页
  • 运维工程师的转型与升级：解析35岁半衰期现象及其应对策略 Srlua 运维话题分享运维
    目录什么是运维工程师1.系统维护：2.故障排除：3.安全管理：4.性能优化：5.自动化流程：6.云计算服务：运维工程师需要学什么Linux系统知识：网络基础知识：企业级负载集群：高可用集群：运维监控：脚本编程：安全知识：版本控制：云计算服务：容器技术：DevOps文化：软件工具：故障排查：项目管理：35岁被称为运维半衰期，究竟为何？1.时间分配：2.工作弹性需求：3.职业稳定性：4.精力分配：该如
  • LVS/DR&LVS高可用集群 Hannah_zh LinuxLVS集群keepalivedipvsadmVS/DR
    一、基本知识HeartbeatHeartbeat项目是Linux-HA工程的一个组成部分，其与lvs在本质上无关。Heartbeat提供了2个核心的功能正是lvs所需要的，心跳监测部分和资源接管，心跳监测可以通过网络链路和串口进行，而且支持冗余链路，安装了Heartbeat的两台机器会通过心跳检测互相检测对方的状态，当检测到对方失效的时候会调用资源接管来做接管服务器，保证高可靠性。在一个高可靠的l
  • Redis缓存高可用集群在电商网站中的应用 MarkHD 缓存redisspring
    实战案例：Redis缓存高可用集群在电商网站中的应用背景某大型电商网站在日常运营中面临巨大的访问量和数据压力。为了提高系统的响应速度和稳定性，该电商网站决定采用Redis作为缓存层，并构建高可用集群以应对高并发和故障转移的需求。架构设计节点规划：根据业务需求，该电商网站规划了16个Redis节点，其中8个为主节点（Master），8个为从节点（Slave）。每个主节点都配置了一个对应的从节点，用于
  • Redis缓存高可用集群浅谈 MarkHD 缓存redis数据库
    Redis缓存高可用集群的创新主要体现在以下几个方面：无中心节点设计：Redis集群是一个由多个主从节点群组成的分布式服务器群，它没有中心节点，这使得集群可以水平扩展，并且可以线性扩展到上万个节点（官方推荐不超过1000个节点）。这种设计大大提高了系统的可用性和并发处理能力。自动故障转移：在Redis集群中，如果某个节点发生故障，集群会自动进行故障转移，将故障的节点从集群中移除，并将其他节点升级为
  • 实战 | Nginx+keepalived 实现高可用集群 开源Linux
    前言今天通过两个实战案例，带大家理解Nginx+keepalived如何实现高可用集群，在学习新知识之前您可以选择性复习之前的知识点：给小白的Nginx10分钟入门指南Nginx编译安装及常用命令Nginx配置文件详解一文带你读懂Nginx反向代理一文彻底读懂nginx中的location指令Nginx负载均衡原理及配置实例Nginx为什么快到根本停不下来？Keepalived入门学习Keepal
  • Hadoop-HA高可用集群部署 魔笛Love hadoophdfsbigdata
    HadoopHAHA概述(1)所谓HA(HighAvailablity),即高可用(7*24小时不中断服务)。(2)实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制:HDFS的HA和YARN的HA。(3)NameNode主要在以下两个方面影响HDFS集群➢NameNode机器发生意外,如宕机,集群将无法使用,直到管理员重启➢NameNode机器需要升级,包括软件、硬件升
  • 使用 kind 部署单机版 kubernetes 集群 leileitang_blog
    1.kind的介绍和优势kind（KubernetesinDocker）是一个基于Docker构建的Kubernetes集群的工具。它经过CNCF认证，并且支持多节点集群，包括高可用集群。并且支持Linux、macOS以及Windows操作系统，操作简单，学习成本低，非常适合用来在本地搭建基于Kubernetes的开发/测试环境2.使用kind部署本地k8s集群2.1本地安装kindmac环境安装
  • k8s1.20 搭建-抛弃docker使用containerd 玄德公笔记 #02-k8s集群安装k8skubernetes容器运维k8s集群安装
    前言：k8s动不动就要抛弃docker，好吧，让我们体验一下没有docker的k8s。其他相关文档：《k8s-1.21高可用集群搭建》文章目录前言：1.环境准备1.1关闭无用服务1.2环境和网络1.3依赖安装1.4系统优化2.安装Containerd2.1安装2.2修改配置文件2.3启动2.4测试3.k8s集群安装3.1安装服务3.2master初始化3.2.1初始化文件3.2.3下载镜像（非必要
  • Keepalived热备、Keepalived+LVS、HAProxy监控及后端服务器健康检查、负载均衡调度器对比 Mick方 服务器lvs负载均衡
    KeepAlived高可用集群keepalived用于实现高可用集群它的工作原理就是VRRP（虚拟冗余路由协议）配置高可用的web集群环境说明：web1：eth0->192.168.88.100/24web2：eth0->192.168.88.200/24配置keepalived#在两台web服务器上安装keepalived[root@pubservercluster]#vim07-install
  • 集群及LVS简介、LVSNAT模式原理、LVSNAT模式配置、LVSDR模式原理、LVSDR模式配置、LVS错误排查 Mick方 lvsjava开发语言
    集群将很多机器组织到一起，作为一个整体对外提供服务集群在扩展性、性能方面都可以做到很灵活集群分类：负载均衡集群：LoadBalance高可用集群：HighAvailability高性能计算：HighPerformanceComputingLVSLVS：LinuxVirtualServer，Linux虚拟服务器实现负载均衡集群作者：章文嵩。国防科技大学读博士期间编写LVS的工作模式：NAT：网络地址
  • Redis缓存高可用集群 车马去闲闲丶 缓存redis数据库
    Redis集群方案哨兵集群在redis3.0以前的版本要实现集群一般是借助哨兵sentinel工具来监控master节点的状态，如果master节点异常，则会做主从切换，将某一台slave作为master，哨兵的配置略微复杂，并且性能和高可用性等各方面表现一般，特别是在主从切换的瞬间存在访问瞬断的情况，而且哨兵模式只有一个主节点对外提供服务，没法支持很高的并发，且单个主节点内存也不宜设置得过大，否
  • Redis不是一直号称单线程效率也很高吗，为什么又采用多线程了？ 小梁同学jxy
    Redis是目前广为人知的一个内存数据库，在各个场景中都有着非常丰富的应用，前段时间Redis推出了6.0的版本，在新版本中采用了多线程模型。Redis为什么最开始被设计成单线程的？Redis作为一个成熟的分布式缓存框架，它由很多个模块组成，如网络请求模块、索引模块、存储模块、高可用集群支撑模块、数据操作模块等。很多人说Redis是单线程的，就认为Redis中所有模块的操作都是单线程的，其实这是不
  • Redis（三）主从架构、Redis哨兵架构、Redis集群方案对比、Redis高可用集群搭建、Redis高可用集群之水平扩展 _蓝天IT_ 分布式redis架构java
    转自极客时间Redis主从架构redis主从架构搭建，配置从节点步骤：1、复制一份redis.conf文件2、将相关配置修改为如下值：port6380pidfile/var/run/redis_6380.pid#把pid进程号写入pidfile配置的文件logfile"6380.log"dir/usr/local/redis-5.0.3/data/6380#指定数据存放目录#需要注释掉bind#b
  • kafka高可用集群搭建 憧憬blog 分布式kafkajavazookeeperlinux
    kafka高可用集群搭建说明这篇博文主要是为了后面的elk做准备，我们这里搭建一个kafka集群，使用2个节点，还是前面的节点。主要是为了后面做数据缓冲。这里不对mq的详细进行介绍，必要会对kafka相关配置进行描述。节点说明节点hostname192.168.179.123node-5192.168.179.124node-4192.168.179.125node-3当我们进行集群搭建的时候，要
  • Kafka基于Zookeeper搭建高可用集群实战 八五年的湘哥 #Kafkazookeeper分布式kafkajava
    目录1、前言1.1高可用的由来1.2相关术语2、架构图3、发送消息流程4、部署kafka&zookeeper集群4.1准备工作4.2启动zookeeper集群4.3启动kafka集群4.4测试5、kafka集群管理控制台安装5.1安装配置5.2控制台访问6、JavaAPI操作6.1本地DNS映射配置6.2pom依赖6.3生产者类6.4消费者类7、分区/片备份8、集群监控8.1开启JMX端口8.2K
  • 第96讲：MySQL高可用集群MHA的核心概念以及集群搭建 Jiangxl~ mysql数据库云计算运维数据结构
    文章目录1.MHA高可用数据库集群的核心概念1.1.主从复制架构的演变1.2.MHA简介以及架构1.3.MHA的软件结构1.4.MHAManager组件的启动过程1.5.MHA高可用集群的原理2.搭建MHA高可用数据库集群2.1.环境架构简介2.2.搭建基于GTID的主从复制集群2.2.1.在三台服务器中分别搭建MySQL实例2.2.2.配置基于GTID的主从复制集群2.2.3.查看集群各节点的状
  • jQuery 键盘事件keydown ,keypress ,keyup介绍 107x jsjquerykeydownkeypresskeyup
    本文章总结了下些关于jQuery 键盘事件keydown ,keypress ,keyup介绍，有需要了解的朋友可参考。 一、首先需要知道的是： 1、keydown() keydown事件会在键盘按下时触发. 2、keyup()  代码如下 复制代码 $('input').keyup(funciton(){      
  • AngularJS中的Promise bijian1013 JavaScriptAngularJSPromise
    一.Promise         Promise是一个接口，它用来处理的对象具有这样的特点：在未来某一时刻（主要是异步调用）会从服务端返回或者被填充属性。其核心是，promise是一个带有then()函数的对象。         为了展示它的优点，下面来看一个例子，其中需要获取用户当前的配置文件： var cu
  • c++ 用数组实现栈类 CrazyMizzz 数据结构C++
    #include<iostream> #include<cassert> using namespace std; template<class T, int SIZE = 50> class Stack{ private: T list[SIZE];//数组存放栈的元素 int top;//栈顶位置 public: Stack(
  • java和c语言的雷同 麦田的设计者 java递归scaner
    软件启动时的初始化代码，加载用户信息2015年5月27号 从头学java二 1、语言的三种基本结构：顺序、选择、循环。废话不多说，需要指出一下几点：      a、return语句的功能除了作为函数返回值以外，还起到结束本函数的功能，return后的语句 不会再继续执行。      b、for循环相比于whi
  • LINUX环境并发服务器的三种实现模型 被触发 linux
    服务器设计技术有很多，按使用的协议来分有TCP服务器和UDP服务器。按处理方式来分有循环服务器和并发服务器。 1  循环服务器与并发服务器模型 在网络程序里面，一般来说都是许多客户对应一个服务器，为了处理客户的请求，对服务端的程序就提出了特殊的要求。 目前最常用的服务器模型有： ·循环服务器：服务器在同一时刻只能响应一个客户端的请求 ·并发服务器：服
  • Oracle数据库查询指令 肆无忌惮_ oracle数据库
    20140920   单表查询 -- 查询************************************************************************************************************ -- 使用scott用户登录   -- 查看emp表   desc emp  
  • ext右下角浮动窗口 知了ing JavaScriptext
    第一种 <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.w3.org/1999/
  • 浅谈REDIS数据库的键值设计 矮蛋蛋 redis
    http://www.cnblogs.com/aidandan/ 原文地址：http://www.hoterran.info/redis_kv_design 丰富的数据结构使得redis的设计非常的有趣。不像关系型数据库那样，DEV和DBA需要深度沟通，review每行sql语句，也不像memcached那样，不需要DBA的参与。redis的DBA需要熟悉数据结构，并能了解使用场景。
  • maven编译可执行jar包 alleni123 maven
    http://stackoverflow.com/questions/574594/how-can-i-create-an-executable-jar-with-dependencies-using-maven <build> <plugins> <plugin> <artifactId>maven-asse
  • 人力资源在现代企业中的作用 百合不是茶 HR 企业管理
    //人力资源在在企业中的作用人力资源为什么会存在，人力资源究竟是干什么的 人力资源管理是对管理模式一次大的创新，人力资源兴起的原因有以下点： 工业时代的国际化竞争，现代市场的风险管控等等。所以人力资源 在现代经济竞争中的优势明显的存在，人力资源在集团类公司中存在着 明显的优势(鸿海集团)，有一次笔者亲自去体验过红海集团的招聘，只 知道人力资源是管理企业招聘的 当时我被招聘上了，当时给我们培训 的人
  • Linux自启动设置详解 bijian1013 linux
    linux有自己一套完整的启动体系，抓住了linux启动的脉络，linux的启动过程将不再神秘。 阅读之前建议先看一下附图。 本文中假设inittab中设置的init tree为： /etc/rc.d/rc0.d /etc/rc.d/rc1.d /etc/rc.d/rc2.d /etc/rc.d/rc3.d /etc/rc.d/rc4.d /etc/rc.d/rc5.d /etc
  • Spring Aop Schema实现 bijian1013 javaspringAOP
    本例使用的是Spring2.5 1.Aop配置文件spring-aop.xml <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans" xmln
  • 【Gson七】Gson预定义类型适配器 bit1129 gson
    Gson提供了丰富的预定义类型适配器，在对象和JSON串之间进行序列化和反序列化时，指定对象和字符串之间的转换方式，   DateTypeAdapter   public final class DateTypeAdapter extends TypeAdapter<Date> { public static final TypeAdapterFacto
  • 【Spark八十八】Spark Streaming累加器操作（updateStateByKey) bit1129 update
    在实时计算的实际应用中，有时除了需要关心一个时间间隔内的数据，有时还可能会对整个实时计算的所有时间间隔内产生的相关数据进行统计。 比如： 对Nginx的access.log实时监控请求404时，有时除了需要统计某个时间间隔内出现的次数，有时还需要统计一整天出现了多少次404，也就是说404监控横跨多个时间间隔。   Spark Streaming的解决方案是累加器，工作原理是，定义
  • linux系统下通过shell脚本快速找到哪个进程在写文件 ronin47
    一个文件正在被进程写 我想查看这个进程 文件一直在增大 找不到谁在写 使用lsof也没找到 这个问题挺有普遍性的，解决方法应该很多，这里我给大家提个比较直观的方法。 linux下每个文件都会在某个块设备上存放，当然也都有相应的inode, 那么透过vfs.write我们就可以知道谁在不停的写入特定的设备上的inode。 幸运的是systemtap的安装包里带了inodewatch.stp，位
  • java-两种方法求第一个最长的可重复子串 bylijinnan java算法
    import java.util.Arrays; import java.util.Collections; import java.util.List; public class MaxPrefix { public static void main(String[] args) { String str="abbdabcdabcx";
  • Netty源码学习-ServerBootstrap启动及事件处理过程 bylijinnan javanetty
    Netty是采用了Reactor模式的多线程版本，建议先看下面这篇文章了解一下Reactor模式： http://bylijinnan.iteye.com/blog/1992325 Netty的启动及事件处理的流程，基本上是按照上面这篇文章来走的 文章里面提到的操作，每一步都能在Netty里面找到对应的代码 其中Reactor里面的Acceptor就对应Netty的ServerBo
  • servelt filter listener 的生命周期 cngolon filterlistenerservelt生命周期
    1. servlet    当第一次请求一个servlet资源时，servlet容器创建这个servlet实例，并调用他的 init(ServletConfig config)做一些初始化的工作，然后调用它的service方法处理请求。当第二次请求这个servlet资源时，servlet容器就不在创建实例，而是直接调用它的service方法处理请求，也就是说
  • jmpopups获取input元素值 ctrain JavaScript
    jmpopups 获取弹出层form表单 首先，我有一个div，里面包含了一个表单，默认是隐藏的，使用jmpopups时，会弹出这个隐藏的div，其实jmpopups是将我们的代码生成一份拷贝。 当我直接获取这个form表单中的文本框时，使用方法：$('#form input[name=test1]').val()；这样是获取不到的。 我们必须到jmpopups生成的代码中去查找这个值，$(
  • vi查找替换命令详解 daizj linux正则表达式替换查找vim
    一、查找 查找命令 /pattern<Enter> ：向下查找pattern匹配字符串 ?pattern<Enter>：向上查找pattern匹配字符串 使用了查找命令之后，使用如下两个键快速查找： n：按照同一方向继续查找 N：按照反方向查找 字符串匹配 pattern是需要匹配的字符串，例如： 1:  /abc<En
  • 对网站中的js,css文件进行打包 dcj3sjt126com PHP打包
    一，为什么要用smarty进行打包 apache中也有给js,css这样的静态文件进行打包压缩的模块，但是本文所说的不是以这种方式进行的打包，而是和smarty结合的方式来把网站中的js,css文件进行打包。 为什么要进行打包呢，主要目的是为了合理的管理自己的代码 。现在有好多网站，你查看一下网站的源码的话，你会发现网站的头部有大量的JS文件和CSS文件，网站的尾部也有可能有大量的J
  • php Yii: 出现undefined offset 或者 undefined index解决方案 dcj3sjt126com undefined
    在开发Yii 时，在程序中定义了如下方式：        if($this->menuoption[2] === 'test')，那么在运行程序时会报：undefined offset:2，这样的错误主要是由于php.ini 里的错误等级太高了，在windows下错误等级
  • linux 文件格式（1） sed工具 eksliang linuxlinux sed工具sed工具linux sed详解
    转载请出自出处： http://eksliang.iteye.com/blog/2106082 简介       sed 是一种在线编辑器，它一次处理一行内容。处理时，把当前处理的行存储在临时缓冲区中，称为“模式空间”（pattern space），接着用sed命令处理缓冲区中的内容，处理完成后，把缓冲区的内容送往屏幕。接着处理下一行，这样不断重复，直到文件末尾
  • Android应用程序获取系统权限 gqdy365 android
    引用 如何使Android应用程序获取系统权限         第一个方法简单点，不过需要在Android系统源码的环境下用make来编译：         1. 在应用程序的AndroidManifest.xml中的manifest节点
  • HoverTree开发日志之验证码 hvt .netC#asp.nethovertreewebform
    HoverTree是一个ASP.NET的开源CMS，目前包含文章系统，图库和留言板功能。代码完全开放，文章内容页生成了静态的HTM页面，留言板提供留言审核功能，文章可以发布HTML源代码，图片上传同时生成高品质缩略图。推出之后得到许多网友的支持，再此表示感谢！留言板不断收到许多有益留言，但同时也有不少广告，因此决定在提交留言页面增加验证码功能。ASP.NET验证码在网上找，如果不是很多，就是特别多
  • JSON API：用 JSON 构建 API 的标准指南中文版 justjavac json
    译文地址：https://github.com/justjavac/json-api-zh_CN 如果你和你的团队曾经争论过使用什么方式构建合理 JSON 响应格式， 那么 JSON API 就是你的 anti-bikeshedding 武器。 通过遵循共同的约定，可以提高开发效率，利用更普遍的工具，可以是你更加专注于开发重点：你的程序。 基于 JSON API 的客户端还能够充分利用缓存，
  • 数据结构随记_2 lx.asymmetric 数据结构笔记
    第三章 栈与队列 一．简答题 1. 在一个循环队列中，队首指针指向队首元素的  前一个    位置。  2.在具有n个单元的循环队列中，队满时共有  n-1  个元素。  3. 向栈中压入元素的操作是先  移动栈顶指针&n
  • Linux下的监控工具dstat 网络接口 linux
    1) 工具说明dstat是一个用来替换 vmstat,iostat netstat,nfsstat和ifstat这些命令的工具, 是一个全能系统信息统计工具. 与sysstat相比, dstat拥有一个彩色的界面, 在手动观察性能状况时, 数据比较显眼容易观察; 而且dstat支持即时刷新, 譬如输入dstat 3, 即每三秒收集一次, 但最新的数据都会每秒刷新显示. 和sysstat相同的是,
  • C 语言初级入门--二维数组和指针 1140566087 二维数组c/c++指针
    /* 二维数组的定义和二维数组元素的引用 二维数组的定义： 当数组中的每个元素带有两个下标时，称这样的数组为二维数组； (逻辑上把数组看成一个具有行和列的表格或一个矩阵); 语法： 类型名 数组名[常量表达式1][常量表达式2] 二维数组的引用： 引用二维数组元素时必须带有两个下标，引用形式如下： 例如： int a[3][4];  引用：
  • 10点睛Spring4.1-Application Event wiselyman application
    10.1 Application Event Spring使用Application Event给bean之间的消息通讯提供了手段 应按照如下部分实现bean之间的消息通讯 继承ApplicationEvent类实现自己的事件 实现继承ApplicationListener接口实现监听事件 使用ApplicationContext发布消息
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他