E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
故障恢复
Flink之状态编程
状态的分类托管状态:由Flink统一管理的,状态的存储访问、
故障恢复
和重组等一系列问题都由Flink实现。算子状态:状态由算子内所
十七✧ᐦ̤
·
2023-12-14 16:34
flink
java
大数据
Flink的容错机制
检查点:用存档读档的方式,将之前的某个时间点的所有状态保存下来,
故障恢复
继续处理的结果应该和发送故障前完全一致,这就是所谓的检查点。
十七✧ᐦ̤
·
2023-12-14 16:44
flink
java
服务器
Flink从入门到精通系列(三)
对于一个分布式系统来说,需要面对很多棘手的问题,其中的核心问题有:集群中资源的分配和管理、进程协调调度、持久化和高可用的数据存储,以及
故障恢复
,Flink并不会自己去处理所有的问题,而是利用了现有的集群架构和服务
后端技术那点事
·
2023-12-05 21:00
Flink系列
大数据系列
flink
大数据
Flink
运行时架构
并行度
数据流图
算子链
Hadoop系列 (四):Yarn详细介绍
ResourceManagerNodeManagerApplicationMasterContainerYarn运行原理Yarn-HA工作机制ResourceManagerRMStateStoreNodeManagerRM故障转移手动故障切换转移自动故障转义RM
故障恢复
EricRae
·
2023-12-05 06:32
#
hadoop
hadoop
big
data
Flink -- 容错机制理解
Flink的容错机制一致性检查点从检查点恢复状态Flink检查点算法保存点(savepoints)一致性检查点Flink
故障恢复
机制的核心,就是应用状态的一致性检查点有状态流应用的一致检查点,其实就是所有任务的状态
Facouse
·
2023-12-05 05:18
Flink大数据框架
flink
kafka
big
data
Redis面试题:哨兵模式相关问题,以及脑裂问题
面试官:怎么保证Redis的高并发高可用候选人:首先可以搭建主从集群,再加上使用redis中的哨兵模式,哨兵模式可以实现主从集群的自动
故障恢复
,里面就包含了对主从服务的监控、自动
故障恢复
、通知;如果master
開開想重开
·
2023-12-04 15:20
redis
面试
java
【系统运维】Centos部署Haproxy+Keepalived+RabbitMQ高可用集群
故障恢复
:如果集群中的一个节点发生故障,可以通过故障检测和自动恢复机制,将该节
互联网小阿祥
·
2023-12-04 06:04
系统运维
centos
rabbitmq
ruby
Golang分布式事务
分布式事务涉及到多个事务参与者之间的协调和一致性保证,同时还要解决网络延迟、
故障恢复
等问题。Golang作为一门强大的编程语言,提供了一些工具和框架来帮助开发人员实现分布式事务。
一只会写程序的猫
·
2023-12-02 05:51
Go
golang
分布式
开发语言
Redis哨兵机制原理浅析
但如果主库宕机后,需要运维人员手动地将一个从库提升为新主库,并将其他从库slaveof新主库,以此来实现
故障恢复
。因此,主从模式的一个缺点,就在于无法实现自动化地
故障恢复
。
Java弟中弟
·
2023-12-02 01:31
MySQL-lesson05-存储引擎
MySQL-lesson05-存储引擎1、简介相当于Linux文件系统,只不过比文件系统强大2、功能了解数据读写数据安全和一致性提高性能热备份自动
故障恢复
高可用方面支持等.3、存储引擎种类(笔试)3.1
学无止境_9b65
·
2023-12-01 20:00
【Redis】Redis高并发高可用(主从复制、哨兵机制)
Redis高并发高可用复制在分布式系统中为了解决单点问题,通常会把数据复制多个副本部署到其他机器,满足
故障恢复
和负载均衡等需求。
lxtx-0510
·
2023-12-01 11:22
redis
redis
数据库
缓存
java
Redis进阶高可用之主从复制
故障恢复
:当主节点出现问题时,可以由从节点提供服务,实现快速的
故障恢复
;实际上是一种服务的冗余。负载均衡:在主从复制
codingjav
·
2023-11-30 12:53
Redis由浅入深
redis
全量复制
心跳机制
达梦7读写分离搭建过程详解
读写分离集群最多可以配置8个即时备库,提供数据同步、备库故障自动处理、
故障恢复
自动数据同步等功能,也支持自动故障切换和手动故障切换两种守护模式。
喵咪很生气
·
2023-11-30 01:53
分布式缓存——Redis集群
故障恢复
问题。如果Redis宕机,则服务不可用,需要一种自动的
故障恢复
手段。存储能力问题。Redis基于内存,单节点能存储的数据量难以满足海量数据需求。
不凉帅
·
2023-11-29 13:52
redis
缓存
分布式
MySQL-lesson07-备份恢复
1.运维在数据库备份恢复方面的职责1.1设计备份策略全备、增量、时间、自动1.2日常备份检查备份存在性备份空间够用否1.3定期恢复演练(测试库)一季度或者半年1.4
故障恢复
通过现有备份,能够将数据库恢复到故障之前的时间点
小一_d28d
·
2023-11-29 10:52
kudu master
故障恢复
1.10版本的运行过程中,有1个master节点显示异常状态,参考官网以下资料和实际操作记录如下:https://github.com/apache/kudu/blob/master/docs/administration.adoc#migrate_to_multi_masterhttps://kudu.apache.org/docs/command_line_tools_reference.ht
吉甫作诵
·
2023-11-29 05:22
大数据
kudu
运维
故障恢复
解析MySQL Binlog:从零开始的入门指南【binlog入门指南】
2.Binlog的作用a.数据恢复:b.主从复制c.点对点复制:d.数据库备份:e.审计与监控:3.Binlog的重要性:a.事务的一致性:b.数据的持久性:c.数据同步与复制:d.
故障恢复
:4.Binlog
一只牛博
·
2023-11-26 20:36
mysql
mysql
数据库
Binlog vs. Redo Log:数据库日志的较劲【高级】
Binlogvs.RedoLog:数据库日志的较劲【高级】前言第一:事务的生命周期事务的生命周期Binlog和RedoLog记录事务的一致性和持久性Binlog的记录过程RedoLog的记录过程一致性和持久性的保障第二:
故障恢复
与灾备
一只牛博
·
2023-11-26 20:03
mysql
数据库
mysql
面试:Kubernetes相关问题
、DaemonSet的区别在Kubernetes中,如何进行存储管理在Kubernetes中,如何实现滚动升级和回滚在Kubernetes中,如何进行日志和监控的管理在Kubernetes中,如何进行
故障恢复
和自我修复在
青鱼入云
·
2023-11-24 20:42
Java面试
面试
kubernetes
Redis持久化机制
1.3、优点1.4、缺点:2、AOF(只追加文件)3、AOF重写3.1、重写流程3.2、AOF重写触发时机4、Redis4.0混合持久化4.1、混合持久化流程4.2、优点Redis的持久化机制,目的在于
故障恢复
零点冰.
·
2023-11-23 11:17
Redis
面试
redis
(一)flink介绍
文章目录1.1:FLINK简介1:特性2:flink的状态和容错checkpoint2.1:状态1:OperatorState算子状态2:KeyedState状态3:状态后端(存储状态)2.2:flink
故障恢复
猿来如此dj
·
2023-11-23 07:44
flink
flink
big
data
java
Redis主从复制和哨兵模式
作用数据冗余:主从复制实现了数据热备份,是持久化以外的一种数据冗余;
故障恢复
:当主节点出现问题时,从节点可以提供读操作,快速
故障恢复
,实际上是一种服务冗余。
qq_41886073
·
2023-11-22 22:33
java
redis
Windows Server 2003服务器集群技术 (完整版)
集群为资源和应用程序提供高可用性、
故障恢复
、可伸缩性和可管理性。
iOS鑫
·
2023-11-22 18:22
Redis主从复制,哨兵和Cluster集群
主从复制主要实现了数据的多机备份(和同步),以及对于读操作的负载均衡和简单的
故障恢复
。缺陷:
故障恢复
无法自动化;写操作无法负载均衡;存储能力受到单机的限制。
相遇蟹堡王,尽享蟹黄堡
·
2023-11-22 14:51
redis
数据库
缓存
MySQL---DBA---伍(存储引擎)
一.存储引擎简介mysql存储引擎相当于Linux文件系统,但是比其更加复杂二.存储引擎功能进行数据读写保证数据安全和一致性提高数据库性能进行数据热备份进行自动
故障恢复
对高可用方面有支持三.存储引擎种类
假面骑士kabuto
·
2023-11-22 13:41
HBase RegionServer宕机恢复三部曲
目录HBase的
故障恢复
有哪三种不同模式?HBase日志切分方法?DistributedLogReplay解决了哪些问题?
尼小摩
·
2023-11-21 14:33
分布式架构知识体系必读
2.关键词节点,时间,一致性,CAP,ACID,BASE,P2P,机器伸缩,网络变更,负载均衡,限流,鉴权,服务发现,服务编排,降级,熔断,幂等,分库分表,分片分区,自动运维,容错处理,全栈监控,
故障恢复
zl1zl2zl3
·
2023-11-20 20:43
分布式
架构
分布式
架构
redis集群演变过程总结
复制主要实现了数据的多机备份,以及对于读操作的负载均衡和简单的
故障恢复
。缺陷是
故障恢复
无法自动化;写操作无法负载均衡;存储能力受到单机的限制。3.哨兵在复制的基础上,
滴流乱转的小胖子
·
2023-11-20 01:59
mysql备份恢复
1.运维在数据库备份恢复方面的职责1.1设计备份策略全备、增量、时间、自动1.2日常备份检查备份存在性备份空间够用否1.3定期恢复演练(测试库)一季度或者半年1.4
故障恢复
通过现有备份,能够将数据库恢复到故障之前的时间点
醉舞经阁半卷书A
·
2023-11-19 18:25
MHA高可用
MHA:什么是MHA:masterhightavailabulity:基于主库的高可用环境下:主从复制,
故障恢复
有一个主从的架构。
wutong0708
·
2023-11-19 02:48
android
【入门篇】1.7 Redis 之 codis 入门介绍
源代码Docker部署3.Codis的架构Codis的架构图和组件Codis的工作流程4.Codis的核心特性自动数据分片数据迁移高可用性全面支持Redis命令分布式锁和发布订阅5.Codis的高可用与
故障恢复
冰点.
·
2023-11-19 01:42
redis
数据库
缓存
codis
redis持久化储存(RDB、AOF)和主从复制
RDB、AOF)和主从复制一、持久化储存RDB触发方式优势与劣势AOFAOF持久化流程频率设置优势与劣势二、主从复制概念准备工作薪火相传反客为主哨兵模式设置哨兵哨兵服务集群搭建使用命令启动集群服务命令
故障恢复
优点
见面吃火锅
·
2023-11-18 22:13
redis
redis
数据库
缓存
金仓数据库KingbaseES高可用常见
故障恢复
指南(数据应急恢复 )
目录5.1.适用场景介绍¶5.2.恢复数据矩阵¶5.3.常用恢复实践操作¶5.3.1.RMAN恢复命令¶5.3.2.导出walminer表中数据¶5.3.3.把SQL文件数据导入到表中¶5.3.4.数据块损坏恢复¶5.1.适用场景介绍¶表5.1.6数据应急恢复¶场景描述表数据被误删除deletefrom;表对象被误删除droptable;数据库被误删除dropdatabase;数据文件(或data
沉舟侧畔千帆过_
·
2023-11-17 17:29
KingbaseES产品手册
数据库
sql
java
kingbase
金仓数据库
切换阿里云ES方式及故障应急处理方案
以前大概一小时,数据迁移的时间就看数据量了,一般整体在半小时以内(需进行相关测试验证)1.2ES7.10扩容数据节点磁盘时间,需不需要重启磁盘扩容会滚动重启,时间比增加节点数量长一些,小时级别1.3.ES7.10
故障恢复
时间是多
有恒则成
·
2023-11-17 05:51
阿里云
elasticsearch
云计算
自建ES6.2.4切阿里云商业版ES(7.10)整体方案
使用阿里云提供的ES服务,提高系统稳定性使用云服务es,易于备份,数据恢复,
故障恢复
使用ES7新特性(查询性能速度优化,集群管理方面优化,内存管理方面优化,api安全,云ES自带qos插
有恒则成
·
2023-11-17 04:14
es6
阿里云
elasticsearch
周六上午直播丨细致入微 - 云原生数据库 PolarDB 部署实战
PolarDB采用存储和计算分离的架构,所有计算节点共享一份数据,提供分钟级的配置升降级、秒级的
故障恢复
、全局数据一致性和免费的数据备份容灾服务。Pol
数据和云
·
2023-11-15 08:56
数据库
mysql
大数据
分布式
java
Kubernetes学习笔记
Kubernetes则是一个开源的容器编排平台,可以自动化管理容器的部署、伸缩、负载均衡、
故障恢复
等
glisten0317
·
2023-11-14 11:03
运维
kubernetes
【中间件篇-Redis缓存数据库06】Redis主从复制/哨兵 高并发高可用
Redis高并发高可用复制在分布式系统中为了解决单点问题,通常会把数据复制多个副本部署到其他机器,满足
故障恢复
和负载均衡等需求。
studyday1
·
2023-11-14 07:17
分布式
Redis
Java
缓存
数据库
中间件
redis
主从复制
哨兵
【02】Istio流量治理
它还提供了开箱即用的
故障恢复
功能,有助于使应用程序更强大,以防止相关服务或网络的故使用Istio进行流量管理从本质上是将流量与底层基础架构解耦,从而让
爱写代码的小男孩
·
2023-11-13 20:40
Istio
istio
服务器
linux
Flink状态编程学习笔记
Flink状态编程学习笔记简介状态编程为Flink处理机制的核心,状态用来保存信息,辅助计算,以及方便于
故障恢复
。
H.20
·
2023-11-12 03:27
大数据
flink
学习
状态模式
postgresql源码学习(32)—— 检查点④-核心函数CreateCheckPoint
总结一下:脏页刷入删除旧WAL:创建检查点后此位置之前的WAL可以删除
故障恢复
起点更新控制文件中检查点信息Checkpointskipped机制二、Cre
Hehuyi_In
·
2023-11-11 18:39
源码学习
PostgreSQL
事务
postgresql
源码学习
调试
checkpoint
检查点
数据库进阶教学——数据库
故障恢复
(日志文件)
目录一、日志简介二、日志文件操作1、查看日志状态2、开启日志功能3、查看日志文件4、查看当前日志5、查看日志中的事件6、删除日志文件7、查看和修改日志文件有效期8、查看日志文件详细信息三、删除的数据库恢复一、日志简介日志是记录所有数据库表结果变更以及表数据修改的二进制日志,而不会记录SELECT和SHOW这类的操作。Binlog文件名默认为“主机名_binlog-序列号”格式,例如:stu_bin
恣睢s
·
2023-11-10 15:09
数据库
数据库
mysql数据库部署回退文档_mysql版本详细介绍及安装部署(mysql-5.6)
运维DBA工作内容初级DBA:安装配置,基本使用,基本故障处理中级DBA:体系结构、备份策略涉及,
故障恢复
,基础高可用的运维(搭建、监控、故障处理、架构演变)、基础优化(索引、执行计划、慢日志)高级DBA
Choice林
·
2023-11-10 04:38
mysql数据库部署回退文档
PostgreSQL-HA 高可用集群在 Rainbond 上的部署方案
自动
故障恢复
:repmgr可以检测到从服务器故障并自动将其重新加入到复制拓扑中。多个备用服务器:repmgr支持多个
Rainbond云原生
·
2023-11-10 04:02
postgresql
rainbond
kubernetes
云原生
docker
MySQL GTID 主从同步
通过GTID保证了每个在主库上提交的事务在集群中有一个唯一的ID;这种方式强化了数据库的主备一致性,
故障恢复
以及容错能力。
WeMeHM
·
2023-11-10 03:22
数据库
mysql
运维
自适应批作业调度器:为 Flink 批作业自动推导并行度
对于批作业,小的并行度会导致作业运行时间长,
故障恢复
慢,而不必要的大并行度会导致资源浪费,任务部署和数据shuffle开销也会变大。
Apache Flink
·
2023-11-09 11:10
大数据
java
python
机器学习
人工智能
FlinK之检查点与保存点机制
概述保存时机保存与恢复检查点算法检查点配置启用检查点指定存储位置其它配置通用增量保存点Savepoint概述使用保存点切换状态后端检查点Checkpoint概述在Flink中,检查点是用于实现状态一致性和
故障恢复
的关键机制
CodeDevMaster
·
2023-11-08 21:36
#
Flink
flink
hadoop
检查点
状态一致性
Redis主从复制,哨兵模式和集群模式
主从复制主要实现了数据的多机备份,以及对于读操作的负载均衡和简单的
故障恢复
。缺陷:
故障恢复
无法自动化;写操作无法负载均衡;存储能力受到单机的限制哨兵:在主从复制的基础上,哨兵实现了自动化的
故障恢复
。
见习宇航员*
·
2023-11-08 10:38
Linux
redis
数据库
MySQL---DBA---壹( MySQL简介及安装升级)
一.运维DBA工作内容1.1初级DBA安装配置数据库基本使用基本故障处理1.2中级DBA体系结构备份策略设计
故障恢复
基础高可用的运维(搭建、监控、故障处理、架构演变)基础优化(索引、执行计划、慢日志)1.3
假面骑士kabuto
·
2023-11-06 08:05
Redis学习笔记(高级篇)(自用)
请联系删除文章目录Redis学习笔记(高级篇)(自用)1.Redis持久化1.1RDB1.2AOF1.3对比2.主从架构2.1主从集群2.2全量同步2.3增量同步3.哨兵机制(哨兵集群)3.1监控3.2自动
故障恢复
Zzzchc
·
2023-11-06 03:19
学习笔记(自用)
redis
学习
数据库
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他