E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
flink高可用
Kubernetes部署系列:
高可用
MySQL集群
PerconaXtraDBCluster(PXC)是一个开源的MySQL
高可用
性(HA)解决方案,它建立在PerconaServerforMySQL之上,是一个基于GaleraCluster的分布式数据库集群
Cancerking
·
2024-01-03 22:46
Kubernetes系列
kubernetes
mysql
容器
深入理解Mysql MHA
高可用
集群搭建:从实验到实战
1.简介MHA(MasterHighAvailability)是一个高效的开源MySQL
高可用
性解决方案。
光芒软件工匠
·
2024-01-03 22:21
mysql
数据库
Nginx入门到放弃
loadbalance负载均衡highavailability
高可用
1、nginx简介俄罗斯一位程序员开发2、使用场景web服务器高并发场景正向代理反向代理3、源码安装ngxin解压:tar-zxfnginx
YolandaRay
·
2024-01-03 21:37
Nginx
nginx
运维
memcached
谈谈PhxSQL的设计和实现哲学(下)
为了保证强一致的线性一致性、
高可用
、serializable级别事务隔离、完全兼容MySQL、和最小侵入MySQL,PhxSQL放弃了一些特性。正文7.WhyNot?7.1.
OpenIMup
·
2024-01-03 20:54
RocketMQ源码 创建Topic流程源码分析
它内部实现是通过mqClient工具从NameServer拉取当前Topic对应的路由元数据信息,解析遍历和当前topic有关的broker
高可用
分组集合,找到分组中的master主节点,然后依次对broker
虚空小白
·
2024-01-03 20:47
RocketMQ源码
rocketmq
源码
topic
java-rocketmq
java
RadonDB MySQL on K8s 2.1.2 发布!
RadonDBMySQL是一款基于MySQL的开源、
高可用
、云原生集群解决方案。支持一主多从
高可用
架构,并具备安全、自动备份、
RadonDB
·
2024-01-03 19:53
Java常见的限流算法
1、限流算法简介在分布式系统中,高并发场景下,为了防止系统因突然的流量激增而导致的崩溃,同时保证服务的
高可用
性和稳定性,限流是最常用的手段。
FearlessVoyager
·
2024-01-03 19:27
Java
java
算法
开发语言
Java综合知识——单元化
高可用
架构演进历程
1.1.1单元化
高可用
架构演进历程一、基本概念1.什么是单元化?所谓单元,是指一个能完成所有业务操作的自包含集合,在这个几乎中包含了所有业务所需的所有服务,以及分配给这个单元的数据。
zhuhaotian1003
·
2024-01-03 18:00
java
在与面试官面试之后的某些回想
4.我感觉在面试官说完后,我还是很懵,比如人家说
flink
架构时,我回答的是运行架构,
劝学-大数据
·
2024-01-03 17:22
心得体会
大数据
深入浅出 Cassandra:架构与组件解析
ApacheCassandra是一个分布式数据库系统,它具有高可扩展性、
高可用
性和高性能等特点,已经被广泛应用于各种行业。
OpenChat
·
2024-01-03 17:39
大数据
人工智能
语言模型
AI
LLM
Java
Python
架构设计
Agent
RPA
基于
Flink
的百亿数据去重实践
在工作中经常会遇到去重的场景,例如基于App的用户行为日志分析系统,用户的行为日志从手机客户端上报到Nginx服务端,通过Logstash、Flume或其他工具将日志从Nginx写入到Kafka中。由于用户手机客户端的网络可能出现不稳定,所以手机客户端上传日志的策略是:宁可重复上报,也不能丢日志。所以导致Kafka中必然会出现日志重复的情况,即:同一条日志出现了2条或2条以上。通常情况下,Flin
zhisheng_blog
·
2024-01-03 16:52
大数据实时计算引擎
Flink
实战与性能优化
Flink
维表关联方案
Flink
维表关联方案1、
Flink
DataStream关联维表1)概述1.分类实时数据库查找关联(Per-RecordReferenceDataLookup)预加载维表关联(Pre-LoadingofReferenceData
猫猫爱吃小鱼粮
·
2024-01-03 16:49
flink
数据库
大数据
Flink
-Paimon 案例
Flink
-Paimon案例1、下载
Flink
Jar包并解压tar-xzf
flink
-*.tgz2、下载PaimonJar包放进
Flink
的lib中cppaimon-
flink
-*.jar/lib/3、
猫猫爱吃小鱼粮
·
2024-01-03 16:49
flink
大数据
全局唯一id
应该具备的要素基于Redis的INCR命令实现Redis命令:配置文件工具类实现唯一ID应该具备的要素唯一性:确保生成的ID是全局唯一的有序递增性:确保生成的D是对于某个用户或者业务是按一定的数字有序递增的
高可用
性
没有昵称的打工仔
·
2024-01-03 14:28
spring
boot
后端
keepalived群集
keepalived介绍Keepalived是一个基于vrrp协议来实现LVS服务
高可用
方案,可以解决静态路由出现的单点故障问题keepalived工作原理在一个LWS服务集群中通常有主服务器STBR)
孟孟爱吃香菜
·
2024-01-03 12:58
linux
运维
服务器
数睿通2.0功能更新:支持多版本
Flink
切换,新增数据标签模块
文章目录引言支持多版本
Flink
切换功能展示使用方法数据标签合并微服务Bug修复,细节优化结语引言小伙伴们,大家好,数睿通2.0数据中台迎来了12月份的更新,由于年底工作繁忙,所以本次更新内容稍微少了点
小螺旋丸
·
2024-01-03 10:22
大数据
springboot
flink
大数据
数据仓库
数睿通2.0数据接入、数据开发、系统权限、集群监控全面升级
引言数睿通2.0数据中台迎来了11月份的更新,感谢大家的支持,本次更新主要包括以下内容:数据库支持MongoDB数据接入支持MongoDB,支持自定义SQL采集,支持停止运行中的任务数据生产支持
Flink
Jar
小螺旋丸
·
2024-01-03 10:21
数据中台
大数据
数据库
数据仓库
新年快乐—数睿通2.0数据中台全新功能模块发布
文章目录引言数据集成数据库管理文件管理数据接入贴源数据数据开发数据生产sql作业开发
Flink
Sql作业开发调度中心运维中心资源中心配置中心其他模块结语引言离上次发文已经有接近三个月了,这三个月主要在开发数睿通的数据生产模块
小螺旋丸
·
2024-01-03 10:43
大数据
springcloud
java
数据库
大数据
云计算
Redis专题(持续更新)
03-VIP-Redis
高可用
集群之水平扩展文章目录03-VIP-Redis
高可用
集群之水平扩展正文1、启动集群启动整个集群客户端连接8001端口的redis实例查看集群状态2、集群操作增加redis实例配置
Player
·
2024-01-03 09:34
redis
bootstrap
数据库
Redis专题(持续更新)
02-VIP-Redis持久化、主从与哨兵架构详解文章目录02-VIP-Redis持久化、主从与哨兵架构详解正文Redis哨兵
高可用
架构redis哨兵架构搭建步骤:sentinel集群都启动完毕后,会将哨兵集群的元数据信息写入所有
Player
·
2024-01-03 09:33
redis
bootstrap
数据库
Redis专题:一文搞懂主从复制原理!
Redis主从复制,以一主多从的模式建立的分布式系统,是Redis搭建
高可用
集群(哨兵模式、Cluster模式)的基础,为容错、故障转移提供强有力的支撑。本文将介绍以下内容:主从示例Redis设置主从
Raysonxin
·
2024-01-03 09:27
Redis
redis
Redis专题(持续更新)
03-VIP-Redis缓存
高可用
集群文章目录03-VIP-Redis缓存
高可用
集群正文1、Redis集群方案比较2、Redis
高可用
集群搭建redis集群搭建3、Java操作redis集群4、Redis
Player
·
2024-01-03 09:56
redis
数据库
缓存
Mysql的主从复制和读写分离
一.主从复制主从复制的作用:读写分离读写分离具有
高可用
性主从复制的工作过程:主服务器master发生数据变化时,会记录到二进制日志中;从服务器slave会开启io线程请求二进制日志事件;主服务器会为每个
伍dLu
·
2024-01-03 09:35
mysql
数据库
Flink
-【时间语义、窗口、水位线】
1.时间语义1.1事件时间:数据产生的事件(机器时间);1.2处理时间:数据处理的时间(系统时间)。:可乐可乐的生产日期=事件时间(可乐产生的时间);可乐被喝的时间=处理时间(可乐被处理【喝掉=处理】的时间)。机器时间:可能不准确(例如:A可乐厂的时钟比较慢,B可乐厂的时钟比较快,但实际上B产生可乐的时间比A产生可乐的时间慢,却被先处理了)系统时间:相对准确(处理机器设置的时间,一般无误【当然分布
可乐manman
·
2024-01-03 09:58
大数据处理
flink
大数据
Flink
的检查点算法
Flink
的恢复机制基于应用状态的一致检查点。在有状态的流应用中,一个一致性检查点是:在所有tasks处理了一个(相同的)输入后,当前时间点每个task的state副本。
XueminXu
·
2024-01-03 09:52
flink
大数据
checkpoint
检查点
Chandy-Lamport
Flink
实时电商数仓(十)
common模块回顾appBaseApp:作为其他子模块中使用
Flink
-StreamAPI的父类,实现了StreamAPI中的通用逻辑,在其他子模块中只需编写关于数据处理的核心逻辑。
十七✧ᐦ̤
·
2024-01-03 09:50
flink
大数据
MPP(大规模并行处理)简介
非共享数据库集群有完全的可伸缩性、
高可用
、高性能、优秀的性价比、资源共享等优势。简单来说,MPP
shanshan3003
·
2024-01-03 07:24
数据库
大数据
如何在 Ubuntu 20.04 上以独立模式设置 MinIO 对象存储服务器
Ubuntu20.04上以独立模式设置MinIO对象存储服务器介绍存储非结构化对象数据blob并使其可通过HTTPAPI(称为对象存储)进行访问的能力是现代技术领域不可或缺的一部分,尤其是基于云的备份解决方案和
高可用
性内容交付网络
timi先生
·
2024-01-03 07:51
编程笔记
服务器
ubuntu
linux
Flume基础知识(一):Flume组成原理与架构
1.Flume定义Flume是Cloudera提供的一个
高可用
的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。
依晴无旧
·
2024-01-03 07:18
大数据
flume
大数据
Rancher v2.4.8 使用etcd备份恢复rke
高可用
集群
使用etcd备份恢复v1.0.14rke
高可用
集群1.背景说明2.需要的准备2.1新节点准备2.2配置文件3.开始恢复3.1环境清理脚本3.2修改配置文件3.3执行etcd恢复3.4修改配置文件,恢复集群
zhangpfly
·
2024-01-03 06:06
k8s
运维
docker
kubernetes
运维
RKE安装k8s及部署
高可用
rancher
一了解Rancher1推荐架构安装Rancher的方式有两种:单节点安装和
高可用
集群安装。
Michaelwubo
·
2024-01-03 06:30
kubernetes
rancher
容器
docker-compose 部署zookeeper集群 —— 筑梦之路
1.zookeeper介绍Zookeeper是一个开源的分布式协调服务中间件,它提供了一种分布式数据管理服务,能够实现分布式锁、命名服务、配置管理、集群管理等功能,从而帮助用户构建
高可用
、高性能的分布式系统
筑梦之路
·
2024-01-03 06:26
linux系统运维
数据库技术
Java技术
java-zookeeper
docker
zookeeper
用Redis实现实现全局唯一ID
全局唯一ID如果使用数据库自增ID就存在一些问题:id的规律性太明显受表数据量的限制全局ID生成器,是一种在分布式系统下用来生成全局唯一ID的工具,一般要满足下列特性:唯一性
高可用
递增性安全性高性能为了增加
小云很优秀
·
2024-01-03 05:26
Redis
redis
数据库
缓存
HBase 容错和
高可用
HBase是一个没有单点故障的分布式系统,计算层和存储层都有各自的保障了服务的可用性。HBase容错HMaster容错HMaster可以配置HA,利用Zookeeper重新选择新的HMaster,并且HMaster宕机的情况,数据仍然可以读取,但是无法进行负载均衡和Region切分等操作。HRegionServer容错RegionServer如果出现宕机,HMaster会通过Zookeeper监听
Alex90
·
2024-01-03 02:45
Oracle 日志路径查询介绍
GI包含两个最主要的组件:Clusterware集群软件和ASM存储软件,这两个软件提供数据库
高可用
能力。Oracle数据库至少由一个数据库实例和一个数据库文件组成。
亓荼
·
2024-01-03 01:13
数据库
oracle
数据库
Redis Sentinel 源码分析 - Sentinel的初始化
作者:WenHui转载:中间件小哥RedisSentinel是Redis提供的
高可用
模型解决方案。Sentinel可以自动监测一个或多个Redis主备实例,并在主实例宕机的情况下自动实行主备倒换。
中间件小哥
·
2024-01-03 01:01
如何在
Flink
SQL中轻松实现高效数据处理:最佳实践揭秘Protobuf自定义格式
目录
Flink
SQLProtobufFormat设计要点1.引言2.为什么需要自定义Protobuf格式3.自定义Protobuf格式的
数据与后端架构提升之路
·
2024-01-03 00:39
#
Flink
flink
sql
大数据
阿里云RDS 数据迁移备份本地数据库
自建库安装qpress解压工具下载备份解压和恢复备份启动Mysql启动错误常见报错关于内存扩容关于开放防火墙方案准备RDSMysql可适用版本存储类型系列需要插件mysql.5.75.75.5本地SSD
高可用
版
路跑码码
·
2024-01-02 23:28
学习日记
数据库
阿里云
mysql
linux
centos
面试又被问到一致性 Hash 算法?这样回答秒杀面试官!
当数据量少,访问压力不大的时候,通常一台Redis就能搞定,为了
高可用
,弄个主从也就足够了;当数据量变大,并发量也增加的时候,把全部的缓存数据放在一台机器上就有些吃力了,毕竟一台机器的资源是有限的,通常我们会搭建集群环境
会点代码的大叔
·
2024-01-02 20:34
zookeeper分布式应用程序协调服务,Paxos协议
一致性协议的重要性为保证分布式系统的高可靠和
高可用
性,数据在系统中一般存储多个副本。当某个副本所在的节点出现故障时,分布式系统能够自动将服务切换到其他的副本,从而实现自动容错。
javap
·
2024-01-02 20:43
Redis Cluster集群模式学习
133956200RedisCluster集群模式示意图:Cluster模式是Redis3.0开始推出采用无中心结构,每个节点保存数据和整个集群状态,每个节点都和其他所有节点连接官方要求:至少6个节点才可以保证
高可用
帅喵
·
2024-01-02 19:42
Redis
Cluster
【Harbor】基于Harbor和CephFS搭建
高可用
Private Registry
htmlVMwareHarbor基于DockerDistribution的企业级Registry服务http://www.dockerinfo.net/3245.htmlHarboronKubernetes
高可用
方案
Bogon
·
2024-01-02 19:38
微服务实践之Docker应用
微服务很火,无论你用或者不用,它都将继续火下去,这是由日益庞大的系统的
高可用
需求决定的。微服务注重单一职责的小型功能模块拆分,独立部署运维,模块间互相隔离,通过API交互来搭建系统。
嘉为蓝鲸
·
2024-01-02 19:11
Docker
Redis的应用详解
一、NoSQL1、概述为了解决高并发、高可扩展、
高可用
、大数据存储问题而产生的数据库解决方案,就是NoSql数据库。
耳冉鹅
·
2024-01-02 18:42
Redis
redis
哨兵模式
缓存
Flink
学习-处理函数
简介处理函数是
Flink
底层的函数,工作中通常用来做一些更复杂的业务处理,处理函数分好几种,主要包括基本处理函数,keyed处理函数,window处理函数。
demon7552003
·
2024-01-02 17:29
大数据
flink
java
【
flink
番外篇】9、
Flink
Table API 支持的操作示例(11)- Group Windows(tumbling、sliding和session)操作
Flink
系列文章一、
Flink
专栏
Flink
专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、
Flink
部署系列本部分介绍
Flink
的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan
·
2024-01-02 14:22
flink
示例专栏
flink
大数据
kafka
flink
hive
flink
sql
flink
流批一体
flink
kafka
【
flink
番外篇】9、
Flink
Table API 支持的操作示例(8)- 时态表的join(scala版本)
Flink
系列文章一、
Flink
专栏
Flink
专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、
Flink
部署系列本部分介绍
Flink
的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan
·
2024-01-02 14:21
flink
示例专栏
flink
大数据
kafka
flink
kafka
flink
流批一体化
scala
flink
时态表
【
flink
番外篇】9、
Flink
Table API 支持的操作示例(10)- 表的OrderBy、Offset 和 Fetch、insert操作
Flink
系列文章一、
Flink
专栏
Flink
专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、
Flink
部署系列本部分介绍
Flink
的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan
·
2024-01-02 14:21
flink
示例专栏
flink
大数据
kafka
flink
sql
flink
hive
flink
kafka
flink
大数据
【
flink
番外篇】9、
Flink
Table API 支持的操作示例(9)- 表的union、unionall、intersect、intersectall、minus、minusall和in的操作
Flink
系列文章一、
Flink
专栏
Flink
专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、
Flink
部署系列本部分介绍
Flink
的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan
·
2024-01-02 14:49
flink
示例专栏
flink
大数据
kafka
flink
hive
flink
sql
flink
实时计算
flink
大数据
高可用
解决方案 Keepalived 概述
概述Keepalived介绍Keepalived是Linux下一个轻量级别的
高可用
解决方案,通过**VRRP协议(虚拟路由冗余协议)**来实现服务或者网络的
高可用
,可以利用其来解决单点故障。
墨鸦_Cormorant
·
2024-01-02 14:12
Linux
高可用
keepalived
VIP
虚拟路由冗余协议
上一页
42
43
44
45
46
47
48
49
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他