E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Kafka高可用
数据复制一(主从复制详解)
通过数据复制有以下好处:降低访问延迟(数据复制到离用户更近的地方)、当机器出现故障时,可以切换到副本机器,从而提
高可用
性、多台机器可以同时提供服务,从而提高吞吐量。
风清扬-独孤九剑
·
2025-01-20 19:18
mysql
数据复制
主从复制
kafka
学习笔记3-传统部署Kraft模式集群——筑梦之路
部署
kafka
集群规划一般模式下,元数据在zookeeper中,运行时动态选举controller,由controller进行
Kafka
集群管理。
筑梦之路
·
2025-01-20 19:10
kafka
学习
笔记
【
kafka
】简单运用go语言操作
kafka
实现生产者和消费者功能的包,confluent-
kafka
-go和sarama
confluent-
kafka
-go和sarama对比特性confluent-
kafka
-gosarama底层实现基于librd
kafka
C库完全用Go实现性能高吞吐量、低延迟吞吐量较低,适合常规应用安装依赖需要
{⌐■_■}
·
2025-01-20 16:17
kafka
golang
分布式
Mysql8 MHA
MySQL
高可用
架构之MHA简介:1、MHA简介MHA介绍MHA(MasterHighAvailability)目前在MySQL
高可用
方面是一个相对成熟的解决方案,它由日本DeNA公司youshimaton
不吃稻米的熊
·
2025-01-20 13:42
mysql
数据库
mysql
服务器
flume系列之:flume落cos
flume系列之:flume落cos一、参考文章二、安装cosjar包三、添加hadoop-cos的相关配置四、flume环境添加hadoop类路径五、使用cos路径六、启动/重启flume一、参考文章
Kafka
快乐骑行^_^
·
2025-01-20 13:42
日常分享专栏
flume系列
Mysql运维篇(五) 部署MHA--主机环境配置
大佬博文https://www.cnblogs.com/gomysql/p/3675429.htmlMySQL
高可用
(MHA)-知乎一、MHA简介:MHA(MasterHighAvailability)
努力的兜
·
2025-01-20 13:06
mysql
运维
数据库
mysql8 mha_探索MySQL
高可用
架构之MHA(8)
探索MySQL
高可用
架构之MHA(8)-----构建mysql
高可用
系列(共9篇)上一篇文章介绍了本次架构的mha读写分离!世上本来就没有十全十美的事物。你不能要求一个人没有一点缺点错误。
樱桃小公举
·
2025-01-20 12:04
mysql8
mha
什么是三高架构?
1000道互联网大厂Java工程师精选面试题-Java资源分享网“三高架构”通常是指
高可用
性(HighAvailability)、高性能(HighPerformance)和高扩展性(HighScalability
java1234_小锋
·
2025-01-20 12:27
java
架构
java
微服务
Mysql8 MHA(1)
简介:1、MHA简介MHA介绍MHA(MasterHighAvailability)目前在MySQL
高可用
方面是一个相对成熟的解决方案,它由日本DeNA公司youshimaton(现就职于Facebook
秒变学霸的18岁码农
·
2025-01-20 11:24
服务器
数据库
mysql
高可用
架构-CAP理论
2019独角兽企业重金招聘Python工程师标准>>>整理自:《从零开始学架构》李运华著转载于:https://my.oschina.net/grace233/blog/2236736
weixin_33939843
·
2025-01-20 10:13
新一代实时神器-Fluss初识及部署
在作者看来,其实Fluss目前的主要替换者是
Kafka
,它的出现也是为了替换
kafka
在实时数仓链路中
本旺
·
2025-01-20 06:01
大数据
Flink
Fluss
flink
大数据
数据结构
etl
Hadoop 和 Spark 的内存管理机制分析
博客内容包括:Java核心技术与微服务:涵盖Java基础、JVM、并发编程、Redis、
Kafka
、Spring等,帮助您全面掌握企业级开发技术。
王子良.
·
2025-01-20 03:27
经验分享
hadoop
spark
大数据
MySQL 进阶:运维与架构 - 从链式复制到主从复制
MySQL进阶:运维与架构-从链式复制到主从复制在MySQL数据库的
高可用
性和扩展性架构中,链式复制提供了一种灵活的方式来扩展复制拓扑结构。
墨夶
·
2025-01-20 01:11
数据库学习资料1
mysql
运维
架构
MySQL 进阶:运维与架构 - 从主从复制到链式复制
MySQL进阶:运维与架构-从主从复制到链式复制在MySQL数据库的
高可用
性和扩展性架构中,主从复制是一种常见的技术手段。通过主从复制,可以实现数据的备份、故障恢复、读写分离等功能。
墨夶
·
2025-01-20 01:10
数据库学习资料1
mysql
运维
架构
深入理解 Windows Server 的核心功能:现代 IT 架构的基石
从中小型企业到跨国公司,WindowsServer提供了从身份管理到
高可用
性的一系列功能,帮助组织应对复杂的IT挑战。作为一名运维人员或IT架构师,理解其核心功能对于设计高效、安全、可扩展的IT环境
Echo_Wish
·
2025-01-19 22:42
让你快速入坑运维
运维探秘
windows
架构
kafka
Kafka
学习之路
Kafka
必知必会
kafka
核心原理go操作
kafka
消息队列之-
Kafka
Kafka
分区分配策略或(https://blog.csdn.net/u013256816/article/
宋song一
·
2025-01-19 20:28
中间件
kafka
big
data
揭秘 Fluss 架构组件
Fluss部署,带领大家部署Fluss环境,体验一下Fluss的功能Fluss整合数据湖的操作,体验Fluss与数据湖的结合讲解了Fluss、
Kafka
、Paimon之间的区别和联系前面三篇文章可以让大家上手玩起来
·
2025-01-19 19:57
java
深入探讨
Kafka
:架构、实现原理与开发实践
深入探讨
Kafka
:架构、实现原理与开发实践Apache
Kafka
是一个高性能的分布式流处理平台,广泛应用于实时数据处理、日志收集、消息发布/订阅等领域。
Ceramist
·
2025-01-19 18:41
kafka
架构
分布式
9.
kafka
单实例安装
1.环境信息OSVersionZookeeperVersionUserRHEL7.73.8.0root
kafka
官网下载地址:Apache
Kafka
备注:与在同一台服务器。
小黑要上天
·
2025-01-19 16:19
Kafka
kafka
分布式
互联网三高架构:
高可用
、高性能、高扩展
因此,"三高架构"(
高可用
、高性能、高扩展)应运而生,成为现代互联网架构的标配。本文将深入分析“互联网三高架构”中的每一个维度,并探讨在实际系统中如何实现这些目标。1.
高可用
(Hig
百味人生一壶酒
·
2025-01-19 11:46
系统架构
Flink(十):DataStream API (七) 状态
2.状态的类型Flink提供了强大的状态管理机制,允许应用程序在分布式环境中处理状态,保证
高可用
性和容错性。Flin
Leven199527
·
2025-01-19 11:41
Flink
flink
大数据
ShardingSphere 功能详细介绍
ShardingSphere是一个开源的分布式数据库中间件,旨在为数据库提供高可扩展性、可管理性和
高可用
性,支持数据的分库分表(Sharding)、数据库路由、数据同步等功能。
冰糖心158
·
2025-01-19 10:06
数据库
Nacos深度剖析:配置及
高可用
方案全攻略
文章目录第1章Nacos服务端配置参数1.1全局参数1.2Naming模块参数1.3Config模块参数1.4CMDB模块参数第2章NacosClient配置参数2.1通用参数2.2Naming客户端2.3Config客户端第3章Nacos单机与集群3.1Nacos端口介绍3.2容器常用属性配置第1章Nacos服务端配置参数对于Server端来说,一般是设置在{nacos.home}/conf/a
磐基Stack专业服务团队
·
2025-01-19 08:43
Nacos
Nacos
Kafka
面试夺命连环30问(一)
1、
kafka
消息发送的流程?Producer创建并配置。发送消息,消息被序列化,并通过配置的分区规则决定发送的分区。Producer发送请求,通过网络将消息发送到相应的Broker。
知否&知否
·
2025-01-19 07:36
kafka
面试
分布式
2-2-18-15 QNX系统架构之
高可用
性
阅读前言本文以QNX系统官方的文档英文原版资料为参考,翻译和逐句校对后,对QNX操作系统的相关概念进行了深度整理,旨在帮助想要了解QNX的读者及开发者可以快速阅读,而不必查看晦涩难懂的英文原文,这些文章将会作为一个或多个系列进行发布,从遵从原文的翻译,到针对某些重要概念的穿插引入,以及再到各个重要专题的梳理,大致分为这三个层次部分,分不同的文章进行发布,依据这样的原则进行组织,读者可以更好的查找和
星原飞火
·
2025-01-19 06:26
2-2-18
QNX
系统架构
blackberry
车载系统
QNX
系统架构
高可用性
健康管理
docker部署ELK日志系统+
kafka
docker部署ELK日志系统+
kafka
1.部署elasticsearch#拉取镜像dockerpullelasticsearch:7.6.2#创建文件夹mkdir-p/data/elk/es/config
weixin_50837690
·
2025-01-19 04:08
docker
kafka
elk
elasticsearch
Mysql----
高可用
集群
减轻单台服务器的访问压力同时实现数据的备份缺点:读写分离服务器主数据库从数据库都存在单点故障问题分库分表解决是的大量并发存储数据的存储压力问题和存储空间问题缺点:分片存储服务器有单点故障问题没有数据备份的功能(mysql
高可用
集群
晗光HG
·
2025-01-19 04:07
mysql
dba
Mysql数据库
高可用
群集
目录前言一、概念二、如何实现Mysql数据库
高可用
群集1.可靠性概念三、实现Mysql数据库
高可用
群集1.先做主从复制1.1Master11.2Master22.再做主主2.1Master12.2Master23
一坨小橙子ovo
·
2025-01-19 03:51
数据库
基于docker微服务日志ELK+
Kafka
搭建
ELK是Elasticsearch、Logstash、Kibana的简称Elasticsearch是实时全文搜索和分析引擎,提供搜集、分析、存储数据三大功能;是一套开放REST和JAVAAPI等结构提供高效搜索功能,可扩展的分布式系统。它构建于ApacheLucene搜索引擎库之上。Logstash是一个用来搜集、分析、过滤日志的工具。它支持几乎任何类型的日志,包括系统日志、错误日志和自定义应用程
我是奶龙!我是奶龙!我是奶龙!
·
2025-01-19 02:16
docker
微服务
elk
spring
cloud
spring
boot
kafka
使用 Hadoop 实现大数据的高效存储与查询
博客内容包括:Java核心技术与微服务:涵盖Java基础、JVM、并发编程、Redis、
Kafka
、Spring等,帮助您全面掌握企业级开发技术。
王子良.
·
2025-01-18 23:24
经验分享
大数据
hadoop
分布式
Flink 使用
Kafka
作为数据源时遇到了偏移量提交失败的问题
具体的错误日志21:43:57.069[
Kafka
FetcherforSource:CustomSource->Map->Filter(1/1)#2]ERRORorg.apache.
kafka
.clients.consumer.internals.ConsumerCoordinator
java我跟你拼了
·
2025-01-18 23:19
异常笔记
flink
kafka
大数据
K8s组件全解析,你需要知道的一切秘密
K8s组件全解析,你需要知道的一切秘密K8s架构概览APIServer:K8s的门面担当控制平面组件详解etcd:
高可用
的数据存储基石工作负载管理与调度策略网络模型与服务发现机制存储编排与持久化解决方案日志监控与故障排查工具链
master_chenchengg
·
2025-01-18 22:42
能力提升
面试宝典
技术
IT信息化
【自动化革命】——Java云原生应用故障注入测试的全自动化之旅
在当今快速变化的技术环境中,确保应用程序的
高可用
性和容错能力是开发者和运维团队的核心关注点。
墨夶
·
2025-01-18 22:06
Java学习资料2
自动化
java
云原生
kafka
+connector集群迁移
示例环境ip部署信息备注192.168.181.121zookeeper、
kafka
、connecter待迁移集群节点1192.168.181.14zookeeper、
kafka
、connecter待迁移集群节点
mark.meng
·
2025-01-18 20:47
中间件
kafka
分布式
keepalived+haproxy实现
高可用
集群
实验环境172.16.32.21172.16.32.22Vip:172.16.32.301.部署httpd测试服务yuminstallhttpdecho"172.16.32.22">>/var/www/html/id.htmlsystemctlstarthttpdcurl172.16.32.22/id.html172.16.32.222.部署haproxy实现负载均衡yuminstallhapro
mark.meng
·
2025-01-18 20:17
中间件
运维
使用java代码消费
kafka
数据
首先创建maven项目,导入jar包org.apache.
kafka
kafka
-clients3.0.0org.slf4jslf4j-log4j121.7.25示例一:使用java代码消费
kafka
所有数据
二进制_博客
·
2025-01-18 19:34
大数据
java
kafka
Nginx 集群测试
在Nginx集群的部署和维护过程中,为了确保系统的
高可用
性、性能和扩展性,必须进行全面的测试。
小馋喵知识杂货铺
·
2025-01-18 18:02
性能
中间件
2.TIDB整体架构
与传统的单机数据库相比,TiDB具有以下优势:纯分布式架构,拥有良好的扩展性,支持弹性的扩缩容支持SQL,对外暴露MySQL的网络协议,并兼容大多数MySQL的语法,在大多数场景下可以直接替换MySQL默认支持
高可用
胡晗-
·
2025-01-18 14:30
tidb
【大数据学习 |
kafka
】
kafka
的组件架构
broker:每个
kafka
的机器节点都会运行一个进程,这个进程叫做broker,负责管理自身的topic和partition,以及数据的存储和处理,因为
kafka
是集群形式的,所以一个集群中会存在多个
Vez'nan的幸福生活
·
2025-01-18 10:30
大数据
mysql
oracle
json
sql
kafka
大数据-257 离线数仓 - 数据质量监控 监控方法 Griffin架构
目前已经更新到了:Hadoop(已更完)HDFS(已更完)MapReduce(已更完)Hive(已更完)Flume(已更完)Sqoop(已更完)Zookeeper(已更完)HBase(已更完)Redis(已更完)
Kafka
武子康
·
2025-01-18 10:29
大数据
离线数仓
大数据
数据仓库
java
后端
hadoop
hive
Springboot项目如何消费
Kafka
数据
目录一、引入依赖二、添加
Kafka
配置三、创建
Kafka
消费者(一)
Kafka
生产的消息是JSON字符串1、方式一2、方式二:需要直接访问消息元数据(二)
Kafka
生产的消息是对象Order四、创建启动类五
布朗克168
·
2025-01-18 10:25
Kafka
spring
boot
kafka
后端
keepalived 、HAProxy
KeepAlived
高可用
集群配置
高可用
的web集群监控本机80端口,实现主备切换实现原理实施配置
高可用
、负载均衡的web集群配置
高可用
、负载均衡HAProxy配置haproxy负载均衡调度器比较LVS
www.农民工
·
2025-01-18 10:53
智能路由器
网络
如何通过 Nginx 实现 CouchDB 集群的负载均衡并监控请求分发
在现代分布式系统中,负载均衡是确保
高可用
性和性能的关键组件。CouchDB是一个强大的分布式数据库,而Nginx是一个高性能的反向代理和负载均衡器。
田猿笔记
·
2025-01-18 07:36
CouchDB
nginx
couchdb
负载均衡
Python 爬虫:获取网页数据的 5 种方法
博客内容包括:Java核心技术与微服务:涵盖Java基础、JVM、并发编程、Redis、
Kafka
、Spring等,帮助您全面掌握企业级开发技术。
王子良.
·
2025-01-18 07:35
经验分享
python
python
开发语言
爬虫
分布式数据库:技术深度解析与应用实践
分布式数据库:技术深度解析与应用实践随着数据量的爆炸性增长和用户访问量的不断增加,传统的单机数据库系统逐渐暴露出在
高可用
性、高并发性和高扩展性方面的不足。
我的运维人生
·
2025-01-17 21:46
分布式
数据库
运维开发
技术共享
如何在 K8s 上部署 KRaft 模式
Kafka
集群?
首发:运维有术今天分享的主题是:不使用Helm、Operator,如何在K8s集群上手工部署一个开启SASL认证的KRaft模式的
Kafka
集群?
·
2025-01-17 19:07
后端
深入 Kubernetes 的健康奥秘:探针(Probe)究竟有多强?
没有它,K8s的稳定性和
高可用
性可能会大打折扣。本文将从探针的原理讲起,结合实际场景深入解析它
·
2025-01-17 19:06
云计算
【Redis进阶】Redis哨兵Sentinel
目录什么是哨兵机制为什么要引入哨兵机制图解哨兵工作流程1.监控2.故障转移3.通知客户端4.重新配置从服务器故障转移流程哨兵机制的配置哨兵机制的优缺点优点:缺点:什么是哨兵机制Redis哨兵机制(RedisSentinel)是Redis提供的一种
高可用
性解决方案
小智coding
·
2025-01-17 19:27
Redis
redis
sentinel
数据库
Flink 批作业如何在 Master 节点出错重启后恢复执行进度?
主要分为以下四个内容:背景解决思路使用效果如何启用一、背景在Flink1.20版本之前,如果Flink的JobMaster(JM)发生故障导致被终止,将会发生如下两种情况:如果作业未启用
高可用
性(HA)
·
2025-01-17 19:30
flink大数据
采用海豚调度器+Doris开发数仓保姆级教程(满满是踩坑干货细节,持续更新)
1.架构复杂性2.数据处理性能3.数据同步与更新4.资源利用率与成本6.生态系统与兼容性7.符合信创或国产化要求二、ODS层接入数据接入
kafka
实时数据踩坑的问题细节三、海豚调度器调度Doris进行报表开发创建带分区的表在
大模型大数据攻城狮
·
2025-01-17 19:56
海豚调度器从入门到精通
doris
海豚调度器
离线数仓
实时数仓
国产代替
信创大数据
flink数仓
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他