E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据库mysql分布式高可用
ES
高可用
架构涉及常用功能整理
ES
高可用
架构涉及常用功能整理1.es的
高可用
系统架构和相关组件2.es的核心参数2.1常规配置2.2特殊优化配置2.2.1数据分片按ip打散2.2.2数据分片机架感知2.2.3强制要求数据分片机架感知
李姓门徒
·
2024-02-05 11:18
Es
大数据
中间件
elasticsearch
架构
大数据
Hadoop3.x单机安装教程
以最小化的成本学习和测试Hadoop;搭建基于Hadoop的上层应用,比如单机Spark环境需要先拥有单机的Hadoop;如果需要搭建
分布式
集群环境的Hadoop环境,请参考另外一篇:Hadoop3.x
文景大大
·
2024-02-05 10:06
【Redis】理论基础 - 主从复制
主从复制基础概念1)什么是主从复制2)主从节点的角色2.配置主从复制1)主节点配置2)从节点配置3.启动主从复制4.检查主从关系5.主从复制的管理1)断线重连2)复制偏移量结语Redis的复制机制是保障数据
高可用
性和冗余的关键组成部分
好久不见的流星
·
2024-02-05 10:20
Reids
redis
数据库
缓存
架构篇33:传统的可扩展架构模式-分层架构和SOA
文章目录分层架构SOA小结相比于高性能、
高可用
架构模式在最近几十年的迅猛发展来说,可扩展架构模式的发展可以说是步履蹒跚,最近几年火热的微服务模式算是可扩展模式发展历史中为数不多的亮点,但这也导致了现在谈可扩展的时候必谈微服务
星猿杂谈
·
2024-02-05 10:32
软件架构
架构
Feign调用出现权限问题 feign.FeignException$Unauthorized: [401] during [GET] to[....]
报错讯息使用SpringCloud+SpringSecurityOauth2.0+JWT做
分布式
认证的时候,内部微服务调用的时候出现权限问题。
Janice幾時開個唱
·
2024-02-05 09:09
spring
boot
后端
java
maven
intellij-idea
微服务
springcloud
云数据库RDS云监控
云数据库RDS是一种在线关系型数据库服务,它具备的特点包括:安全可靠:提供了容灾、备份、恢复等
高可用
性功能,确保数据的安全与可靠。
编织幻境的妖
·
2024-02-05 09:08
数据库
Flink生产环境常见问题及解决方法
故障转移和
高可用
性Flink提供了故障转移和
高可用
性机制,但在配置和使用时可能会遇到问题。如果任务无法从故障节点恢复或无法正确进行故障转移。
咕噜签名分发
·
2024-02-05 09:34
flink
大数据
【Kafka面试】Kafka的
高可用
机制有了解吗?
假如某个broker宕机,在集群中其他的broker依然可以对外提供服务,这个就是集群能够保证
高可用
性。
TAIKEMAN
·
2024-02-05 09:44
Kafka
kafka
kafka副本
高可用
机制
Kafka的每个topic都可以分为多个Partition,并且多个partition会均匀分布在集群的各个节点下。虽然这种方式能够有效的对数据进行分片,但是对于每个partition来说,都是单点的,当其中一个partition不可用的时候,那么这部分消息就没办法消费。所以kafka为了提高partition的可靠性而提供了副本的概念(Replica),通过副本机制来实现冗余备份。每个分区可以有
catch that elf
·
2024-02-05 09:44
kafka
kafka副本机制
kafka
kafka副本
数据同步
kafka
高可用
(集群)
kafka的
分布式
和
高可用
kafka的一个基本架构:多个broker组成,一个broker是一个节点;你创建一个topic,这个topic可以划分成多个partition,每个parttition可以存在于不同的
GoslingWu
·
2024-02-05 09:13
队列
分布式
kafka
zookeeper
rabbitmq
消息队列三|Kafka 如何做到
高可用
?
我们在之前的文章中,聊到了redis的
高可用
机制。本篇文章中我们聊聊Kafka如何做到
高可用
副本?说到Kafka的
高可用
保障,自然都会想到副本。什么是副本呢?
不落叶的榕树
·
2024-02-05 09:11
消息队列
java
消息队列
高并发
Kafka
高可用
性原理
一、Kafka副本基本概念Kafka通过多副本机制实现故障自动转移,Kafka副本一些基本概念:副本是针对分区而言的,即副本是分区的副本一个分区有一个leader副本,多个follower副本,只有leader副本对外提供服务,follower副本只负责数据同步分区所有副本统称AR,ISR指与leader副本保持同步状态的副本集合LEO标识每个分区最后一条消息的下一个位置,ISR中最小的LEO为H
wanger61
·
2024-02-05 09:11
Kafka
kafka
java
分布式
kafka
高可用
集群搭建
kafka
高可用
集群搭建说明这篇博文主要是为了后面的elk做准备,我们这里搭建一个kafka集群,使用2个节点,还是前面的节点。主要是为了后面做数据缓冲。
憧憬blog
·
2024-02-05 09:40
分布式
kafka
java
zookeeper
linux
Kafka基于Zookeeper搭建
高可用
集群实战
目录1、前言1.1
高可用
的由来1.2相关术语2、架构图3、发送消息流程4、部署kafka&zookeeper集群4.1准备工作4.2启动zookeeper集群4.3启动kafka集群4.4测试5、kafka
八五年的湘哥
·
2024-02-05 09:39
#
Kafka
zookeeper
分布式
kafka
java
Kafka
高可用
一.安装kafkakafka官网:http://kafka.apache.org/1.Docker安装zookeeperKafka对于zookeeper是强依赖,保存kafka相关的节点数据,所以安装Kafka之前必须先安装zookeeper下载镜像:dockerpullzookeeper:3.4.14创建容器dockerrun-itd--namezookeeper-p2181:2181zooke
愛沢かりん
·
2024-02-05 09:08
spring
分布式
Kafka
高可用
原理
因为一次Kafka宕机,我明白了Kafka
高可用
原理!转载一篇kafka
高可用
原理文章。
dmlcq
·
2024-02-05 09:08
大数据
kafka
Kafka原理解析(二):
高可用
、高性能机制
目录1、
高可用
机制1.2、
高可用
保障机制1.2.1、消息备份机制1.2.2、ISR1.2.2.1、分区Leader副本的选举1.2.3、消息应答确认机制1.2.4、LEO和HW1.3、故障恢复机制1.3.1
爱看雲的雲
·
2024-02-05 09:38
中间件
kafka
kafka
高可用
副本配置指南
kafka
高可用
副本配置指南前言因测试环境kafka故障致内部业务异常故写一份配置指南操作以下配置及操作kafka目录以实际情况为准可以进入kafka/bin里面,有kafka一般操作脚本kafka连接的
黑虎堂堂主
·
2024-02-05 09:38
花非花
java
kafka
Kafka的
高可用
机制
ApacheKafka是一个
分布式
流处理平台,它通过复制数据和
分布式
系统的一系列特性来提供
高可用
性。以下是Kafka
高可用
性机制的关键方面,以及它们是如何在源码中实现的。
辞暮尔尔-烟火年年
·
2024-02-05 09:37
微服务
消息中间件
kafka
分布式
第十篇【传奇开心果短博文系列】鸿蒙开发技术点案例示例:深度解读鸿蒙全场景适配
传奇开心果短博文系列系列短博文目录鸿蒙开发技术点案例示例系列短博文目录前言一、鸿蒙全场景适配实现介绍二、统一核心示例代码三、设备驱动框架示例代码四、统一界面框架示例代码五、自适应布局示例代码六、
分布式
能力示例代码七
传奇开心果编程
·
2024-02-05 09:06
鸿蒙开发技术点案例示例短博文
harmonyos
华为
大数据原理-Spark
概述:基于内存计算三大
分布式
计算系统:Hadoop、Spark、Storm特点:采用有向无环图DAG作业调度运行速度快循环数据流容易使用:可以通过SparkShell交互式编程用途:SQL查询、流式计算
monster++
·
2024-02-05 09:28
大数据原理
分布式
编程语言
分布式计算
hadoop
spark
大数据 - Spark系列《四》- Spark
分布式
运行原理
大数据计算引擎的演进-CSDN博客大数据-Spark系列《二》-关于Spark在Idea中的一些常用配置-CSDN博客大数据-Spark系列《三》-加载各种数据源创建RDD-CSDN博客目录Spark
分布式
运行原理
王哪跑nn
·
2024-02-05 08:54
spark
大数据
分布式
spark
RocketMQ之事务消息原理
文章目录前言传统XA事务方案:性能不足基于普通消息方案:一致性保障困难基于ApacheRocketMQ
分布式
事务消息:支持最终一致性功能原理事务消息整体流程使用限制使用示例使用建议前言RocketMQ的事务消息是为了解决
分布式
事务的问题
倜傥村的少年
·
2024-02-05 08:19
rocketmq
事务消息
【下一代
分布式
追踪】将Trace扩展到网络设备
下一代
分布式
追踪—将Trace扩展到网络设备一、技术背景二、研究动机三、方法数据采集:数据整合:路径重建:可视化与分析:Foxhound,Foxhound四、典型案例五、结论一、技术背景随着云计算和微服务的普及
沐风—云端行者
·
2024-02-05 08:15
云计算架构
分布式
分布式追踪
trace
83.如何设计
高可用
系统
文章目录一、简介二、导致系统不可用的常见原因三、
高可用
系统设计基本原则四、容错性设计五、弹性伸缩六、可观测七、安全防护设计八、自动化一、简介什么是
高可用
高可用
是指系统在面对各种故障和异常情况时,仍能够提供稳定
百里守约学编程
·
2024-02-05 08:42
go
golang
后端
85.如何设计高并发系统(缓存、限流、熔断、降级)
文章目录一:简介二:什么是高并发1、高并发的定义2、高并发的特点3、高并发场景和应用4、高并发的影响三:高并发应对策略四:缓存1、浏览器缓存2、客户端缓存3、CDN缓存4、反向代理缓存5、本地缓存6、
分布式
缓存
百里守约学编程
·
2024-02-05 08:40
go
缓存
并发
HarmonyOS应用/服务发布:打造多设备生态的关键一步
app文件上架.app文件到AGC结束语前言随着智能设备的快速普及和多样化,以及编程语言的迅猛发展,构建一个无缝连接的多设备生态系统已经成为当前技术发展的大趋势,而HarmonyOS作为华为自主研发的
分布式
操作系统
三掌柜666
·
2024-02-05 08:35
harmonyos
华为
docker 安装minio
MinIO是一款高性能、
分布式
的对象存储系统.它是一款软件产品,可以100%的运行在标准硬件。即X86等低成本机器也能够很好的运行MinIO。
会飞的大鱼吃小鱼
·
2024-02-05 08:29
docker
docker
容器
运维
kafka基本原理
一、kafka概述1、定义kafka是一个
分布式
的基于发布订阅模式的消息队列,主要用于大数据实时处理灵越2、消息队列【1】应用场景用于异步、削峰、解耦【2】两种模式(1)点对点模式一对一,消费者主动拉取数据
会飞的大鱼吃小鱼
·
2024-02-05 08:59
kafka
impala与kudu进行集成
概要Impala是一个开源的高效率的SQL查询引擎,用于查询存储在Hadoop
分布式
文件系统(HDFS)中的大规模数据集。它提供了一个类似于传统关系型数据库的SQL接口,允许用户使用SQL语言
shandongwill
·
2024-02-05 07:44
大数据
impala
kudu
impala与kudu集成
(二十四)ATP应用测试平台——springboot集成fastdfs上传与下载功能
fastdfs是一个轻量级的
分布式
文件系统,也是我们文件存储中常常使用的组件之一,主要包括文件存储、文件同步、文件访问,实现了文件存储和负载均衡的问题。
厉害哥哥吖
·
2024-02-05 07:07
ATP应用测试平台
dfs
中间件
(七)springboot实战——springboot3集成R2DBC实现webflux响应式编程服务案例
需要注意的是,此次项目使用的JDK版本是JDK17,springboot版本使用3.2.2版本,数据库使用关系型
数据库mysql
。
厉害哥哥吖
·
2024-02-05 07:07
#
springboot
ATP应用测试平台
spring
boot
(十四)ATP应用测试平台——使用docker-compose一键式安装ATP应用测试平台的依赖服务
不过由于依赖的增多,项目的服务也随之多了起来,例如为了测试mysql的主从集群读写分离,需要安装mysql的主从服务器,为了测试redis的哨兵模式及
分布式
锁机制,需要安装一套redis集群,为了测试消息中间键
厉害哥哥吖
·
2024-02-05 07:06
#
docker
JAVA
ATP应用测试平台
java
docker
容器
分布式
延时消息的另外一种选择 Redisson (推荐使用)
前言目录前言基本使用内部数据结构介绍基本流程发送延时消息获取延时消息初始化延时队列总结因为工作中需要用到
分布式
的延时队列,调研了一段时间,选择使用RedissonDelayedQueue,为了搞清楚内部运行流程
漫走云雾
·
2024-02-05 07:41
分布式
redis
安全
1.0 Hadoop 教程
Hadoop是一个开源的
分布式
计算和存储框架,由Apache基金会开发和维护。
二当家的素材网
·
2024-02-05 06:38
Hadoop
教程
hadoop
大数据
分布式
Spring Boot+RocketMQ 实现多实例
分布式
环境下的事件驱动
目录1为什么要使用MQ?2整合RocketMQ依赖版本引入RocketMQ依赖解决SpringBoot3+不兼容spring.factories参考配置文件3RocketMQ使用解决SpringBoot3+不支持spring.factories的问题RocketMQ操作工具定义RocketMQ消费者定义测试类发送消息4测试1为什么要使用MQ?在SpringBootEvent这篇文章中已经通过Gua
漫走云雾
·
2024-02-05 06:07
java-rocketmq
spring
boot
rocketmq
2022年度总结
前前后后历经风险预警建设、新从库
高可用
上线,以及故障探测拆分和解耦,从效果上看,都是挺不错的。
翔云123456
·
2024-02-05 06:32
人生感悟
数据库
程序人生
mysql
database
2023年度总结
工作项目上,先后经历了「从库恢复后自动上线」、「主动切换RTO优化」、「MGR
高可用
统一」,以及
高可用
稳定性建设等。另外,还参与了各种演练,包括与业务一起演练,以及其他大规模的批量演练。
翔云123456
·
2024-02-05 06:00
人生感悟
程序人生
MySQL:MySQL的集群——主从复制的原理和配置
前言在实际生产环境中,如果对mysql数据库的读和写都在一台数据库服务器中操作,无论是在安全性、
高可用
性,还是高并发等各个方面都是不能满足实际需求的,一般要通过主从复制的方式来同步数据,再通过读写分离来提升数据库的并发负载能力
_索伦
·
2024-02-05 06:25
MySQL
mysql
数据库
服务器
sql
学习
云原生数据库 GaiaDB 的核心技术演进和解析
新的技术架构带来新的问题和挑战,百度智能云的云原生数据库GaiaDB采用Quorum
分布式
协议、高性能网络、高可靠
分布式
存储引擎等技术实现更高的性能和可用性。
大数据和云计算技术
·
2024-02-05 06:23
云原生
数据库
云计算关键技术
目录一、云计算关键技术概述1.1概述二、关键技术内容2.1虚拟化技术2.2
分布式
数据存储技术2.3资源管理技术2.4云计算平台管理技术2.5多租户隔离技术2.5.1多租户技术下SaaS特征2.5.2多租户技术面临的技术难题
夜夜流光相皎洁_小宁
·
2024-02-05 06:51
网络安全
#
云计算安全
云计算
云计算安全
网络安全
大数据框架(分区,分桶,分片)
前言在大数据
分布式
中,分区,分桶,分片是设计框架的重点。此篇就来总结各个框架。
坨坨的大数据
·
2024-02-05 06:29
Skywalking 应用笔记
概念Skywalking是一款
分布式
的系统性能监视工具,专为微服务、云原生架构和基于容器(Docker、K8s、Mesos)架构而设计。
KEEPMA
·
2024-02-05 05:29
skywalking
笔记
Solo 开发者周刊 (第2期):一站式解决各类办公绘图问题
好文推荐重新思考云原生应用的开发模式当前云原生应用的开发模式在FaaS环境下存在挑战,本文提出一种开发模式构想:“单体式编程,编译时拆分,
分布式
执行”,旨在简化云应用开发,提升开发效率和应用性能。
Solo 社区
·
2024-02-05 05:23
数据结构
Solo开发者社区-重新思考云原生应用的开发模式
当前云原生应用的开发模式在FaaS环境下存在挑战,本文提出一种开发模式构想:“单体式编程,编译时拆分,
分布式
执行”,旨在简化云应用开发,提升开发效率和应用性能。
Solo 社区
·
2024-02-05 05:53
云原生
日志追踪-Tracing
1.前言
分布式
链路跟踪中有两个重要的概念:跟踪(trace)和跨度(span)。
孤雨蝉鸣
·
2024-02-05 04:34
spring框架
java
spring
cloud
spring
CAP & BASE理论
Consistency):所有节点访问同一份最新的数据副本可用性(Availability):非故障的节点在合理的时间内返回合理的响应(不是错误或者超时的响应)分区容错性(PartitionTolerance):
分布式
系统出现网络分区的时候
孤雨蝉鸣
·
2024-02-05 04:32
spring框架
java
spring
cloud
spring
5个.NET开源且强大的快速开发框架(帮助你提高生产效率)
集成统一认证授权、事件总线、数据验证、
分布式
雪花Id、
分布式
缓存、
分布式
事务、IP限流、性能分析、集成测试、健康检
追逐时光者
·
2024-02-05 04:23
.NET
.NET
Core
开源项目
开源
.net
c#
.netcore
一文正确理解 分层架构系统 的接入层设计,以及接入层设计常见的问题和解决方案(雪崩、降级、限流、熔断)
分层架构系统之接入层
分布式
架构设计之接入层1、定义2、优势3、技术方案3.1、考虑的问题(负载均衡和
高可用
)3.2、设计方式3.2.1、单个IP地址接入3.2.2、多个IP地址随机接入3.2.2、单IP
JMW1407
·
2024-02-05 04:16
分布式架构
服务加购
接入层
什么是区块链?
一种去中心化的
分布式
账本数据库,没有中心,数据存储的每个节点都会同步复制整个账本,信息透明难以篡改近几年,越来越多的机构开始重视并参与区块链技术研发。
1ff5311fa1f6
·
2024-02-05 03:10
上一页
37
38
39
40
41
42
43
44
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他