E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
集群分片
RocketMQ消费者重平衡机制
目标:在
集群
模式下,每个队列仅被一个消费者消费,确保负载均衡。流程:获取Topic的队列列表和当前消费者组成员。根据分配策略重新分配队列。释
俏布斯
·
2025-03-02 13:38
消息中间件
RocketMQ
rocketmq
Ubuntu从零创建Hadoop
集群
IP及检查网络3.Ubuntu相关配置镜像源配置下载vim编辑器4.设置静态IP和SSH免密(可选)设置静态IPSSH免密5.JDK环境部署6.Hadoop环境部署7.配置Hadoop配置文件HDFS
集群
规划
爱编程的王小美
·
2025-03-02 12:57
大数据专业知识系列
ubuntu
hadoop
linux
web
集群
(LVS-DR)
LVS是LinuxVirtualServer的简称,也就是Linux虚拟服务器,是一个由章文嵩博士发起的自由软件项目,它的官方站点是www.linuxvirtualserver.org。现在LVS已经是Linux标准内核的一部分,在Linux2.4内核以前,使用LVS时必须要重新编译内核以支持LVS功能模块,但是从Linux2.4内核以后,已经完全内置了LVS的各个功能模块,无需给内核打任何补丁,
Spike()
·
2025-03-02 11:47
lvs
网络
服务器
Linux15 数据链路层
数据链路层什么是以太网以太网帧格式MAC地址MTU-以太网最大传输单元网络层IP数据包分包(
分片
)MTU对UDP协议的影响MTU对于TCP协议的影响ARP协议ARP协议的作用ARP协议的工作流程ARP数据报格式什么是以太网
辣椒味番茄
·
2025-03-02 10:35
Linux
linux
ES from size聚合查询10000聚合查询,是每个
分片
先聚合,再统计。还是所有节点查询1万条后,再聚合
在Elasticsearch中,聚合查询的执行过程是分布式的,Elasticsearch会先在每个
分片
(shard)上执行本地聚合,然后再在协调节点(coordinatingnode)上对所有
分片
的聚合结果进行全局汇总
C18298182575
·
2025-03-02 10:35
elasticsearch
elasticsearch
大数据
搜索引擎
elk+redis+logstash+kibana保姆式教程
主机名ip描述elasticsearch-1192.168.5.94es
集群
elasticsearch-2192.168.5.95es
集群
elasticsearch-1192.168.5.96es
集群
redis192.168.5.97redis
weixin_51711897
·
2025-03-02 08:21
elk
redis
jenkins
windows10 ELK保姆级教程以及踩坑记录 适用于新版8.1.3
1.ES是个开源的分布式搜索引擎,它的特点是:分布式、零配置、自动发现,索引自动
分片
,索引副本机制,restful风格接口,多数据源,自动搜索负载等。
bug柯南
·
2025-03-02 08:16
ELK
java
用大白话解释数据库分库分表sharding是什么 有什么用 怎么用
Sharding(
分片
)就像把一整个图书馆的书拆开放到多个小房间,每个房间只存一部分书。这样找书的人不用挤在一个大厅里翻找,效率更高。
心心祥蓉
·
2025-03-02 07:15
数据库
Kubernetes
集群
V1.26二进制部署
Kubernetes
集群
V1.26二进制部署1:环境介绍本环境是基于内网环境无互联网情况下的Kubernetes
集群
的部署,Runtime使用containerd。
L-0715H
·
2025-03-02 06:32
Kubernetes
kubernetes
容器
云原生
Flink K8s Application任务的使用
FlinkK8sApplication任务的使用FlinkK8sApplication任务的使用构键k8s
集群
提供flink运行任务的环境下载flink客户端任务编程任务jar生成过程k8sApplication
老哥哥-老刘
·
2025-03-02 04:52
flink
jdbc连接数据库步骤oracle,jdbc连接oracle数据库的步骤
使用E-MapReduce
集群
sqoop组件同步云外Oracle数据库数据到
集群
hiveE-MapReduce
集群
sqoop组件可以同步数据库的数据到
集群
里,不同的数据库源网络配置有一些差异网络配置。
weixin_39726044
·
2025-03-02 02:05
GaussDB 学习进阶路线-进阶篇:分布式架构、性能调优与高可用实战
本文将以生产环境为背景,深入剖析GaussDB的数据
分片
、并行计算、主备容灾、云原生集成等核心技术,结合实战配置与调优案例,助你解锁GaussDB的高阶技能,构建稳定高效的分布式数据库系统!
Jan123.
·
2025-03-02 00:55
gaussdb
学习
分布式
GaussDB 学习实战指南:从部署到高并发优化的全流程解析
本文将以实战操作为核心,覆盖
集群
部署、数据
分片
、性能调优、容灾备份、云上迁移五大场景,通过真实案例与代码示例,助你快速掌握GaussDB的实战技能,解决企业级应用中的复杂问题!
Jan123.
·
2025-03-02 00:55
gaussdb
学习
Sharding-Sphere vs Mycat vs TiDB
数据库那般高效利用中间件模式SQL解析、执行计划优化等在中间件与数据库中重复工作,效率相比较低分布式事务相比于XA进行了优化,性能更高基于paxos(或Raft)协议的多副本,实现了真正的高可用、高可靠天生支持数据
分片
木一番
·
2025-03-01 18:12
分库分表
TiDB
es 生产
集群
的部署架构是什么?每个索引的数据量大概有多少?每个索引大概有多少个
分片
?
Elasticsearch生产
集群
部署架构及面试解析在后端面试中,Elasticsearch(ES)是一个经常被问到的技术点,尤其是涉及到生产环境的部署架构。
忍者算法
·
2025-03-01 18:40
elasticsearch
架构
大数据
k8s出问题后 应该查看哪些内容
要确认Kubernetes(k8s)系统是否正常运行,需要检查
集群
的核心组件、节点状态、Pod运行情况和网络通信。
LCY133
·
2025-03-01 14:49
kubernetes
容器
云原生
RabbitMQ
集群
部署详解
一、RabbitMQ两种
集群
部署方式1.1普通
集群
模式queue创建之后,如果没有其它policy,消息实体只存在于其中一个节点,A、B两个Rabbitmq节点仅有相同的元数据,即队列结构,但队列的数据仅保存有一份
LlinCK
·
2025-03-01 14:14
RabbitMQ
队列
rabbitmq
消息队列
运维
大数据
Kubernetes(k8s)API Server详解
KubernetesAPIServer(kube-apiserver)是Kubernetes控制平面的核心组件之一,主要负责提供Kubernetes
集群
的管理和通信接口。
奔向理想的星辰大海
·
2025-03-01 07:27
云原生
kubernetes
容器
云原生
【学习笔记】Kubernetes
1.1Kubernetes控制平面和工作节点的组件及其作用控制平面组件控制平面组件负责管理
集群
的全局决策(如调度),以及检测和响应
集群
事件。
还没入门的大菜狗
·
2025-03-01 07:20
笔记
第一篇:k8s架构与组件详解
这些对
集群
做出全局决策(比如调度),以及检测和响应
集群
事件的组件集合也称为控制平面。其实K8s官
※网络笨猪※
·
2025-03-01 05:04
##云原生-容器化-K8S##
架构
如何使用Spark Streaming将数据写入HBase
1.环境准备HBase:确保HBase
集群
已经安装并运行。Spark:确保Spark已经安装,并且Spark版本与HBase的Hadoop版本兼容。
Java资深爱好者
·
2025-03-01 05:02
spark
hbase
大数据
如何在CentOS使用Docker搭建MinIO容器并实现无公网ip远程访问本地服务
Cpolar4.配置MinIO公网地址5.远程访问MinIO管理界面6.固定MinIO公网地址前言MinIO是一个开源的对象存储服务器,可以在各种环境中运行,例如本地、Docker容器、Kubernetes
集群
等
秋说
·
2025-03-01 05:31
内网穿透
centos
docker
tcp/ip
SkyWalking Server配置文件
application.yml/config/application.yml1、cluster
集群
相关配置#
集群
配置cluster:#选择哪一种
集群
模式selector:${SW_CLUSTER:standalone
五百年前FHYA
·
2025-03-01 04:55
数据监测
skywalking
数据库必知必会系列:数据库
分片
与分布式事务
文章目录1.背景介绍分库分表
分片
集群
分布式事务数据迁移2.核心概念与联系主从复制活动复制CAP原则BASE理论3.核心算法原理和具体操作步骤以及数学模型公式详细讲解分库分表水平分表垂直分库
分片
集群
垂直拆分水平切分垂直切分水平拆分根据主键范围根据业务字段划分分布式事务两阶段提交协议三阶段提交协议可靠消息最终一致性
AI天才研究院
·
2025-03-01 03:51
AI大模型企业级应用开发实战
大数据
人工智能
语言模型
Java
Python
架构设计
kafka-leader -1问题解决
以下是可能导致出现kafkaleader-1的一些常见原因及相关分析:1.副本同步问题:在Kafka
集群
中,每个分区都有多个副本,包括一个领导者副本和多个追随者副本。
xiao-xiang
·
2025-03-01 03:17
kafka
kafka
Elasticsearch
集群
快照的定期备份设置指南
Elasticsearch
集群
快照的定期备份设置指南概述快照:在给定时刻对整个
集群
或者单个索引进行备份,以便在之后出现故障时可以基于之前备份的快照进行快速恢复。
碧水澜庭
·
2025-03-01 01:39
运维管理类工具
elasticsearch
运维
Linux部署elasticsearch
集群
操作系统CentOS7.61.安装jdk环境直接使用yum安装yuminstalljava-1.8.0-openjdk*配置环境变量vim/etc/profile#添加:JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.282.b08-1.el7_9.x86_64/CLASS_PATH=.:$JAVA_HOME/libPATH=$JAVA_HOME/b
西望千秋雪
·
2025-03-01 01:38
es
es
elasticsearch
Elasticsearch
集群
部署详解
文章目录Elasticsearch功能与特性:Elasticsearch单节点安装部署Elasticsearch
集群
安装部署附件1、安装Java(JDK)2、问题一2、问题二Elasticsearch功能与特性
Jeffrey_Zeng_
·
2025-03-01 01:38
elasticsearch
linux
谈谈DeepSeek-v3在算力约束下的出色工作
加完班挤点时间读个论文吧.Deepseek-v3仅用了2048块H800GPU就超越了Llama3405B模型,要知道Meta训练Llama3可是用了16384块H100,而DSv3的训练成本非常低在所有人追求更大规模
集群
的时候
强化学习曾小健
·
2025-02-28 22:19
Deepseek原理与使用
人工智能
Redis 同步机制详解
Redis采用主从复制(Replication)机制来进行数据同步,同时在RedisCluster(
集群
模式)下也使用Gossip协议进行节点间数据同步和状态传播。
夏天的味道٥
·
2025-02-28 22:18
Redis
redis
数据库
缓存
kafka stream对比flink
以下是两者的核心区别和适用场景分析:1.定位与架构差异KafkaStreams定位:轻量级库(无需独立
集群
),深度集成Kafka,适用于构建与Kafka紧密耦合的流处理应用。
后季暖
·
2025-02-28 14:23
kafka
flink
分布式
kafka-web管理工具cmak
一.背景:日常运维工作中,采用cli的方式进行kafka
集群
的管理,还是比较繁琐的(指令复杂?)。为方便管理,可以选择一些开源的webui工具。推荐使用cmak。
xiao-xiang
·
2025-02-28 14:49
kafka
kafka
分布式
消息队列(RocketMQ+Kafka)
消息队列的场景应用场景:异步(电商订单的创建、支付、发货流程)解耦削峰填谷(淘宝的双十一)需解决的问题:消息重复(唯一ID,幂等)消息丢失(ack确认机制,死信队列)消息堆积(增加消费者,增加消费能力,增加
集群
分担
八千里路云和月laiker
·
2025-02-28 14:16
算法
rocketmq
kafka
分布式
Mysql 主从
集群
同步延迟问题怎么解决
网络与硬件资源优化网络环境优化:检查主从服务器之间的网络连接,确保网络稳定且带宽充足,降低网络延迟和丢包率。可以通过更换高性能网络设备、优化网络拓扑结构等方式来实现。硬件资源调整:监控主从数据库服务器的CPU、内存、磁盘I/O等资源使用情况。若资源紧张,可通过增加硬件配置(如升级CPU、增大内存、更换为SSD硬盘)来提升服务器处理事务的能力;或在业务低峰期执行数据操作,降低请求量。业务逻辑与事务优
涛粒子
·
2025-02-28 12:35
mysql
数据库
redisCluster
集群
相关查询结果详解
redisCluster
集群
相关查询结果详解进入redis进群查看
集群
信息CLUSTERINFO命令CLUSTERNODES命令info命令infoCommandstats命令查询服务器相关key的大小单个
ghostp
·
2025-02-28 11:28
redis
redis
redis架构系列——Cluster
集群
模式详解
设计的主要特点和基本原理Redis
集群
目标高性能和线性可扩展性,最多可达1000个节点。没有代理,使用异步复制,并且不对值执行合并操作。
庄隐
·
2025-02-28 10:55
#
组件
redis
架构
Redis Cluster
集群
详解
数据
分片
(Sharding)哈希槽(HashSlot)机制:
集群
将数据划分为16384个哈希槽,每个键通过CRC16(key)%16384计算归属的槽。
高冷小伙
·
2025-02-28 10:21
redis
数据库
缓存
redis
集群
迅速搭建(个人学习和测试用)
笔者使用ubuntu操作系统下载redis地址:Indexof/releases/,选择最新的版本下载。解压后进入目录,直接make就可以编译。编译成功后在src目录下会生成redis-server和redis-cli可执行文件。进入redis目录下的utils/create-cluster目录,执行./create-clusterstart,快速启动6个实例zy@zy-VirtualBox:~/
yinhezhanshen
·
2025-02-28 08:02
redis
学习
java
python使用kafka原理详解_Python操作Kafka原理及使用详解
什么是KafkaKafka是一个分布式流处理系统,流处理系统使它可以像消息队列一样publish或者subscribe消息,分布式提供了容错性,并发处理消息的机制二、Kafka的基本概念kafka运行在
集群
上
形象顧問Aking
·
2025-02-28 07:19
Redis hot key管理
同bigkey一样,hotkey也会带来一系列问题,如拖慢Redis性能、造成Redis
集群
节点间负载不均衡、大量请求造成Redis缓存击穿等。1.查询
Zhi@Li
·
2025-02-28 03:52
Redis运维
redis
数据库
缓存
数据库架构
dba
ZeRO分布式训练策略
ZeRO通过三级
分片
策略消除内存冗余,实现超大规模模型训练。其核心演进路线分为三个阶段:1.1ZeRO-1:优化器状态
分片
分片
对象:优化器参数(如Ad
AIGC_ZY
·
2025-02-28 02:13
大模型
分布式
通过docker和gitlab实现项目自动打包部署
Gitlab如何实现自动打包部署到docker
集群
?
hxj..
·
2025-02-28 02:13
服务部署
docker
容器
运维
Redis分布式存储案例面试题
:1、哈希取余分区(小厂回答)2、一致性哈希算法分区(中厂回答)3、哈希槽分区(大厂回答,推荐回答)1、哈希取余分区2亿条记录就是2亿个(k,v),我们单机不行必须要分布式多机,假设有3台机器构成一个
集群
哎呀哎呀诶
·
2025-02-28 02:10
Redis
redis
分布式
数据库
技术分享| 分布式系统中服务注册发现组件的原理及比较
随着容器技术的兴起,服务
集群
部署在系统各处,服务之间的远程调用都需要通过服务发现来实现。
anyRTC
·
2025-02-28 00:27
音视频
分布式系统
音视频
分布式系统
Consul
Zookeeper
etcd
用Docker搭建Redis主从复制的
集群
同样再到redis-slave1容器的命令窗口里,通过dockerexec-itredis-slave1/bin/bash命令进入容器的命令行窗口,也通过redis-cli命令进入客户端命令行,也再通过inforeplication命令查看该Redis服务器的主从模式的状态,部分结果如下所示。1c:\work>dockerexec-itredis-slave1/bin/bash2root@2e32
2401_84046635
·
2025-02-27 20:45
程序员
docker
redis
eureka
深入理解 Kubernetes 命名空间:高效管理与隔离资源的关键
命名空间的作用1.资源隔离2.多租户支持3.资源管理和策略控制4.简化管理创建和使用命名空间命名空间与
集群
中的其他资源结语在Kubernetes(k8s)中,命名空间(Namespace)是资源隔离和组织管理的核心概念之一
简单简单小白
·
2025-02-27 16:21
kubernetes
贪心算法
java
【YashanDB 知识库】yasboot
集群
状态命令登录失败问题
【标题】yasboot
集群
状态命令登录失败问题【问题分类】功能使用【关键字】yasboot、
集群
状态、无效用户名/密码、sys用户、null密码【问题描述】用户在执行yasbootclusterstatus-cyashan-d
·
2025-02-27 13:57
数据库程序员
mycat 分布式mysql_MySQL 部署分布式架构 MyCAT (五)
分片
(水平拆分)4.全局表业务使用场景:如果你的业务中有些数据类似于数据字典,比如配置文件的配置,常用业务的配置或者数据量不大很少变动的表,这些表往往不是特别大,而且大部分的业务场景都会用到,那么这种表适合于
weixin_39782573
·
2025-02-27 12:19
mycat
分布式mysql
minio多主机分布式部署
Minio多主机分布式docker-compose
集群
部署_miniodocker-compose-CSDN博客
一剑丶飘香
·
2025-02-27 12:14
云计算
Redis面试题----为什么要做Redis分区?
Redis分区,也称为
分片
(Sharding),是将数据分散存储到多个Redis实例上的一种策略。
指尖下的技术
·
2025-02-27 08:54
Java面试题
redis
java
数据库
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他