E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
storm集群
redis分片
集群
1.为什么使用分片
集群
?主从和哨兵
集群
模式可以解决高并发和高可用的问题,依然存在两个问题没有解决:海量数据的存储问题;高并发写的问题;使用redis分片
集群
能够解决。2.redis分片
集群
原理?
求知耶
·
2024-08-26 18:10
redis
redis
数据库
缓存
[java][
集群
]consul
集群
安装
/usr/local/bin/consulagent-server-data-dir=/tmp/consul-node=server-1-bind=192.168.3.110-bootstrap-expect3-client=0.0.0.0-ui/usr/local/bin/consulagent-server-data-dir=/tmp/consul-node=server-2-bind=192
awonw
·
2024-08-26 17:05
java
java-consul
java
consul
java操作zookeeper
java操作zookeeper文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装zookeeper
集群
安装zookeeper客户端命令行操作、
shuair
·
2024-08-26 16:59
zookeeper
zookeeper
基于Zookeeper搭建Kafka高可用
集群
基于Zookeeper搭建Kafka高可用
集群
一、Zookeeper
集群
搭建为保证
集群
高可用,Zookeeper
集群
的节点数最好是奇数,最少有三个节点,所以这里搭建一个三个节点的
集群
。
数字游牧人0v0
·
2024-08-26 16:58
大数据BigData
kafka
java-zookeeper
zookeeper
大数据
zookeeper+KAFKA
集群
搭建
它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、
集群
管理等。
懵逼的运维弟弟
·
2024-08-26 16:28
Linux
zookeeper+KAFKA
集群搭建
(十五)Flink 内存管理机制
在大数据领域,很多开源框架(Hadoop、Spark、
Storm
)都是基于JVM运行,但是JVM的内存管理机制往往存在着诸多类似OutOfMemoryError的问题,主要是因为创建大量的实例,超过JVM
springk
·
2024-08-26 16:27
Flink全景解析
flink
大数据
实时数据
flink
内存管理
内存管理机制
面试笔记8.24
我会在
集群
中部署多台服务器,通过分布式计算和存储来处理大规模数据。解答思路:首先,我会搭建一个Hadoop或Spark
集群
,确保
集群
中的每台服务器都能正常通信。
励志秃头码代码
·
2024-08-26 16:55
面试
职场和发展
zookeeper单机安装
zookeeper单机安装文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装zookeeper
集群
安装zookeeper客户端命令行操作、节点类型及监听器
shuair
·
2024-08-26 15:49
zookeeper
zookeeper
java
Zookeeper实现分布式锁
文章目录什么是ZookeeperZookeeper
集群
机制Zookeeper特性Zookeeper数据结构Zookeeper应用场景Zookeeper的环境搭建(linux)Zookeeper客户端Zookeeper
爱吃糖的靓仔
·
2024-08-26 15:48
#
分布式区
分布式
java-zookeeper
zookeeper
什么是耦合、紧耦合、松耦合
但随着
集群
规模的扩大,系统的稳定性逐渐变差,主要原因如下:1、同步操作导致对
mingzhi61
·
2024-08-26 15:18
java代码审计
java代码审计
开发语言
大数据技术之Zookeeper安装 (2)
目录下载地址本地模式安装1)安装前准备2)配置修改3)操作Zookeeper配置参数解读Zookeeper
集群
操作
集群
规划解压安装配置服务器编号配置zoo.cfg文件
集群
操作Zookeeper
集群
启动停止脚本创建脚本增加脚本执行权限
大数据深度洞察
·
2024-08-26 14:43
Zookeeper
大数据
hadoop
zookeeper
redis面试(十八)RedLock加锁原理
普通的redis分布式锁,其实是在redis
集群
中根据hash算法选择一台redis实例创建一个锁就可以了大致流程如下:获取当前时间戳,单位是毫秒跟上面类似,
木小同
·
2024-08-26 12:26
redis
面试
redis
面试
数据库
redLock
多数节点
数据库系统 第25节 数据库
集群
数据库
集群
是一种高可用性和可扩展性解决方案,它通过将数据和工作负载分散到多个服务器上来提高性能和可靠性。
hummhumm
·
2024-08-26 03:30
数据库
python
java
mysql
database
sql
后端
Spring Cloud Config 与Spring Cloud Bus组合实现配置文件热部署
先介绍下SpringCloudConfig功能:配置管理工具包,让你可以把配置放到远程服务器,集中化管理
集群
配置,目前支持本地存储、Git以及Subversion。
java_飞
·
2024-08-25 22:34
Tair分布式缓存
redis
集群
中,想用缓存必须得指明redis服务器地址去要。这就增加了程序的维护复杂度。因为redis服务器很可能是需要频繁变动的。
kingkyrie
·
2024-08-25 18:38
分布式
63 - ES 诊断
集群
的潜在问题
集群
运维所面临的挑战用户
集群
数量多,业务场景差异大使用与配置不当,优化不够如何让用户更加高效和正确的使用ES如何让用户更全面的了解自己的
集群
的使用状况发现问题之后,需要防患于未然需要“有迹可循”,做到“
舍是境界
·
2024-08-25 16:36
Hadoop入门基础(五):Hadoop 常用 Shell 命令一网打尽,提升你的大数据技能!
1.2启动和停止Hadoop
集群
start-dfs.shstart-yarn.shstop-dfs.shstop-yarn.shstart-dfs.sh和stop-dfs.sh分别用于启动和停止HDFS
william.zhang(张)
·
2024-08-25 15:52
大数据
Hadoop
容器
大数据
hadoop
分布式
etcd
集群
恢复、单节点恢复操作手册
一、
集群
备份备份方式:Jenkins触发每小时的定时任务,通过调取ansible的playbook进行etcd
集群
的数据备份和上传,默认只备份
集群
中的非leader成员,避免leader成员压力过大。
*老工具人了*
·
2024-08-25 15:21
数据库
Kubernetes
etcd
数据库
Kubernetes Master节点 灾备恢复操作指南
KubernetesMaster节点灾备恢复操作指南目录一,Etcd数据备份及恢复...1A,单节点etcd数据备份和恢复...2B,etcd
集群
数据的备份和恢复...2二,Master节点控制组件的备份及恢复
weixin_34384915
·
2024-08-25 15:51
运维
kubernetes
集群
ETCD备份与恢复
一、通过kubeadm方式备份安装etcdctl命令行yuminstall-yetcd备份ETCDCTL_API=3etcdctl\snapshotsavesnap.db\#此处默认是当前路径,可自定义存储路径--endpoints=https://127.0.0.1:2379\--cacert=/etc/kubernetes/pki/etcd/ca.crt\--cert=/etc/kuberne
冷漠程序员小哥哥
·
2024-08-25 15:19
kubernetes
kubernetes
k8s
etcd
etcd
etcd主目录/配置配置在/etc/etcd.conf.yml主目录/数据/var/lib/etcd主目录/日志动态库或插件install:1,安装脚本:(安装脚本可与2配置文件一起使用,做自动化静态
集群
部署
mmgithub123
·
2024-08-25 15:49
docker
linux
centos
java
mysql
etcd
集群
部署实战
文章目录前言安装
集群
环境添加配置文件启动etcd查看
集群
状态前言本文使用v3.5.4版本的etcd进行搭建
集群
演示,仅适用于学习etcd的基本使用。
tree先生
·
2024-08-25 15:18
etcd
etcd
linux
数据库
Kubernetes 中如何对 etcd 进行备份和还原
etcd是Kubernetes的关键组件,用于存储
集群
的所有配置数据和状态信息。由于etcd永久性存储了
集群
的整个状态,因此对其进行定期备份非常重要。
乌南竹
·
2024-08-25 15:18
kubernetes
etcd
在Kubernetes中etcd作为存储
集群
在Kubernetes中,etcd作为存储
集群
所有关键数据的分布式键值存储系统,其数据的备份与还原对于确保
集群
的可靠性和数据完整性至关重要。
hai40587
·
2024-08-25 15:17
kubernetes
etcd
容器
Kubernetes 中如何对 etcd 进行备份和还原
etcd是Kubernetes
集群
的重要组件,存储了
集群
的所有数据,如配置文件、状态信息、以及服务发现数据。
william.zhang(张)
·
2024-08-25 14:16
后端
容器
大数据
etcd
大数据面试-Zookeeper
ZooKeeper的选举机制是基于Paxos算法的一种分布式选举算法,用于在ZooKeeper
集群
中选择一个节点作为Leader,负责处理客户端的写请求和协调其他节点。
文文鑫
·
2024-08-25 12:04
#
大数据面试-Zookeeper
大数据
面试
zookeeper
rocketmq: broker
集群
之间的brokerName命名是否可以一致。
今天回顾了下broker与nameserver之间建立连接之后30S一次的心跳测试源码和创建topic过程中broker主动推送topicConfig到Nameserver的源码(实际上心跳测试调用的方法和推送创建topic过程中broker主动推送topicConfig调用的方法是一样的,最终都是调用doRegisterBrokerAll())。心里有两个疑惑产生:1.我们知道创建一个新的top
飞向天空的鱼
·
2024-08-25 10:18
rocketmq学习
HDFS的编程
HDFS是一个分布式文件系统,以流式数据访问模式存储超大文件,将数据分块存储到一个商业硬件
集群
内的不同机器上
卍king卐然
·
2024-08-25 07:02
hdfs
hadoop
大数据安全
web安全
经验分享
Kubernetes中如何对etcd进行备份和还原
在Kubernetes中,etcd作为存储
集群
所有关键数据的分布式键值存储系统,其数据的备份与还原对于确保
集群
的可靠性和数据完整性至关重要。
jun778895
·
2024-08-25 06:28
kubernetes
etcd
容器
Hadoop入门基础(二):Hadoop
集群
安装与部署详解(超详细教程)
一、环境准备1.
集群
规划首先,需要为
集群
中的每台机器设置角色和网络配置。
william.zhang(张)
·
2024-08-25 06:57
hadoop
大数据
分布式
基于k8s搭建gitlab
前言一、安装kubernetes
集群
可以参考这篇博客,写的挺好的:搭建k8s环境二、安装helm在github上下载helm的二进制文件,在系统中解压,并将可执行文件移动到/usr/bin/目录下三helm
爱哭的猫!
·
2024-08-25 05:18
云原生
kubernetes
gitlab
运维
基于calico部署k8s
集群
k8s-1.23.6
1、资源清单主机名IP地址系统版本CPU内存mn01192.168.242.130redhat7.92C4GBln0192.168.242.131redhat7.92C4GBcn01192.168.242.129redhat7.92C4GB2、系统配置(所有节点都要进行)1、安装所需软件yuminstallvimnet-toolswgetlsofipsetipvsadmiproute-tc-y2、
只是想成为一名程序员
·
2024-08-25 05:17
kubernetes
容器
云原生
k8s-daemonSet控制器
当有节点加入
集群
时,也会为他们新增一个Pod。当有节点从
集群
移除时,这些Pod也会被回收。删除DaemonSet将会删除它创建的所有Pod。
垃圾宝宝
·
2024-08-25 05:47
kubernetes
容器
云原生
微服务中不同的容错模式
以下是每种模式的详细解释和应用场景:1.FailoverCluster(失败自动切换)描述:当服务调用失败时,系统会自动切换到
集群
中的其他机器进行重试。
Wade_Crab
·
2024-08-25 00:20
微服务
java
运维
从零开始搭建Aliyun ESC高可用
集群
(HaVip+KeepAlived)
从零开始搭建AliyunESC高可用
集群
(HaVip+KeepAlived)架构架构本设计方案采用两台阿里云ECS服务器搭建Keepalived结合LVS的高可用
集群
。
cloud_ether
·
2024-08-24 21:33
云原生运维
lvs
高性能集群
keepalived
lvs
高可用集群
高性能集群
云原生
从零开始搭建 LVS 高性能
集群
(DR模式)
从零开始搭建LVS高性能
集群
(DR模式)架构本设计方案采用三台服务器构建
集群
,使用LinuxVirtualServer(LVS)作为负载均衡器,运行在直接路由(DR)模式下。
cloud_ether
·
2024-08-24 21:03
云原生运维
lvs
高性能集群
lvs
docker
云原生
集群搭建
LVS+Keepalived
集群
在一个LVS服务
集群
中通常有主服务器(Master)和备份服务器(Backup)两种服务器,但是对外表现为一个虚拟IP,主服务器会广播VRRP报文给备份服
史努比.
·
2024-08-24 21:01
lvs
Redis
集群
搭建
1.环境:centos6.7、redis-6.2.62.模式:5主+20丛+5备丛(即:1主-4从-1备丛)3.服务器环境检查及安装查看服务器是否安装了gccrpm-qgcc若没有安装,则进行gcc安装yuminstall-ygcc4.redis下载前往redis官网下载https://redis.io/downloadredis-6.2.6.tar.gz5.将redis-6.2.6.tar.gz
丿似锦
·
2024-08-24 21:00
数据库
redis
bootstrap
前端
PolarDB for PostgreSQL 内核解读 :HTAP架构介绍
存储计算分离的架构基础上我们研发了基于共享存储的MPP架构步具备了HTAP的能力,对一套TP的数据支持两套执行引擎:单机执行引擎用于处理高并发的OLTP;MPP跨机分布式执行引擎用于复杂的OLAP查询,发挥
集群
多个
阿里云云栖号
·
2024-08-24 20:56
云栖号技术分享
postgresql
架构
数据库
GO-REDIS的一些高级用法
其中redigo不支持对
集群
的访问。本文想聊聊go-redis2个高级用法。
羊城程序猿
·
2024-08-24 19:22
golang
Redis
golang
redis
高佣联盟是怎么赚钱的?是真的吗?
淘客红利期的时候,无论做培训、工具、采
集群
和接单、自营粉丝群都创造出了不少个千万富翁的屌丝逆袭案例,对比拼多多的平台模式加之绝大部分商
高省APP
·
2024-08-24 18:09
zookeeper
集群
安装
zookeeper
集群
安装文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装说明版本选择:apache-zookeeper-3.5.7-bin.tar.gz
shuair
·
2024-08-24 18:13
zookeeper
zookeeper
Ubuntu下部署Hadoop
集群
+Hive(一)
准备环境:3台Ubuntu服务器(版本20.04),自建的虚拟机也可以;推荐内存:8GB以上;部署也支持Ubuntu20.04以上版本,或是Centos也可以。配置主机Host在三台服务器上添加主机名与IP的映射,以方便在局域网内进行主机间的快速访问和后续的文件配置;配置方法:vi/etc/hosts为方便配置:我的三台主机取名为HadoopMaster、HadoopSlave01、HadoopS
岩屿
·
2024-08-24 17:41
hadoop
ubuntu
hive
大数据
Kubernetes中的守护者与管家:ReplicaSet与Deployment的协同工作
引言在Kubernetes
集群
中,ReplicaSet和Deployment是两种至关重要的资源对象,它们共同维护着应用程序的稳定性和可用性。
哎呦没
·
2024-08-24 16:29
kubernetes
java
容器
从零到一建设数据中台 - 关键技术汇总
Java、Maven、SpringBoot数据分布式采集:Flume、Sqoop、kettle数据分布式存储:HadoopHDFS离线批处理计算:MapReduce、Spark、Flink实时流式计算:
Storm
我码玄黄
·
2024-08-24 12:09
数据中台
数据挖掘
数据分析
大数据
《Apache Kafka 实战》笔记 - 7.5.2 分区重分配
准备环境搭建一个3个节点的
集群
,然后创建两个测试topic:foo1、foo2,它们都是3个分区,副本因子都是2:bin/kafka-topics.sh--create--zookeeperlocalhost
SlowGO
·
2024-08-24 12:11
Eureka原理实践
EurekaServer通常采用
集群
部署以保证高可用性和容错能力。EurekaClient(服务提供者客户端和服务消费者客户端):嵌入到每个微服务
丁爸
·
2024-08-24 07:01
大数据
eureka
Linux下ETCD安装、配置、命令
ETCD的诞生背景是为了解决
集群
管理系统中操作系统升级时的分布式并发控制、配置文件的存储与分发等问题。它设计为提供高可用、强一致性的小型kv数据存储服务,项目当前隶属于CNCF基金会
丁爸
·
2024-08-24 07:01
大数据
etcd
从部署 httpd 入手,理清 k8s 配置中的 containerPort、port、nodePort、targetPort
背景在上一篇文章自己搭建一个k8s环境中,我们一顿操作猛如虎,搭建出了由1个master和1个worker节点组成的k8s
集群
,大概是这样的效果:为了验证我们搭建的环境是否好使,本篇文章就借搭建httpd
dotNET跨平台
·
2024-08-24 06:58
kubernetes
java
docker
linux
python
一文讲明白
集群
与负载均衡
集群
概念与优势定义:计算机
集群
是协同工作的计算机组,通常被视为单一系统。服务节点:部署了应用程序的服务器。
集群
优势:提高性能:通过增加服务节点实现并行处理,提升整体处理能力。
modelsetget
·
2024-08-24 04:43
服务器搭建
负载均衡
运维
集群
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他