E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
不重启kafka集群
Kubernetes中的Kube-proxy:服务发现与负载均衡的基石
摘要Kube-proxy是Kubernetes
集群
中负责服务发现和负载均衡的关键组件。它通过维护
集群
内部的网络规则,确保网络流量能够正确地从服务访问点分发到后端的Pod上。
liuxin33445566
·
2024-08-28 06:07
kubernetes
服务发现
负载均衡
k8s笔记 | helm包管理
Helmkubenetes包管理器,是查找,分享和使用软件构件kubernetes的最佳方式;可以做什么从头开始创建新的chart将chart打包成归档(tgz)文件与存储chart的仓库进行交互与现有的kubernates
集群
中安装和卸载
你的代码我的心
·
2024-08-28 05:58
p2p
linq
gnu
打造扛得住的MySQL数据库架构视频教程-数据库结构优化 高可用架构设计
打造扛得住的MySQL数据库架构视频教程-数据库结构优化高可用架构设计30套数据库系列Mysql/SQLServer/Redis/Mongodb/Nosql精讲训练营项目实战,数据库设计,架构设计,性能管理,
集群
搭建
cd137a460a79
·
2024-08-28 04:10
Ubuntu下部署Hadoop
集群
+Hive(三)
Hive部署准备环境apache-hive-4.0.0-bin.tar.gz、mysql-connector-j-8.1.0.jar如果是离线安装的话,使用mysql-8.0.34-1.el7.x86_64.rpm-bundle.tar,在线安装的话则不用;hive下载地址:Indexof/hive(apache.org)mysqlconnector下载地址:MySQL::DownloadConn
岩屿
·
2024-08-28 01:07
hadoop
ubuntu
hive
80、k8s概念及组件介绍
k8s理解成负责自动化运维管理多个容器化的应用的
集群
。谷歌基于go语言开发的。
ly1435678619
·
2024-08-28 01:35
kubernetes
容器
云原生
kafka
(一)
Kafka
概述
定义
Kafka
是一个的基于的(MessageQueue),主要应用于大数据实时处理领域。
万事万物
·
2024-08-27 23:57
kafka
常用命令及配置参数详解
kafka
常用命令及配置参数详解常用命令1、启动zookeeperbin/zookeeper-server-start.shconfig/zookeeper.properties&2、启动
kafka
bin
微笑着流浪
·
2024-08-27 23:19
Kafka
Kafka
Kafka常用命令
Kafka参数配置
学习笔记六:ceph介绍以及初始化配置
k8s对接cephceph是一种开源的分布式的存储系统,包含以下几种存储类型:块存储(rbd)文件系统cephfs对象存储分布式存储的优点:Ceph核心组件介绍安装Ceph
集群
初始化配置Ceph安装源安装基础软件包安装
风车带走过往
·
2024-08-27 23:49
K8S相关应用
学习
笔记
ceph
maxwell读取mysql binlog到
kafka
下载地址https://maxwells-daemon.io/解压压缩包tar-zxvfmaxwell-1.29.0.tar.gz-C/opt/module/初始化maxwell元数据库在mysql中为maxwell创建一个数据库复制config.properties.example文件cpconfig.properties.exampleconfig.properties修改config.pro
gengjianchun
·
2024-08-27 22:18
我的笔记
mysql
kafka
数据库
kubectl命令详解
1.kubectl命令帮助kubernetes
集群
中的管理操作几乎都可以使用kubectl命令完成#kubectl-h2.kubectl命令说明类型命令描述基础命令create通过文件名或标准输入创建资源
闫利朋
·
2024-08-27 22:47
kubernetes实践之路
kubernetes
docker
容器
云原生
ubuntu22.04使用kubeadm部署k8s
集群
使用kubeadm部署一个k8s
集群
,1个master+2个worker节点1.环境信息操作系统:ubuntu22.04内存:16GBCPU:4网络:能够互访,能够访问互联网hostnameip备注node0110.121.218.50masternode0210.121.218.49workernode0310.121.218.48worker2
闫利朋
·
2024-08-27 22:17
kubernetes实践之路
kubernetes
容器
云原生
ubuntu
SpringCloud之一注册中心(Eureka)
1.注册中心:服务提供者可以将服务发布到注册中心,服务消费者从注册中心获取可以进行访问的服务列表;注册中心支持
集群
部署,
集群
中的机器,数据会进行同步复制更新(replicate
sinat_31986807
·
2024-08-27 20:05
#
spring
cloud
eureka
Centos系统配置Redis哨兵高可用架构
我们现在开始搭建Redis哨兵
集群
配置,一主二存+三个哨兵组成Redis哨兵
集群
。Redissentinel哨兵是特殊的redis服务,不提供读写服务,主要用来监控redis实例节点。
sunaq691
·
2024-08-27 20:01
Redis那点事
redis
centos
数据库
spark采坑集锦之用
kafka
作为DStream数据源,并行度问题
在SparkStreaming中作为数据源的
Kafka
怎样接收多主题发送的数据呢?
方兵兵
·
2024-08-27 16:41
spark采坑集锦
涨姿势了 SpringBoot+
Kafka
将实战讲解到极致,你悟了吗?
目录一、环境准备二、生产者实践普通生产者带回调的生产者自定义分区器
kafka
事务提交三、消费者实践简单消费指定topic、partition、offset消费批量消费监听异常处理器消息过滤器消息转发定时启动
技术布道师
·
2024-08-27 16:39
java
kafka
spring
boot
java
分布式
spring
Kafka
命令详解:从零开始,掌握
Kafka
集群
管理、主题操作与监控的全方位技能,理解每一条命令背后的逻辑与最佳实践
本文主要是关于
Kafka
的命令详解,每个命令都进行了非常详细的注释,帮助大家能更好的理解这些命令背后的含义,从底层去理解,如果大家喜欢,请多多点赞关注,欢迎评论!
长风清留扬
·
2024-08-27 16:37
大数据
Kafka
Linux
kafka
分布式
linux
大数据
命令模式
Docker方式部署K8s
集群
1.1
集群
创建说明Kubernetes支持多种容器运行时,包括Containerd、Docker和CRI-O。
麻辣头马头
·
2024-08-27 16:37
kubernetes
云原生
linux
容器
CentOS-7.9通过kubeadm搭建k8s
集群
(解决国内无法下载flannel镜像及yaml配置问题)
CentOS-7.9通过kubeadm搭建k8s
集群
(解决国内无法下载flannel镜像及yaml配置问题)环境说明虚拟机软件:VmWare16pro虚拟机系统:CentOS-7.9虚拟机配置:2核CPU
林木森森一飞冲天
·
2024-08-27 16:06
docker
kubernetes
k8s
Kubernetes中如何对etcd进行备份和还原
获取etcd证书和密钥,如果
集群
使用了TLS加密。设置etcdctl环境变量,如ETCDCTL_API=3(指定使用etcdv3API)。
大白菜程序猿
·
2024-08-27 15:32
运维
etcd
云原生周刊:KubeSphere 宣布开源 Thanos 的企业级发行版 Whizard
开源项目推荐AdmiraltyAdmiralty是一个Kubernetes控制器系统,可以智能地在多个
集群
之间调度工作负载。它使用简单,并且易于与其他工具集成。
KubeSphere 云原生
·
2024-08-27 14:59
k8s
容器平台
kubesphere
云计算
Kubernetes中如何对etcd进行备份和还原
在Kubernetes
集群
中,etcd是一个分布式键值存储系统,用于保存
集群
的所有数据。如果etcd数据丢失,整个
集群
可能会出现严重的问题。因此,定期备份etcd数据是至关重要的。
TechCraft
·
2024-08-27 14:56
etcd
数据库
容器
Kubernetes中的配置管理:Secret与ConfigMap的深入解析
引言在Kubernetes
集群
中,配置管理是确保应用程序正常运行的关键。Kubernetes提供了两种主要的方式来存储和管理配置数据:Secret和ConfigMap。
夜色呦
·
2024-08-27 14:22
kubernetes
容器
云原生
Kubernetes中的Controller Manager:自动化
集群
管理的核心引擎
摘要KubernetesControllerManager是Kubernetes
集群
中负责运行
集群
控制器的组件,这些控制器是
集群
自动化的核心。
夜色呦
·
2024-08-27 14:22
kubernetes
自动化
java
CDH 之 hive 数据迁移
当你想切换了
集群
想把hive迁移至新
集群
,两个
集群
之间又互不相通,一个最简单快捷的方法,就是批量导出元数据信息,同时把数据文件下载上传至新服务器的数据文件存放目录下1.导出元数据信息#database即是数据库名称
啊 这
·
2024-08-27 13:18
CDH
hive
hadoop
大数据
迁移学习
Hive 数据迁移与备份
导出到HDFS将表和数据从HDFS导出到本地服务器将表和数据从本地服务器复制到目标服务器将表和数据从目标服务器上传到目标HDFS将表和数据从目标HDFS上传到目标Hive库如果原始HDFS和目标HDFS
集群
连通
linzeyu
·
2024-08-27 13:17
Hive
hive
big
data
hadoop
带你详细了解Spring Cloud微架构服务的发展史
SpringCloud是一个基于SpringBoot实现的云应用开发工具,它为基于JVM的云应用开发中的配置管理、服务注册,服务发现、断路器、智能路由、微代理、控制总线、全局锁、决策竞选、分布式会话和
集群
状态管理等操作提供了一种简单的开发方式
武昌库里写JAVA
·
2024-08-27 11:07
面试题汇总与解析
算法
数据结构
c语言
开发语言
二维数组
卸载 kubeadm 方式安装的 k8s
停止服务与容器并删除镜像和容器所有节点都执行一遍以下命令:sudosystemctlstopkubelet&&sudosystemctlstatuskubeletsudosystemctlstopetcd2.清空K8S
集群
设置
qq_19783793
·
2024-08-27 10:30
kubernetes
容器
云原生
HPC&AI并行计算
集群
Slurm作业调度系统对通用资源(GRES)的调度
一、概述Slurm支持定义和调度任意通用RESources的功能(GRES)。为特定GRES类型启用了其他内置功能,包括图形处理单元(GPU)、CUDA多进程服务(MPS)设备,并通过可扩展的插件机制进行分片。二、配置默认情况下,群集的配置中未启用任何GRES。您必须在slurm.conf配置文件中明确指定要管理的GRES。的配置参数兴趣是GresTypes和Gres。有关详细信息,请参见slur
技术瘾君子1573
·
2024-08-27 09:25
并行计算
AI并行计算
Slurm调度系统
MPS管理
GPU管理
MIG多实例管理
GPU切片
HBase原理和操作
目录一、HBase在Zookeeper中的存储元数据信息
集群
状态信息二、HBase的操作WebConsole命令行操作三、HBase中数据的保存过程一、HBase在Zookeeper中的存储元数据信息HBase
无奈ieq
·
2024-08-27 08:16
HBase
hbase
linux
数据库
Hadoop:HA模式配置与实现
写的不到位的地方,欢迎评论指出不足之处一、检查系统环境1、HostName、Hosts、JDK、SSH、网络、防火墙、数据源二、
集群
角色分配表注:这只是实例服务器NameNodeNameNodeZookepperFailoverControllerDataNodeZookepperJournalNodeOneyes
家道消乏
·
2024-08-27 08:14
Hadoop基础
hadoop
大数据
hdfs
redisj
集群
之哨兵模式
首先可以搭建主从
集群
,再加上使用redis的哨兵模式。2.什么是哨兵模式?哨兵(sentinel)模式:可以实现主从
集群
的自动故障恢复。包含了主从服务的监控、自动故障恢复、通知。
求知耶
·
2024-08-27 06:07
redis
redis
mysql
集群
谈论
集群
之前,先说明一下项目发展的不同阶段对数据库性能的要求。项目发展经历1.项目初始阶段在这个阶段,主要是单节点数据库,注重的是可靠性。此时主要避免单点故障,做法是主从复制。
唏噗
·
2024-08-27 06:32
笔记
mysql
LVS负载均衡群集
目录一、什么是
集群
二、
集群
使用在哪一个场景三、
集群
的分类四、负载均衡的
集群
架构五、负载均衡的工作模式六、部署安装LVS-NAT1.1步骤1.2ipvsadm工具选项1.3实际案例(这里面有很多细节,暂时没有解释说明
必叫你大败而归
·
2024-08-27 05:29
高性能群集部署
lvs
负载均衡
服务器
Haproxy搭建Web
集群
目录一、Haproxy的概念二、Haproxy主要特性三、Haproxy负载均衡的策略四、HaproxyLVSNginx的区别五、编译部署Haproxy1.1haproxy配置文件中的五部分内容1.2搭建haproxy1.3日志定义一、Haproxy的概念HAProxy是可提供高可用性、负载均衡以及基于TCP和HTTP应用的代理,是免费、快速并且可靠的一种解决方案。HAProxy非常适用于并发大(
必叫你大败而归
·
2024-08-27 05:29
高性能群集部署
服务器
运维
lvs+keepalived+nfs
集群
部署
keepalived介绍及lvs+keepalived+nfs
集群
部署目录一、Keepalived概述二、Keepalived工作原理三、Keepalived体系主要模块及其作用四、Keepalived
Linux运维老纪
·
2024-08-27 05:26
以梦为马
不负服务器群集技术
lvs
MySQL
集群
技术1——编译部署mysql
MySQL在服务器中的部署办法一般而言,企业中的服务器操作系统都为linux,对于MySQL的安装则通常采用源码编译的方式来进行。MySQL是一个广泛使用的开源关系型数据库管理系统。如果您希望从源代码编译和安装MySQL,可以遵循以下步骤。请注意,这里假设您正在使用类Unix系统(如Linux或macOS),并且您具有root或sudo访问权限。准备工作更新系统包列表:sudoaptupdate安
Autter_A3
·
2024-08-27 03:46
mysql
数据库
数据库基础:mysql主从
集群
搭建
position:表示从file的哪个位置开始;binlog_do_db:表示同步哪一个库在后面的slave配置中,这三个结果都需要使用到。4.Slave(6.85)节点配置配置从库(1)修改my.cnf文件,在[mysqld]加入下面的内容:#服务的唯一编号server-id=2#开启mysqlbinlog功能log-bin=mysql-bin#binlog记录内容的方式,记录被操作的每一行bi
2401_84049040
·
2024-08-27 00:58
程序员
数据库
mysql
android
doris跨hdfs
集群
迁移数据
官网-数据备份步骤一,在dorisA
集群
执行:CREATEREPOSITORY`repotestall`WITHBROKER`broker_name`ONLOCATION"hdfs://xx.xx.xx.xx
州周
·
2024-08-27 00:27
hdfs
hadoop
大数据
钱大妈生鲜如何利用 CCR 实现 Apache Doris
集群
读写分离
钱大妈是社区生鲜连锁品牌的开拓者,经过十一年的稳健运营,已成为行业内的领军品牌,截至2023年7月已全国布局超30多座城市,门店总数3000余家,服务家庭超1000万。近年来,随着业务的高速发展以及门店的快速扩张,钱大妈需要对生鲜产品的采购、销售、库存等数据进行实时监控和分析,以保障食品的新鲜度及品质。同时需要管理众多门店与供应链信息,以了解各区域销售趋势和顾客偏好,从而优化商品结构和库存管理。在
ApacheDoris
·
2024-08-27 00:57
开源
数据库
大数据
big
data
数据分析
关于
kafka
的分区和消费者之间的关系
消费者和消费者组当生产者向Topic写入消息的速度超过了消费者(consumer)的处理速度,导致大量的消息在
Kafka
中淤积,此时需要对消费者进行横向伸缩,用多个消费者从同一个主题读取消息,对消息进行分流
窦再兴
·
2024-08-26 22:48
kafka
分布式
redis分片
集群
1.为什么使用分片
集群
?主从和哨兵
集群
模式可以解决高并发和高可用的问题,依然存在两个问题没有解决:海量数据的存储问题;高并发写的问题;使用redis分片
集群
能够解决。2.redis分片
集群
原理?
求知耶
·
2024-08-26 18:10
redis
redis
数据库
缓存
[java][
集群
]consul
集群
安装
/usr/local/bin/consulagent-server-data-dir=/tmp/consul-node=server-1-bind=192.168.3.110-bootstrap-expect3-client=0.0.0.0-ui/usr/local/bin/consulagent-server-data-dir=/tmp/consul-node=server-2-bind=192
awonw
·
2024-08-26 17:05
java
java-consul
java
consul
java操作zookeeper
java操作zookeeper文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装zookeeper
集群
安装zookeeper客户端命令行操作、
shuair
·
2024-08-26 16:59
zookeeper
zookeeper
基于Zookeeper搭建
Kafka
高可用
集群
基于Zookeeper搭建
Kafka
高可用
集群
一、Zookeeper
集群
搭建为保证
集群
高可用,Zookeeper
集群
的节点数最好是奇数,最少有三个节点,所以这里搭建一个三个节点的
集群
。
数字游牧人0v0
·
2024-08-26 16:58
大数据BigData
kafka
java-zookeeper
zookeeper
大数据
zookeeper+
KAFKA
集群
搭建
它是一个为分布式应用提供一致性服务的软件,提供的功能包括:配置维护、域名服务、分布式同步、
集群
管理等。
懵逼的运维弟弟
·
2024-08-26 16:28
Linux
zookeeper+KAFKA
集群搭建
面试笔记8.24
我会在
集群
中部署多台服务器,通过分布式计算和存储来处理大规模数据。解答思路:首先,我会搭建一个Hadoop或Spark
集群
,确保
集群
中的每台服务器都能正常通信。
励志秃头码代码
·
2024-08-26 16:55
面试
职场和发展
zookeeper单机安装
zookeeper单机安装文档linux安装java-centos安装java-linux配置java环境变量zookeeper单机安装zookeeper
集群
安装zookeeper客户端命令行操作、节点类型及监听器
shuair
·
2024-08-26 15:49
zookeeper
zookeeper
java
Zookeeper实现分布式锁
文章目录什么是ZookeeperZookeeper
集群
机制Zookeeper特性Zookeeper数据结构Zookeeper应用场景Zookeeper的环境搭建(linux)Zookeeper客户端Zookeeper
爱吃糖的靓仔
·
2024-08-26 15:48
#
分布式区
分布式
java-zookeeper
zookeeper
什么是耦合、紧耦合、松耦合
但随着
集群
规模的扩大,系统的稳定性逐渐变差,主要原因如下:1、同步操作导致对
mingzhi61
·
2024-08-26 15:18
java代码审计
java代码审计
开发语言
大数据技术之Zookeeper安装 (2)
目录下载地址本地模式安装1)安装前准备2)配置修改3)操作Zookeeper配置参数解读Zookeeper
集群
操作
集群
规划解压安装配置服务器编号配置zoo.cfg文件
集群
操作Zookeeper
集群
启动停止脚本创建脚本增加脚本执行权限
大数据深度洞察
·
2024-08-26 14:43
Zookeeper
大数据
hadoop
zookeeper
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他