E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
集群管理-Ambari
Apache Doris - 架构
主要负责接收和返回客户端请求、元数据以及
集群管理
、查询计划生成等工作;BE为Doris的后端节点。主要负责数据存储与管理、查询计划执行等工作;FE节点分为follower和observer两类。
wenqingCoder
·
2023-04-05 07:11
Doris
大数据
数据库
【kafka-ui】支持kafka with kraft的可视化
集群管理
工具
本文在kafka3.3.1版本基础上进行测试前言在早期使用kafka的时候一般使用KafkaTool或者kafkaeagle,前者为桌面软件,后者为浏览器软件。总体来说体验一般,但是还比较够用。但是从kafka3.3.1开始,已经正式抛弃zookeeper使用自己的仲裁器了,但是上述两种kafka可视化工具的更新好像并没有跟上,依然需要输入zookeeper的地址才可以连接,所以就变得不能用了。为
iFence
·
2023-04-05 06:29
Kafka
kafka
分布式
Zookeeper常见问题
Zookeeper介绍Zookeeper简称zk,分布式领域中协调者,如:统一命名服务、状态同步服务、
集群管理
、分布式应用配置项的管理等。核心原理:zookeeper=文件系统+监听通知机制。
迦叶_金色的人生_荣耀而又辉煌
·
2023-04-05 02:45
k8s架构与微服务
概述:Kubernetes(简称K8S)是开源的容器
集群管理
系统,可以实现容器集群的自动化部署、自动扩缩容、维护等功能。它既是一款容器编排工具,也是全新的基于容器技术的分布式架构领先方案。
年少丶轻狂
·
2023-04-05 00:17
Nacos集群版本安装(三)
下图展示的是单机版的nacos,可以看到nacos页面中有一个叫“
集群管理
”菜单,下面展示了对应的节点列表,因为这里是单机的,所以节点
心会发光也会慌
·
2023-04-05 00:15
nacos
java
开发语言
Zookeeper 理论基础
其主要功能包括:配置维护、域名服务、分布式同步、
集群管理
等。zookeeper的官网:http://zookeeper.apache.org2一致性zk是如何保证分布式系统的一
MiniSoulBigBang
·
2023-04-04 21:00
Redis Cluster 搭建高可用Redis服务器集群
redis-cluster提供的功能:节点自动发现主从选举,切换,集群容错
集群管理
在线分片ASK转向/MOVED转向机制架构细节说明:(1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽
XWJCoding
·
2023-04-04 20:49
Redis
Slurm架构和源码分析
1.Slurm简介SLURM(SimpleLinuxUtilityforResourceManagement)是一个可用于大型计算节点集群的高度可伸缩的
集群管理
器和作业调度系统。由60万行C代码组成。
h_m_l
·
2023-04-04 15:00
Slurm原理和实践
Slurm架构
源码分析
slurm(一) —— 简介
Slurm(SimpleLinuxUtilityforResourceManagement)是一个开源、容错、高可伸缩的
集群管理
和大型小型Linux集群作业调度系统。
hxxjxw
·
2023-04-04 15:18
slurm
Kubernetes
集群管理
(二)
kubernetes资源管理介绍在kubernetes中,所有的内容都抽象称为资源,用户需要通过操作资源来管理k8skubernetes的本质上就是一个集群系统,用户可以在集群中部署各种服务,所谓的部署,就是在k8s集群中运行一个个的容器,将执行的程序运行在容器中kubernetes的最小管理单元是pod而不是容器,所以只能将容器放在pod中,而k8s一般也不会直接管理pod,而是通过pod控制器
弓长三虎
·
2023-04-04 07:48
kubernetes
docker
容器
云原生
运维
全栈声明式可观测:KubeVela 开箱即用且灵活定制的云原生应用洞察
作者介绍:殷达,KubeVelaMaintainer,阿里云高级工程师,深度参与了KubeVela混合云多
集群管理
、可扩展工作流、可观测等核心能力体系的建设KubeVela[1]是一个开箱即用的现代化应用交付与管理平台
阿里云云原生
·
2023-04-04 02:30
云原生
运维
devops
KubeVela
阿里云
zookeeper
应用场景统一命名服务统一配置管理统一
集群管理
服务动态上下线选举机制SID:服务器ID。用来唯一标识一台ZooKeeper集群中的机器,每台机器不能重复,和myid一致。ZXID:事务ID。ZXID是一
追兔子的乌龟
·
2023-04-04 01:23
面试
面试
微服务架构下的服务治理
目录一、如何理解ApacheDubbo二、ZooKeeperzookeeper的特性Watcher机制常见应用场景分析分布式锁集群选主统一命名服务统一配置管理统一
集群管理
三、ApacheDubbo集成zookeeper
weixin_47215856
·
2023-04-04 01:53
dubbo
java-zookeeper
zookeeper
【mysql-1】mysql架构原理
系统管理和控制工具:负责系统层面的东西,如:备份恢复,安全和
集群管理
等。sql接口:用于接收sql命令,返回结果
growing_duck
·
2023-04-03 22:31
mysql
mysql
Zookeeper集群部署之单机模式、伪集群模式、集群模式
提供的服务包括:统一命名服务、统一配置管理、统一
集群管理
、服务器节点动态上下线、软负载均衡等。官网:[ht
PandaMan~
·
2023-04-03 06:02
云原生
zookeeper
分布式
云原生
ZooKeeper 01 - 什么是ZooKeeper + 部署ZooKeeper集群
目录1什么是ZooKeeper2ZooKeeper的功能2.1配置管理2.2命名服务2.3分布式锁2.4
集群管理
3部署ZooKeeper集群3.1下载并解压安装包3.2创建data和datalog目录3.3
weixin_30800987
·
2023-04-03 05:08
运维
java
大数据
Ceph主要概念
目录1整体架构介绍1.1总体介绍1.2整体架构2
集群管理
2.1Monitor2.2心跳管理3数据读写3.1OSD3.2读写流程3.3POOL和PG3.4CRUSH算法3.4.1Straw算法3.5ObjectStore
supermary0712
·
2023-04-03 04:21
ceph
ceph
云计算及网络安全行业名气较大的组织与机构(部分)
期望定义能够支持云原生应用和容器的整个基础设施堆栈,主要子项目有:Kubernetes(简称k8s)前身是Borg,是Google发起并维护的基于Docker的开源容器
集群管理
系统。
zjoy828
·
2023-04-03 03:01
基础知识
高可用Kubernetes集群二进制部署-Containerd,Calico
双master高可用集群Kubernetes部署Kubernetes(简称为:k8s)是Google在2014年6月开源的一个容器
集群管理
系统,使用Go语言开发,用于管理云平台中多个主机上的容器化的应用
Drosssse
·
2023-04-02 22:34
运维
linux
kubernetes
容器
运维
Java项目打成war包指定环境配置文件(yml、properties)运行
二、宝兰德中间件配置1、选择
集群管理
2、选择jvm配置3、增加如下环境配置
桑尼的花园
·
2023-04-02 20:22
信创项目-国产化改造
java
tomcat
servlet
zookeeper的出现背景、名称由来、用途以及数据模型和状态stat属性
维护配置信息命名服务namingservice分布式锁服务
集群管理
1.维护配置信息java编程经常会遇到配置文件(其中包含了需要的配置项),
alexlee666
·
2023-04-02 20:42
Kubernetes 架构原则和对象设计
一.Kubernetes简介1.简介kubernetes是谷歌开源的容器
集群管理
系统,是google多年大规模容器管理技术Borg的开源版本,主要功能包括:基于容器的应用部署、维护和滚动升级负载均衡和服务发现跨机器和跨地区的集群调度自动伸缩无状态服务和有状态服务插件机制保证扩展性
钟哥哥实在帅
·
2023-04-02 18:32
个人
kubernetes
【云原生训练营】模块四 Kubernetes 架构原则和对象设计
Kubernetes对象及其分组核心技术概念和API对象TypeMeta核心对象概览课后练习K8s安装CentOS7利用Kubeadm快速部署Kubernetes集群K8s概念Kubernetes是谷歌开源的容器
集群管理
系统
果子哥丶
·
2023-04-02 18:50
云原生
读书笔记
运维
kubernetes
云原生
架构
【云原生 | Kubernetes 系列】Kubernetes架构
1.BorgBorg是谷歌内部的大规模
集群管理
系统,负责对谷歌内部很多核心服务的调度和管理。
上海_运维_Q先生
·
2023-04-02 18:49
Linux
K8s
docker
kubernetes
容器
11-ElasticSearch-集群-集群结构
8
集群管理
8.1集群结构ES通常以集群方式工作,这样做不仅能够提高ES的搜索能力还可以处理大数据搜索的能力,同时也增加了系统的容错能力及高可用,ES可以实现PB级数据的搜索。
minihuabei
·
2023-04-02 17:40
day11
搜索服务
KubeSphere 开源 KubeEye:Kubernetes 集群自动巡检工具
为什么开源KubeEyeKubernetes作为容器编排的事实标准,虽然架构优雅功能也非常强大,但是Kubernetes在日常运行过程中总会有一些疑难杂症和隐性的问题让
集群管理
员和Yaml工程师们非常头疼
KubeSphere 云原生
·
2023-04-02 16:26
KubeSphere——KubeSphere系统架构
一、KubeSphere系统架构后端组件功能说明ks-account提供用户、权限管理相关的APIks-apiserver整个
集群管理
的API接口和集群内
庄小焱
·
2023-04-02 15:44
KubeSphere
系统架构
java
kubernetes
[高可用系列|keepalived]Keepalived详解
keepalived是
集群管理
中保证集群高可用的一个服务软件,用来防止单点故障。它可以自动检测集群中服务器的健康状况,比
小肖同学..
·
2023-04-02 13:38
nginx
运维
linux
服务器
学习
部署Redis高可用集群
目录部署Redis高可用集群Redis集群环境拓扑结构IP地址环境准备工作原理创建Redis集群部署管理主机redis-trib.rb脚本redis服务器开启集群功能管理主机创建集群查看集群信息错误排查访问
集群管理
集群
机佬在线搞机
·
2023-04-02 07:56
Redis数据库
redis
数据库
linux
HAWQ配置之HDFS HA
一、在
ambari
管理界面启用HDFSHA在
ambari
中这步很简单,在所有安装的服务都正常之后,在HDFS的服务界面中,点击下拉菜单“Actions”,选择启用HDFSHA项“EnableNameNodeHA
weixin_33795743
·
2023-04-02 05:46
【
Ambari
】
ambari
组件安装
1.集群名称设置设置HDPRepositories本文是基于本地的yum安装,选择UseLocalRepository本文安装是基于centos7,移除其他的OS不用跳过baseUrl的验证设置免密登录界面上需要/root/.ssh/id_rsa主机列表脚本拷贝,机器检查,agent安装等选择待安装的组件设置组件安装的机器组件配置秘钥配置GrafanaAdmin=>adminHiveDatabas
笑起来贼好看
·
2023-04-02 05:45
大数据
Hadoop
服务运维部署
ambari
服务器
大数据
Ambari
启用HDFS HA失败回滚
获取NAMENODE节点信息curl-uadmin:admin-H“X-Requested-By:
ambari
”-XGEThttp://
ambari
-server:8080/api/v1/clusters
CarbonDioxide12138
·
2023-04-02 05:41
平台运维
hdfs
ambari
hadoop
基于
ambari
-NameNode开启高可用(HA)
此文章只是实操测试记录,更多细节建议查看官方文档启用NameNode高可用HDFS=>ACTIONS=>EnableNameNodeHA如果Hbase正在运行,需要先停止Hbase填写一个NameserviceID为NameNode和JournalNodes选择主机确认选择,下一步登录到NameNode主机进入安全模式创建检查点,如果已经创建过(即下一步按钮为绿色可点击状态),可以直接下一步sud
董不懂22
·
2023-04-02 05:49
ambari相关
hdfs
Ambari
添加快速链接Quick Links
软件环境软件环境版本号JDKjdk1.8.0_321Mysql5.7.29
Ambari
2.7.5.0HDP3.1.5.0据说是2.3版本后也就是2.4的
Ambari
才支持了这种自定义的快速链接。
一个巨蟹座的程序猿
·
2023-04-02 05:17
大数据
hdfs
hadoop
ambari
apache
大数据
史上最全—kafka-manager配置及安装Kerberos(
Ambari
-HDP)认证
本文用的
Ambari
的kafka配置kafka-manager。CDH、开源也可以步骤一样。kafka为开启kerberos认证的。
一个巨蟹座的程序猿
·
2023-04-02 05:17
大数据
ambari
hadoop
apache
大数据
kafka
Ambari
开启Kerberos后Web UI访问问题(修改配置)
之前一篇文章讲过在本地kinit然后再去访问kerberos。有失效时间,对于要长期获取jmx等场景并不太适用。此文讲通过修改hdfs等组件配置修改webui认证方式的方式实现访问webui。修改core-site中此配置为turehadoop.http.authentication.simple.anonymous.allowed=truehadoop.http.authentication.t
一个巨蟹座的程序猿
·
2023-04-02 05:17
大数据
ambari
hadoop
hdfs
大数据
apache
Ambari
开启Kerberos
Ambari
相关文档地址
Ambari
官方资料入口:https://www.cloudera.com/products/open-source/apache-hadoop/apache-
ambari
.html
Ambari
一个巨蟹座的程序猿
·
2023-04-02 05:47
大数据
ambari
hadoop
apache
超全步骤——
Ambari
+HDP部署
Ambari
相关文档地址
Ambari
官方资料入口:https://www.cloudera.com/products/open-source/apache-hadoop/apache-
ambari
.html
Ambari
一个巨蟹座的程序猿
·
2023-04-02 05:46
大数据
ambari
hadoop
hdfs
Ambari
(三)
Ambari
启用HA,以NameNode为例
安装三个Zookeeper节点,并启动,略为HDFSNameNode添加HA服务输入一个唯一的NameServiceID配置NameNodeHA检查配置信息在NameNode上执行命令开始进行HA配置在NameNode上执行如下命令启动HA需要手动配置的内容,执行如下命令最后的安装配置
666呀
·
2023-04-02 05:43
ambari
HDFS Federation基于
Ambari
部署安装(调研文档)
一、HDFSFederation架构*在有Federation之前的HDFS架构NameSpace层:管理路径、文件以及blocks的关系,同时支持文件系统的操作比如mkdir/put/get等;BlockStorage层:-BlockManagement:维护Datanode中存储的映射关系,主要是支持block层的创建、删除、修改及副本的放置等;-PhysicalStorage:存储block
Rilakkuma
·
2023-04-02 05:40
Hadoop学习
【
Ambari
】开启HDFS 的HA架构
之前搭建的
Ambari
可以查看之前的博客接下来我们来看下HDFS开启HA开启HDFS的HA架构选择启动NN的HA因为之前是3节点的所以一开始安装的时候
Ambari
架构选择了让安装一个NameNode和一个
一个巨蟹座的程序猿
·
2023-04-02 05:03
大数据
hdfs
hadoop
ambari
Kafka系列之:Kraft模式
KafkaTopic五、查看KafkaTopic六、创建生产者七、创建消费者一、Kraft架构Kafka元数据存储在zookeeper中,运行时动态选举controller,由controller进行Kafka
集群管理
最笨的羊羊
·
2023-04-02 02:41
Kafka
Kafka系列
Kraft模式
6.kafka3.x-kraft集群模式
kafka的kraft模式以前的kafka元数据保存在zk上,运行动态选举controller,由controller进行对kafka的
集群管理
.kraft模式,不在依赖zk集群,而是用三台controller
夹毛局的程序员
·
2023-04-02 02:08
kafka
kafka
java
分布式
mrs
集群管理
界面总是断线_通过 UI 管理 docker
Docker正在被用在越来越多的场景中,对于不太习惯命令行工具的朋友来说,dockercli用起来可能会比较吃力。本文笔者将介绍一个功能强大的dockerweb客户端:portainer(岸吊,参考下面插图)。按照portainer官方的说法,它可以让我们通过UI轻松的管理docker主机和dockerswarm集群。说明:本文的演示环境为ubuntu16.04。安装portainer就像我们通过
ArcCl
·
2023-04-02 01:23
mrs集群管理界面总是断线
kafka的kraft模式
一Kafka-Kraft架构左图为Kafka现有架构,元数据在zookeeper中,运行时动态选举controller,由controller进行Kafka
集群管理
。
健康平安的活着
·
2023-04-02 01:19
kafka
kafka
Kafka-kraft模式架构及部署流程
kafka引入kraft代替zk,图为zk模式的架构和kraft模式的架构对比左图为Kafka现有架构,元数据在zookeeper中,运行时动态选举controller,由controller进行Kafka
集群管理
蚂蚁和日出
·
2023-04-02 01:56
kafka
三、企业 keepalived 高可用项目实战/haproxy基础
1、KeepalivedVRRP介绍keepalived是什么keepalived是
集群管理
中保证集群高可用的一个服务软件,用来防止单点故障。
胖虎喜欢小红
·
2023-04-01 21:38
zookeeper应用场景-消息的订阅和发布
主要用来解决分布式集群中应用系统的一致性问题,它能提供基于类似于文件系统的目录节点树方式的数据存储,Zookeeper作用主要是用来维护和监控存储的数据的状态变化,通过监控这些数据状态的变化,从而达到基于数据的
集群管理
Future阿东
·
2023-04-01 20:53
互联网技术
zookeeper
分布式
配置中心
消息的订阅和发布
iot架构 mqtt netty_百度IoT:MQTT Broker架构设计
百度IoT采用的AkkaCluster来做
集群管理
,每个节点对等,不存在像Mosquitto这种用一台机器“桥接”做分布式产生的单点
云燕飞
·
2023-04-01 17:38
iot架构
mqtt
netty
详解Kubernetes架构 | 端午送福利
Kubernetes是Google公司开源的一个容器(Container)编排与调度管理框架,该项目最初是Google内部面向容器的
集群管理
系统,而现在是由CloudNativeComputingFoundation
Docker_
·
2023-04-01 16:44
上一页
18
19
20
21
22
23
24
25
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他