E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cdh集群管理
搭建k8s集群实战(二)安装keepalived和haproxy
keepalived介绍:是
集群管理
中保证集群高可用的一个服务软件,其功能类似于heartbeat,用来防止单点故障Keepalived作用:为haproxy提供vip(10.208.1.190)在三个
xiegwei
·
2024-01-26 13:56
k8s
kubernetes
linux
运维
5. 梳理离线批次spark作业提交脚本
/bin/bash-x#
[email protected]
_NAME="SparkALS"
CDH
USER=admin
CDH
PASSWORD=admin
CDH
URL=http:/
赛尔木
·
2024-01-26 11:47
k8s的安全机制
1、k8s:分布式
集群管理
工具,就是容器编排2、安全机制的核心:api-service(1)api-server作为整个集群内部通信的中介,也是外部控制的入口,所有的安全机制都是围绕api-server
海德Hyde
·
2024-01-26 10:42
kubernetes
安全
容器
Zookeeper集群 + Kafka集群
Zookeeper特点(1)组成(2)全局数据一致(3)更新请求顺序执行(4)数据更新原子性(5)实时性4.Zookeeper数据结构5.Zookeeper应用场景(1)统一命名服务(2)统一配置管理(3)统一
集群管理
江南字子川
·
2024-01-26 09:15
zookeeper
kafka
分布式
11.swarm
Swarm
集群管理
Docker是容器运行时,而Swarm是Docker公司出品的容器编排工具。
程序媛9688
·
2024-01-26 08:09
java
K8S安全机制
安全机制k8s的安全机制,分布式
集群管理
工具,就是容器编排,安全机制的核心就是围绕APISERVER,作为整个集群内部通信的中介,也是外部控制的入口,所有的安全机制都是围绕apiserver来进行设计请求
2301_79410672
·
2024-01-26 07:52
安全
skywalking前端_用SkyWalking做分布式追踪和应用性能监控系统
特性:多种监控手段,语言探针和servicemesh多语言自动探针,Java,.NETCore和Node.JS轻量高效,不需要大数据模块化,UI、存储、
集群管理
多种机制可选支持告警优秀的可视化方案Skywalking
热带汽水
·
2024-01-26 07:17
skywalking前端
教你三步实现
CDH
到星环TDH的平滑迁移
TranswarpDataHub(TDH)是星环科技自主研发的企业级一站式多模型大数据基础平台,其领先的多模型技术架构提供统一的接口层,统一的计算引擎层,统一的分布式存储管理层,统一的资源调度层,以及异构存储引擎层。8种异构存储引擎可以支持包括关系表、文本、时空地理、图数据、文档、时序等在内的10种数据模型。存算解耦特性支持弹性扩展,让资源配置更灵活。星环一站式多模型大数据基础平台TDH架构图TD
星环科技
·
2024-01-26 07:08
大数据
数据库
大数据平台
big
data
数据仓库
hadoop
【K8S 云原生】K8S的安全机制
httpbase:3、http证书:2、认证的访问类型:3、签发证书:二、鉴权1、概念:2、APIServer目前支持以下几种授权策略:三、准入控制四、实验一、K8S安全机制概述1、概念K8S中的安全机制,分布式的
集群管理
工具
koeda(粉丝冲刺一个亿)
·
2024-01-26 06:16
Kurbernetes
云原生
kubernetes
安全
使用
CDH
的api接口对
cdh
服务进行滚动重启
同时
cdh
的大数据服务对用户都是黑盒。无法直接操作。
Mumunu-
·
2024-01-26 01:32
大数据
python
CDH
浏览器安装流程
1主节点得ip:7180,然后输入账号密码:admin,admin2然后下一步下一步,选择所有得主机列出所有得主机3然后根据自己安装得版本来进行选择选择对应版本4然后等待安装等待配置5出现问题根据提示进行操作进行相关设置(安装得时候,一般做了配置)6然后下一步,然后选择自定义安装,先安装最基本得几个组件:HDFSHbaseZooKeePerYARN7然后就是分配主机安装组件了,分配规则是要均衡,而
PunkP
·
2024-01-25 23:41
spakr 提交任务
当前集群支持3中
集群管理
Standalone(spak框架自身拥有能力)ApacheMesosHadoopYARNKubernetes使用/spark-submit脚本提交任务,脚本后面可以接参数.
新鲜氧气
·
2024-01-25 19:55
大数据
#
scala
#
spark
scala
spark
大数据
win下安装es可视化工具——elasticsearch head(win_Elasticsearch)
一、head简介ElasticsearchHead是
集群管理
、数据可视化、增删改查、查询语句可视化工具。
jerry-89
·
2024-01-25 17:41
ES
elasticsearch
大数据
搜索引擎
Docker(十六)Kubernetes - 开源容器编排引擎
KubernetesKubernetes是Google团队发起并维护的基于Docker的开源容器
集群管理
系统,它不仅支持常见的云平台,而且支持内部数据中心。
.正函数.
·
2024-01-25 14:38
Docker容器技术
docker
kubernetes
开源
Hbase集群安装部署
hadoop集群,并启动安装好对应版本的zookeeper集群,并启动HBase集群安装部署下载安装包并上传到node01服务器安装包下载地址:http://archive.cloudera.com/
cdh
5
我还不够强
·
2024-01-25 12:02
k8s图形化管理工具之rancher
在二进制搭建k8集群时,我们就知道了k8s本身就具有一款原生的k8s
集群管理
工具,但是原生图形化管理工具dashborad只拥有管理一个集群的能力。而对于现代化生产力公
yucfkyu
·
2024-01-25 07:44
kubernetes
rancher
容器
基于k8s实现动态弹性伸缩 动态的回滚和滚动更新
k8s是一个开源的容器
集群管理
系统,可以实现容器集群的自动化部署、自动扩缩容、维护等功能。
抹香鲸之海
·
2024-01-24 21:29
docker
k8s
harbor
gitlab
Linux运维
Nginx
kubernetes
docker
运维
ElasticSearch的
集群管理
命令
ElasticSearch版本{"name":"data-slave1","cluster_name":"data-es","cluster_uuid":"xxxxxxxxxx-eMwxw","version":{"number":"7.2.1","build_flavor":"default","build_type":"rpm","build_hash":"fkg6eb20","build_d
枫叶梨花
·
2024-01-24 12:47
elasticsearch
大数据
搜索引擎
HBase详细概述
不过在此之前,你可以先了解Hadoop生态系统,若想运行HBase,则需要先搭建好Hadoop集群环境,可以参考此文搭建5个节点的hadoop集群环境(
CDH
5)。好了,让我们来学习HBase吧!
a867901084
·
2024-01-24 08:49
大数据
数据库
运维
Spark详解(八):Spark 容错以及高可用性HA
1.Executor容错Spark支持多种运行模式,这些运行模型中的
集群管理
器会为任务分配运行资源,在运行资源中启动Executor,由Ex
MasterT-J
·
2024-01-24 07:19
Spark框架
Spark框架
Spark框架
oracle 19c rac
集群管理
------ 日志管理
数据库的目录结构及日志路径在Oracle19cRAC(RealApplicationClusters)集群中,有多个组件和层级生成的日志文件,记录着集群的活动、事件和错误信息,用于故障诊断、性能优化和
集群管理
加油鸭啦啦啦啦
·
2024-01-24 07:28
oracle
19c
rac
安装以及配置
oracle
数据库
Oracle 19c RAC
集群管理
---------关键参数以及常用命令
Oracle19cRAC
集群管理
---------关键参数Oracle19CRAC参数最佳实践--开启强制归档ALTERDATABASEFORCELOGGING;--设置30分钟强制归档ALTERSYSTEMSETARCHIVE_LAG_TARGET
加油鸭啦啦啦啦
·
2024-01-24 07:27
oracle
19c
rac
安装以及配置
oracle
数据库
HBase学习五:运维排障之宕机恢复
Master主要负责
集群管理
调度,在实际生产线上并没有非常大的压力,因此发生软件层面故障的概率非常低。
Studying!!!
·
2024-01-24 07:27
中间件
hbase
学习
运维
Oracle 19c rac
集群管理
-------- 集群启停操作过程
Oraclerac集群启停操作过程首先查看数据库的集群的db_unique_nameSQL>showparameternameNAMETYPEVALUE--------------------------------------------------------------------------cdb_cluster_namestringcell_offloadgroup_namestring
加油鸭啦啦啦啦
·
2024-01-24 07:51
oracle
19c
rac
安装以及配置
oracle
数据库
Zookeeper集群+Kafka集群
目录Zookeeper1.Zookeeper定义2.Zookeeper工作机制3.Zookeeper特点4.Zookeeper数据结构5.Zookeeper应用场景统一命名服务统一配置管理统一
集群管理
服务器动态上下线软负载均衡
Ybaocheng
·
2024-01-24 06:20
zookeeper
kafka
分布式
java字符串去掉换行符,帮你突破瓶颈
Kubernetes(k8s)是Google开源的容器
集群管理
系统(谷歌内部:Borg)。
前端陈萨龙
·
2024-01-24 06:09
程序员
面试
经验分享
java
java字符串去掉换行符,看这一篇就够了!
Kubernetes(k8s)是Google开源的容器
集群管理
系统(谷歌内部:Borg)。
最新Java面经
·
2024-01-24 06:08
程序员
面试
经验分享
java
厉害了!java字符串去掉换行符
Kubernetes(k8s)是Google开源的容器
集群管理
系统(谷歌内部:Borg)。
椰果学Android
·
2024-01-24 06:36
程序员
面试
后端
java
Ubuntu 18.04安装单master K8s集群
Kubernetes是Google在2014年开源的一个容器
集群管理
系统,Kubernetes简称K8S。K8S用于容器化应用程序的部署,扩展和管理。
灵姿寒
·
2024-01-24 00:26
ubuntu
docker
容器
运维
服务器
2 - 部署Redis集群架构
服务器第一步修改配置文件启用集群功能第二步重启redis服务第三步查看Redis-server进程状态(看到服务使用2个端口号为成功)创建集群在管理主机mgm57执行创建集群的命令查看集群信息访问集群存取数据在客户端连接集群中的主机
集群管理
向集群里添加新服务器把
桑_榆
·
2024-01-23 08:08
数据库
redis
架构
数据库
cdh
6.3.2的hive配udf
背景大数据平台的租户要使用udf,他们用beeline连接,意味着要通过hs2,但如果有多个hs2,各个hs2之间不能共享,需要先把文件传到hdfs,然后手动在各hs2上createfunction。之后就可以永久使用了,重启hs2也可以调研先查的hive官网https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF#La
zdkdchao
·
2024-01-23 07:02
hive
hadoop
数据仓库
【分布式技术】注册中心zookeeper
目录一、ZooKeeper是什么二、ZooKeeper的工作机制三、ZooKeeper特点四、ZooKeeper数据结构五、ZooKeeper应用场景●统一命名服务●统一配置管理●统一
集群管理
●服务器动态上下线
liu_xueyin
·
2024-01-23 04:00
分布式
zookeeper
kafka
CDH
6.2 集群离线部署
文章目录
CDH
6.2集群离线部署服务器集群节点角色规划系统环境准备cm-server配置ssh免密码登录认证在cm-server服务器上下载
CDH
6.2相关的安装包安装nginx做cm本地yumrepo
那些、快乐。
·
2024-01-22 21:44
大数据
hadoop
linux
kubectl与 jq的用法
一、背景在日常运维工作中,我们需要管理和操作大量的配置文件,这在使用Kubernetes
集群管理
应用时尤为常见。
睡不醒的猪儿
·
2024-01-22 07:01
kubernetes
容器
二进制部署高可用k8s集群V1.20.11版本
将桥接的IPv4流量传递到iptables的链7、时间同步二、部署Etcd集群1、准备cfssl证书生成工具2、生成Etcd证书2.1、自签etcd证书颁发机构(根CA)2.2、使用自签的CA来签发Et
cdH
TTPS
不知名运维:
·
2024-01-22 07:57
Kubernetes学习分享;
kubernetes
容器
云原生
OB OCP工具
文章目录OCP产品架构OCP核心功能
集群管理
-集群拓扑图告警管理OCPOCP(OceanBaseCloudPlatform)是企业级数据库管理平台OceanBase云平台(OceanBaseCloudPlatform
缘友一世
·
2024-01-21 20:39
OceanBase
开闭原则
2020年最新ZooKeeper面试题(附答案)
它是一个为分布式应用提供一致性服务的软件,分布式应用程序可以基于Zookeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、
集群管理
、Master选举、分布式锁和分布式队列等功能。
码农开花
·
2024-01-21 14:28
大数据之Spark架构设计与工作流程
驱动器还负责任务的调度,并与
集群管理
器(如HadoopYARN、ApacheMesos或Standalone模
转身成为了码农
·
2024-01-21 07:41
大数据
spark
分布式
【Spark分布式内存计算框架——Spark SQL】14. 分布式SQL引擎
语句方式二:启动服务HiveServer2(HiveThriftServer2)将Hive当做一个服务启动(类似MySQL数据库,启动一个服务),端口为100001)、交互式命令行,bin/beeline,
CDH
csdnGuoYuying
·
2024-01-21 06:38
spark
分布式
sql
scala
数据库
Rancher2.5.7安装及k8s集群部署
Rancher和Kubesphere都是比较优秀的k8s
集群管理
平台,比起常规的脚本二进制部署和kebectl部署,使用Rancher或Kubesphere部署k8s可以降低k8s集群运维复杂度,降低运维开发的成本
SRE运维部落
·
2024-01-21 06:58
kubernetes
容器
云原生
掌握Shell编程,一篇就够了
Linux运维工程师:编写Shell程序进行服务
集群管理
。Python和JavaEE程序员:编写Shell脚本程序或者是服务器的维护,比如编写一个定时备份数据库的脚本。
TCL瓦尔
·
2024-01-20 16:28
linux
linux
python
运维
CDH
禁用Kerberos
禁用Kerberos,由于没有按钮可以直接操作,需要我们手动一个个修改开启了Kerberos的组件的配置。修改步骤按以下来:1.先关闭集群(如果yarn上有任务则等待停止,或手动停止)。2.修改zookeeper的配置enableSecurity取消勾选,EnableKerberosAuthentication取消勾选,在zoo.cfg的Server高级配置代码段(安全阀)写入skipACL:ye
sf_www
·
2024-01-20 11:23
hadoop
hadoop
cloudera
动手搓一个kubernetes管理平台(2)-后端权限设计
授权和认证1.权限分类由于用户需要操作kubernetes,所以权限分类起码需要2套,即平台的权限和集群的权限管理,前者用于管理平台,如用户的添加,报表的查看,日志的审计等等,后者用于
集群管理
,需要和kubernetes
钟大發
·
2024-01-20 07:53
从零开始写一个k8s管理平台
kubernetes
容器
云原生
cdh
安装 elsticsearch
前言记录了我使用
CDH
安装ES过程第一步:
cdh
集成es参考文章我使用的是7.13.4的版本,并非全部按照文章的来,问题解决第二步:安装kibana参考文章注意:版本要一致我使用的docker安装kibana
万事万物
·
2024-01-19 20:18
使用docker-compose构建elasticsearch集群
容器集群的配置文件是需要定制修改的,但是每次启动以后再进去修改是一个工作量非常大的事情,也是在
集群管理
的时候最不能做的,一定要一步到位。
十五倍压枪
·
2024-01-19 14:10
kafka可视化客户端工具(Kafka Tool)的使用
一、下载下载地址:http://www.kafkatool.com/download.html我们的kafka版本是2.11(kafka_2.11-2.0.0-
cdh
6.1.1),下载kafkatool2.0.6
勤奋的超跑
·
2024-01-19 12:54
CDH
6.3.2,不互通的
cdh
平台互导hive数据
1、先导出所有建表语句,在源
CDH
服务器命令行输入下面命令,该库下所有建表语句保存至hive目录中的tables.sql文件中,不知道具体路径可以全局搜索一下,拿到源库hive的建表语句后,稍微处理一下
李小晨同学
·
2024-01-19 01:12
hive
hadoop
数据仓库
【大数据】HBase集群安装部署
并启动安装好对应版本的zookeeper集群,并启动1.HBase集群安装部署1.1准备安装包下载安装包并上传到node01服务器安装包下载地址:http://archive.cloudera.com/
cdh
5
橙子园
·
2024-01-19 00:51
大数据工程师成神之路
hbase
big
data
hadoop
安装部署
helm安装
下载安装包,并解压wgethttps://get.helm.sh/helm-v2.15.2-linux-amd64.tar.gztar-xfhelm-v2.15.2-linux-amd64.tar.gz
cdh
elm-v2.15.2
无处安放的躁动
·
2024-01-18 09:27
【RabbitMQ】集群和运维
目录集群方案原理RabbitMQ集群模式主备模式远程模式普通集群模式镜像队列模式多活模式
集群管理
RabbitMQ镜像集群配置负载均衡-HAProxy监控集群方案原理对于无状态应用(如普通的微服务)很容易实现负载均衡
Ethan-running
·
2024-01-18 08:32
#
RabbitMq
rabbitmq
分布式
中间件
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他