E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cloudera集群管理
Filebeat+Kafka+ELK日志分析架构
.zookeeper定义:2.Zookeeper工作机制:3.Zookeeper特点:4.Zookeeper数据结构:5.Zookeeper应用场景:5.1统一命名服务:5.2统一配置管理:5.3统一
集群管理
我不道啊;
·
2023-10-19 10:08
zookeeper
kafka
架构
kubernetes生产化
集群管理
生产化
集群管理
计算节点相关生产化集群的考量计算节点如何批量安装和升级计算节点的操作系统如何管理和配置计算节点的网络信息如何管理不同的SKU的计算节点如何快速下架故障的计算节点如何快速扩缩集群的规模控制平面如何从主节点上下载
LegendGo
·
2023-10-19 02:04
Hive官方手册翻译(Getting Started)
内容列表
Cloudera
制作的Hive介绍视频安装与配置系统需求安装Hive发行版从Hive源码编译运行Hive配置管理概览运行时配置Hive,Map-Reduce与本地模式错误日志DDL操作元数据存储
weixin_33985679
·
2023-10-18 20:25
java
数据库
shell
Hive官方手册翻译(Getting Started)(转)
内容列表
Cloudera
制作的Hive介绍视频安装与配置系统需求安装Hive发行版从Hive源码编译运行Hive配置管理概览运行时配置Hive,Map-Reduc
weixin_33701251
·
2023-10-18 20:24
大数据
java
数据库
hue实现对hiveserver2 的负载均衡
如果你使用的是CDH集群那就很是方便的在
Cloudera
Manager中,进入HDFSService进入Instances标签页面,点击AddRoleInstances按钮,如下图所示点击Continue
墨卿风竹
·
2023-10-18 19:12
负载均衡
运维
集群
hue
hadoop
cdh
瞰见 I 黯然退市的
Cloudera
, 让我们开源人情何以堪?
「有时,表达自己的意见,即使可能是错的,也比转述别人的真理要更有意义」——陀思妥耶夫斯基就在本月,大数据行业的一个标志性事件:
Cloudera
于10月8日正式宣布完成了从纳斯达克摘牌和私有化退市。
OpenTEKr
·
2023-10-18 16:48
狄安瞰源
cloudera
big
data
数据分析
15-k8s-高级存储之pv与pvc
文章目录一、相关概念二、创建pv二、创建pvc三、创建pod调用pvc四、StorageClass动态制备pv一、相关概念关系生命周期相关概念2.1静态构建:
集群管理
员创建若干PV卷。
懒惰の天真热
·
2023-10-17 16:34
k8s学习笔记
kubernetes
容器
云原生
一文囊括Ceph所有利器(工具)
原文链接:知乎专栏:一文囊括Ceph所有利器(工具)-知乎前言ceph的工具很多,包括
集群管理
与运维,还有性能分析等等。
hongsong wu
·
2023-10-17 07:56
另辟蹊径Ceph源码分析
ceph
服务器
网络
实录分享 | Alluxio 在网易大数据的应用与优化
一、背景介绍网易有数大数据基础平台NDH:NDH是网易对标
Cloudera
CDH的一个内部实现,是网易内部广泛使用的一个基础平台。
Alluxio
·
2023-10-17 06:30
大数据
网易
impala
hadoop
对象存储
Alluxio
transparent
URI
Spark读写HBase表数据
一、Maven依赖
cloudera
https://repository.
cloudera
.com/artifactory/
cloudera
-reposorg.apache.sparkspark-core
扎西的德勒
·
2023-10-17 04:14
K8S 多
集群管理
命令行工具: KubeCM
简介Easiermanagementofkubeconfig.安装#下载安装https://github.com/sunny0826/kubecm/releases$cd/usr/local/bin$wgethttps://github.com/sunny0826/kubecm/releases/download/v0.15.3/kubecm_0.15.3_Linux_x86_64.tar.gz$
叨叨软件测试
·
2023-10-16 00:26
k8s
k8s
kubecm
kubectl基本命令
kubectlexpose命令3、更新kubectlset4、回滚kubectlrollout5、删除kubectldelete6、更新三、声明式管理方法一、陈述时资源管理方法基本信息查看:1.kubernetes
集群管理
集群资源的唯一入口是通过相应的方法调用
w白白白w
·
2023-10-15 22:50
kubernetes
kubernetes
Linux环境下Hive的安装
下载地址:http://archive.
cloudera
.com/cdh5/cdh/5/#下载后进行解压tar-zxvfhive-1.1.0-cdh5.15.2.tar.gz1.2配置环境变量#vim/
Keven He
·
2023-10-15 17:27
#
Hive
hive
hadoop
linux
Hive 系列(二)—— Linux 环境下 Hive 的安装部署
下载地址:http://archive.
cloudera
.com/cdh5/cdh/5/#下载后进行解压tar-zxvfhive-1.1.0-cdh5.15.2.tar.gz1.2配置环境变量#vim/
weixin_30362083
·
2023-10-15 17:56
操作系统
数据库
大数据
使用 TiUP 部署 TiDB 集群
TiUP是TiDB4.0版本引入的集群运维工具,TiUPcluster是TiUP提供的使用Golang编写的
集群管理
组件,通过TiUPcluster组件就可以进行日常的运维工作,包括部署、启动、关闭、销毁
每天读点书学堂
·
2023-10-15 14:52
大数据
数据库
数据库架构
数据库开发
运维
【容器】Docker和K8S(初识)
kubernetes:是一个开源的容器
集群管理
系统,可以实现容器集群的自动化部署、自动扩缩容、维护等功能。
我顶得了
·
2023-10-15 08:13
容器
【漏洞复现】图书馆
集群管理
系统存在逻辑绕过
漏洞描述广州图创计算机软件开发有限公司图书馆
集群管理
系统存在逻辑绕过,攻击者可通过此漏洞登录后台,从而造成不良影响。
丢了少年失了心1
·
2023-10-15 00:41
网络安全
web安全
渗透测试
漏洞复现
漏洞复现
网络安全
kafka eagle(EFAK)的介绍和保姆级安装教程
本文主要介绍Apache和CDH平台下kafkaeagle的安装配置教程,
Cloudera
CDP平台可以选择自带的SMM,也可以像CDH一样配置kafkaeagle(推荐)。
炼数成器
·
2023-10-14 18:54
Kafka
kafka
Zookeeper的基本概念与应用场景
Zookeeper是我们在分布式服务中常用的组件,用于实现
集群管理
、数据同步等问题。本文我们主要针对Zookeeper的基本概念和常用应用场景进行介绍。
吕宗胜ZJU
·
2023-10-14 16:41
Zookeeper应用场景(二)
另一方面,通过对ZooKeeper中丰富的数据节点类型进行交叉使用,配合Watcher事件通知机制,可以非常方便地构建一系列分布式应用中都会涉及的核心功能,如数据发布/订阅、命名服务、
集群管理
、Master
qq_30024063
·
2023-10-14 10:40
分布式架构
分布式
java
大数据
zookeeper
Zookeeper【Curator客户端Java版】从0到1——万字学习笔记
目录初识ZookeeperZookeeper作用维护配置信息分布式锁服务
集群管理
生产分布式唯一IDZookeeper的设计目标Zookeeper工作机制数据模型ZooKeeper命令操作服务端常用命令客户端常用命令
学徒630
·
2023-10-14 08:11
分布式
学习笔记篇
zookeeper
学习
笔记
网工内推 | 国企专场,网络运维工程师,华为/思科认证优先
2、对集团数据中心系统的大数据基础架构(
Cloudera
DistributionHadoop)的规划、运维及管理相关工作。
HCIE考证研究所
·
2023-10-14 03:19
网络
运维
华为
网络工程师
华为认证
数据库
开发语言
starrocks
主要负责接收和返回客户端请求、元数据以及
集群管理
、查询计划生成BE后端节点
EnndmeRedis
·
2023-10-14 01:44
数据仓库
zookeeper的工作机制、应用场景,及实际部署使用
zookeeper是一个分布式服务框架,基于文件系统+通知机制,解决分布式应用的数据管理和协调问题,如:统一命名、状态同步、
集群管理
、应用配置项管理等。
沉思的雨季
·
2023-10-13 20:05
Spark 的主要组件及任务分工
与
集群管理
器进行通信,以获取资源和监控应用程序的执行状态。ClusterManager(
集群管理
器):【资源管理】负责管理整个Spark集群
Young_IT
·
2023-10-13 14:12
大数据开发
spark
大数据
分布式
Kubernetes 和 Kubeflow 学习笔记
KubernetesKubernetes是一个完备的分布式系统支撑平台,具有完备的
集群管理
能力,多扩多层次的安全防护和准入机制、多租户应用支撑能力、透明的服务注册和发现机制、內建智能负载均衡器、强大的故障发现和自我修复能力
摸鱼温乎
·
2023-10-13 13:26
kubernetes
学习
docker
hive小文件合并机制_转:Hive小文件合并
小文件带来的问题关于这个问题的阐述可以读一读
Cloudera
的这篇文章。简单来说,HDFS的文件元信息,包括位置、大小、分块信息
亿码数码
·
2023-10-13 08:56
hive小文件合并机制
Rancher 2.1平台搭建及使用
1.2.2、Kubernetes简述1.2.3、Rancher架构二、相关术语2.1、全局层2.2、集群层2.3、项目层2.4、其他(右上角登录菜单)三、Rancherv2.1.0功能列表3.1、K8S
集群管理
DemonHunter211
·
2023-10-13 07:28
Docker
Impala在Hulu中的优化和改进
背景Impala是一个SQLonHadoop的MPP查询引擎,由
Cloudera
主导开发并捐献给Apache软件基金会,在2017年底正式孵化成为Apache顶级项目。
肥猫64
·
2023-10-13 06:04
Skywalking安装部署,在springboot中的使用
1)多种监控手段,可以通过语言探针和servicemesh获得监控数据(2)支持多种语言探针,包括Java,.NETCore和Node.JS(3)轻量高效,无需大量服务器资源(4)模块化,UI,存储,
集群管理
都有多种机制可选
temp_44
·
2023-10-13 02:43
Skywalking
elk
elasticsearch
Kubernetes 笔记(01)— 简介、minikube 安装、kubectl 安装 、Kubernetes 环境搭建
Kubernetes是一个生产级别的容器编排平台和
集群管理
系统,不仅能够创建、调度容器,还能够监控、管理服务器。1.minikube简介Kubernetes一般都运行
wohu007
·
2023-10-12 13:22
Kubernetes
kubernetes
docker
容器
07-Zookeeper特性与节点数据类型详解
分布式协调框架,主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步服务、
集群管理
、分布式应用配置项的管理等。
一路向北·重庆分伦
·
2023-10-12 09:27
图灵学习
#
四:分布式框架专题
java-zookeeper
zookeeper
java
zookeeper基础篇
zookeeper.apache.org/官方文档上这么解释zookeeper,它是一个分布式协调框架,是ApacheHadoop的一个子项目,它主要是用来解决分布式应用中经常遇到的一些数据管理问题,如:统一命名服务、状态同步服务、
集群管理
行走在江湖
·
2023-10-12 09:25
java
java
大数据权限管理框架:Apache Sentry和Ranger
一、简介ApacheSentry:Sentry是由
Cloudera
公司内部开发而来的,初衷是为了让用户能够细粒度的控制Hadoop系统中的数据(这里主要指HDFS,Hive的数据)。
Impl_Sunny
·
2023-10-12 09:23
#
对比&选型
Hadoop生态
Sentry
Ranger
大数据权限管理
Zookeeper集群与Leader选举
可基于ZooKeeper实现命名服务、
集群管理
、Master选举、分布式锁等功能。
Wayyyyyyyy
·
2023-10-11 23:58
java后端
zookeeper
leader
选举
投票
follower
Zookeeper集群搭建及使用
使用场景统一配置管理、统一命名服务、统一
集群管理
、软负载均衡、服务器节点动态上下线等统一配置管理:将配置信息写入zookeeper的一个znode中,各个服务端监听这个znode,znode中内容经过修改
优优优优呐
·
2023-10-11 23:13
java
分布式
zookeeper
java
zookeeper节点数据类型介绍及集群搭建
ApacheZooKeeperzookeeper是一个分布式协调框架,保证的是CP,即一致性和分区容错性;zookeeper是一个分布式文件存储系统,文件节点可以存储数据,监听子文件节点等可以实现数据的
集群管理
高如风
·
2023-10-11 23:27
zookeeper
zookeeper
linux
分布式
Linux上github提示Permission denied (publickey),如何才能解决?
想下载github上的源码,但提示没有公钥#
[email protected]
:
cloudera
/hue.gitCloninginto'hue'
[email protected]
:Permissiondenied
Beginner_G
·
2023-10-11 22:53
git
github
Zookeeper从入门到精通
Zookeeper可以用于实现分布式系统中常见的发布/订阅、负载均衡、命令服务、分布式协调/通知、
集群管理
、Master选举、分布式锁和分布式队列等功能。
关老头
·
2023-10-11 14:40
Zookeeper从入门到精通
zookeeper
分布式
云原生
java-zookeeper
Kafka学习笔记(六)· 高级应用~集群~监控
Connect1、概述2、独立模式-文件系统3、SpringBootKafka1、添加pom文件2、添加application.properties3、消息的发送4、消息的接收5、Kafka事务的支持九、
集群管理
发抖吧小喵喵
·
2023-10-11 09:11
java
消息队列MQ
kafka
以 Kubernetes 原生方式管理 Kubernetes 集群
ClusterAPI可被视为通用的Kubernetes
集群管理
框架,但您可能想要基于ClusterAPI实施自己的云提供商服务。
Steven_Chen925
·
2023-10-11 06:21
信息检索与搜索引擎:开源的搜索引擎Elasticsearch
通过简单的RESTfulAPI即可实现写入、查询、
集群管理
等操作。除了检索,还提供丰富的统计分析功能。以及官方功能扩展包XPack满足其
匿名User
·
2023-10-10 23:24
elasticsearch
搜索引擎
spark阶段和任务小结
spark一般有以下几种执行模式,standalone执行模式,通过资源管理器管理分片资源的执行模式(常用的有spark
集群管理
器,mesco,yarn资源管理器),当执行一个spark的作业时一般都会把任务分成几个
lixia0417mul2
·
2023-10-10 09:03
大数据
spark
大数据技术之Hadoop
第1章Hadoop概述1.1Hadoop是什么1.2Hadoop发展历史(了解)1.3Hadoop三大发行版本(了解)Hadoop三大发行版本:Apache、
Cloudera
、Hortonworks。
骚戴
·
2023-10-10 02:41
大数据
hadoop
大数据
hdfs
Kubernetes 词条总结
是谷歌开源的容器
集群管理
系统。在Docker技术的基础上,为容器化的应用提供部署运行、资源调度、服务发现和动态伸缩等一系列完整功能,提高了大规模容器
集群管理
的便捷性。
yspg_217
·
2023-10-09 19:50
容器技术
kubernetes
docker
容器
Kubernetes(k8s)总结
k8s架构及核心概念k8s是一种开源的容器
集群管理
系统,具有自动化容器部署、管理、扩展和联网等容器编排技术。
神秘的Mecurry
·
2023-10-09 19:42
kubernetes
云原生
容器
MongoDB
集群管理
工具UMongo
为什么80%的码农都做不了架构师?>>>UMongo(前身是JMongoBrowser)是一个图形化界面的工具,用来浏览和管理MongoDB集群,支持Linux,Windows和MacOSX.UMongo特性有:1.支持连接到单个服务器、复制集以及MongoS实例2.数据库管理:create,drop,authenticate,command,eval,…3.集合管理:create,rename,
weixin_34236497
·
2023-10-09 04:11
数据库
c#
json
MongoDB
集群管理
要点
备份要点对Shardedcluster进行备份时,需要先关闭Balancer,避免备份出来shard、configserver数据出现不一致。对于有访问权限控制的MongoDB集群,对集群进行备份时最好能创建一个带有“backup”角色的用户(如用户名:backupUser),并且鉴权数据库为“admin”,备份时使用此用户名,避免由于权限问题而无法备份。movePrimary要点movePrim
逝水-无痕
·
2023-10-09 04:11
DB
MongoDB
集群
备份
shard
数据库
MongoDB
集群管理
文章目录1、副本集-ReplicaSets1.1、简介1.2、副本集的三个角色1.3、副本集架构目标1.4、副本集的创建1.4.1第一步:创建主节点1.4.2第二步:创建副本节点1.4.3第三步:创建仲裁节点1.4.4第四步:初始化配置副本集和主节点1.4.5第五步:查看副本集的配置内容1.4.6第六步:查看副本集状态1.4.7第七步:添加副本从节点1.4.8第八步:添加仲裁从节点1.4.10do
King Gigi.
·
2023-10-09 04:10
mongodb
数据库
docker
java
Kubernetes基础概述
一、Kubernetes基础概述1、Kubernetes是什么 Kubernetes是容器
集群管理
系统,是一个开源的平台,可以实现容器集群的自动化部署、自动扩缩容、维护等功能。
ProjectNo
·
2023-10-08 23:02
kubernetes
kubernetes
docker
容器
上一页
8
9
10
11
12
13
14
15
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他