E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
集群管理-Ambari
Zookeeper浅入浅出
Zookeeper集群服务器的几种角色LeaderFollowObserver角色的工作状态LookingFollowingLeadingObserving事务的顺序一致性的Zookeeper的其他功能
集群管理
wtxuebc
·
2021-05-26 09:21
zookeeper
zookeeper
分布式
Hadoop之ClouderaManager
基本介绍简单来说,ClouderaManager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具,使得安装集群从几天的时间缩短在几个小时内,运维人员从数十人降低到几人以内,极大的提高
集群管理
的效率
_TIM_
·
2021-05-26 01:59
大数据
大数据组件 -
Ambari
01 简介
大数据组件-
Ambari
01简介是什么?
Ambari
是apache下的一个开源项目,致力于让hadoop
集群管理
更加简单。它开发了丰富的RESTfulAPIs,以及一套直观易用的WebUI管理界面。
雷学委
·
2021-05-24 23:36
大数据
ambari
大数据
[译3] SheepDog
集群管理
后端和双NIC
原文地址SheepDog使用一个
集群管理
后端来管理成员,向成员节点广播消息。目前,sheepdog能够使用LocalDirver,corosync(默认),ZooKeeper和Accord。
AustinPup
·
2021-05-21 08:01
Kafka的核心知识总结
同时使用Zookeeper进行
集群管理
,包括主题的分区信息,分区存放的broker信
服务端开发
·
2021-05-21 02:01
hadoop认识与环境部署(版本2.6.4)
Hadoop其他相关项目:
Ambari
:一个web管理工具;Avro:数据序列化系统;Cassandra:可扩展的无单点失败的多主数据库
4762d2980c91
·
2021-05-17 22:40
kubernetes 概念与(离线)部署(一)
Kubernetes简介:Kubernetes是谷歌开源的容器
集群管理
系统,是Google多年大规模容器管理技术Borg的开源版本,主要功能包括:基于容器的应用部署、维护和滚动升级负载均衡和服务发现跨机器和跨地区的集群调度自动伸缩无状态服务和有状态服务广泛的
魏都青年
·
2021-05-13 13:48
kubernetes
kubernetes
linux
docker
ceph csi 的使用
rook构建一个storageclass即可参考:https://kubevirt.io/2019/KubeVirt_storage_rook_ceph.html本文档说明的是k8s集群连接另一个k8s
集群管理
的
cloudFans
·
2021-05-12 11:24
大规模集群中 Docker 镜像如何分发管理?试试 Uber 刚开源的 Kraken
为了解决遗留Docker注册表堆栈的性能问题,Uber的
集群管理
团队开发了一个开源对等(P2P)Docker注册表kraken。Docker容器是Uber基础设施的基础构建块,但是随
撩课学院
·
2021-05-12 01:50
Hadoop离线搭建(
Ambari
工具)
参考文章:https://my.oschina.net/u/2277929/blog/660748*http://www.jianshu.com/p/debf0e6a3f3b*http://www.jianshu.com/p/6e59df5f2461*https://my.oschina.net/wstone/blog/522165*http://www.ibm.com/developerwork
危大可
·
2021-05-10 21:13
3. [HDP-准备] SSH 集群内免密码登录
1.选择一台服务器作为
Ambari
server,在该机器上生成密钥对,ssh-keygen-trsassh-keygen-trsa截图2.将公钥copy到改集群内其他主机上,ssh-copy-idroot
aries228
·
2021-05-10 17:57
Mongo内置角色解读
Built-InRoles(内置角色):1.数据库用户角色:read、readWrite;2.数据库管理角色:dbAdmin、dbOwner、userAdmin;3.
集群管理
角色:clusterAdmin
阿杰Alex
·
2021-05-10 03:44
Ambari
2.6.2安装Hadoop hbase集群
192.168.1.151hadoop02/192.168.1.152hadoop03/192.168.1.153hadoop04/192.168.1.154hadoop05/192.168.1.155
ambari
server
大道至简非简
·
2021-05-09 20:51
k8s 集群基本概念
k8s集群基本概念一、概述:kubernetes是google开源的容器
集群管理
系统,提供应用部署、维护、扩展机制等功能,利用kubernetes能方便管理跨集群运行容器化的应用,简称:k8s(k与s之间有
jony456123
·
2021-05-08 19:57
kubernetes 权威指南学习第一天 简单了解k8s
1.kubernetes介绍k8s是一个完备的分布式系统支持平台,k8s具有完备的
集群管理
能力,包括多层次的安全防护和准入机制、多租户应用支撑能力、透明的服务注册和服务发现机制、内建智能负载均衡器、强大的故障发现和自我修复能力
宇晨棒棒的
·
2021-05-06 22:39
zookeeper初探
zookeeper是apache基金的一个开源项目,致力于实现高可靠的分布式协调,提供服务解决分布式应用中的以下问题:分布式应用的配置管理
集群管理
统一命名服务分布式状态同步2.应用场景2.1分布式应用配置管理
JALDURIEE
·
2021-05-06 17:18
Day14:项目需求与技术架构
数据采集及存储知识点07:业务流程:数据处理及应用知识点08:技术架构:常用技术选型知识点09:技术架构:基础平台架构知识点10:技术架构:在线教育项目架构知识点11:平台搭建:命令行部署知识点12:平台搭建:
集群管理
工具部署知识点
保护胖丁
·
2021-05-06 17:49
cloudera
hue集群
sqoop
hdfs
大数据
Shell编程快速入门,这一篇就够了【基本语法结合案例】
1.Linux运维工程师:编写Shell程序进行服务
集群管理
。2.Python和JavaEE程序员:编写Shell脚本程序或者是服务器的维护,比如编写一个定时备份数据库的脚本。
软件测试小dao
·
2021-05-05 14:34
功能测试
软件测试
编程
测试工程师
软件测试
shell
编程
功能测试
Namenode HA恢复
背景Hadoop集群使用
Ambari
来进行部署和管理,Hdfs的Namenode本来是HA的,但是某天有一台机器重装之后,不小心把这台机器上的所有数据都清除掉了。
zczhuohuo
·
2021-05-05 10:11
MongoDB---用户管理
角色概览内置角色:1.数据库用户角色:read、readWrite;2.数据库管理角色:dbAdmin、dbOwner、userAdmin;3.
集群管理
角色:clusterAdmin、clusterManager
今天_吃_什么
·
2021-05-04 04:41
Docker
集群管理
方案Kubernetes之部署
本文是Docker网络系列的第三篇,之前两篇文章为:Docker前传之linuxiptables单host下Docker的默认网络配置Docker提倡简单,这也是它较之LXC而大火的一个因素。比如Docker避开了比较难以上手的网络部分,但在被大众接受之后,随之而来的就是Docker的跨主机网络通信问题。如果不借助第三方解决方案,根据之前介绍过的单host下的网络配置,要实现跨主机互相通信,得通过
paulliu
·
2021-05-03 17:10
集群上运行spark
2.独立
集群管理
器(1)spark-submit(jar)向独立
集群管理
器提交应用,需要把spark://master:7077作为主节点参数递给spark-submit。
d33911380280
·
2021-05-03 08:23
ambari
集群安装hdp
接上篇《
ambari
集群搭建详细步骤》说明:
ambari
2.6.5和
ambari
2.7.5的页面不一样集成安装向导GetStarted开始SelectVersion选择版本InstallOptions安装选项
大数据与数据分析sqlboy
·
2021-05-02 15:28
大数据
ambari
大数据
ambari
hdp
centos7下cdh集群报错总结,环境CDH6.3.2+cm6.1,持续更新
之前我的虚拟机用的都是
ambari
搭建的HDP,由于看到网上讲的和朋友讲的企业中用的一般是CDH,且CDH的稳定性和效率也会比较高。所以就在虚拟机上搭建了CDH。
538808
·
2021-05-02 00:30
大数据组件
cloudera
大数据
hdfs
CDH6.3.2
centos7
ambari
集群搭建详细步骤
服务器环境说明2、防火墙设置3、禁用selinux4、配置jdk和mysql驱动5、安装Mysql6、mysql密码操作7、安装httpd服务8、安装ntp9、ntp配置10、时钟同步11、安装yum12、上传
ambari
大数据与数据分析sqlboy
·
2021-05-01 11:05
大数据
ambari
大数据
ambari
环境搭建
elasticsearch学习笔记目录
写在开始的话一、elasticsearch简介1、ES一些名词的解释二、elasticsearch及各种组件的安装三、es索引存储四、搜索查询五、
集群管理
六、其他
linfree
·
2021-04-30 00:27
k8s简介
它是容器
集群管理
系统,是一个开源的平台,可以实现容器集群的自动化部署、自动扩缩容、维护等功能。
Sunshine_洋洋
·
2021-04-30 00:57
ambari
安装,适配任何
ambari
版本
目前大数据集群开源的主要是
ambari
和CDH,下面我来介绍下如何安装
ambari
:一、基础环境插件安装yumcleanallyummakecache升级opensslyuminstall-yopensslyum-yinstallruby
会飞的蜗牛66666
·
2021-04-27 08:33
Redis3.2.4集群搭建
cluster特性:1):节点自动发现2):slave->master选举,集群容错3):Hotresharding:在线分片4):进群管理:clusterxxx5):基于配置(nodes-port.conf)的
集群管理
kingsonCai
·
2021-04-27 05:53
Docker——Docker Swarm(阿里云搭建Swarm集群)
集群准备工作阿里云镜像加速创建主节点Raft协议集群里部署项目(扩缩容)概念总结Swarm的特点服务副本与全局服务DockerStackSwarm的一些关键概念什么是Swarm使用Swarm构建嵌入在Docker引擎中的
集群管理
和编排功能
stan Z
·
2021-04-26 17:06
Docker
docker
linux
docker
swarm
Kubernetes 配置Pod和容器(五)应用资源配额和限制
场景
集群管理
员操作多用户团队的集群,
集群管理
员希望可以控制特定集群中可以消耗资源的总量,以提升集群的共享和控制成本。限制运行pod的计算资源量限制持久卷声明
YiQinGuo
·
2021-04-25 06:05
HDFS概述
的分块与副本机制分块机制副本机制主从架构Client功能NameNode功能DataNode功能数据写入流程数据读取流程启动方式单进程访问分类启动全部启动文件管理命令Client格式列举上传下载删除创建目录查看其它
集群管理
命令
杀智勇双全杀
·
2021-04-24 08:40
云计算大数据
笔记
hadoop
linux
hdfs
分布式
集群
复杂的IT企业交付模式Wise2C的到来可持续集成
容器服务的作用,当我们使用该服务,将无需安装、运维、扩展
集群管理
基础设施,只需进行简单的API调用,便可启动和停止Docker应用程序,查询集群的完整状态,以及
方舟8
·
2021-04-24 04:21
SLURM 资源管理系统
简介SLURM(SimpleLinuxUtilityforResourceManagement)是一种可用于大型计算节点集群的高度可伸缩和容错的
集群管理
器和作业调度系统,被世界范围内的超级计算机和计算集群广泛采用
自可乐
·
2021-04-21 13:36
docker-swarm集群部署
在技术选型swarm的时候,因为时间紧,任务重,所以选择比较简单的方式完成
集群管理
.swarm我们通过简单的配置实现
集群管理
,具体的方法可以看参考主要是通过token的方式.场景我们需要创建一个测试用例
一笑yo
·
2021-04-20 00:55
【Linux 6】通过Shell编程实现定时备份数据库
一、为什么要学习Shell编程1、Linux运维工程师在进行服务器
集群管理
时,需要编写Shell程序进行服务器管理。
GooReey
·
2021-04-17 21:07
Linux
大数据技术体系分类
一、一、目录系统平台(Hadoop、CDH、HDP)监控管理(CM、Hue、
Ambari
、Dr.Elephant、Ganglia、Zabbix、Eagle)文件系统(HDFS、GPFS、Ceph、GlusterFS
七_seven
·
2021-04-14 23:35
Linux Shell编程入门
为什么要学习Shell编程Linux运维工程师在进行服务器
集群管理
时,需要编写Shell程序来进行服务器管理。
BlueSkyBlue
·
2021-04-13 22:31
K8s介绍以及运行架构
Kubernetes(k8s)是Google开源的容器
集群管理
系统。
TimLi_51bb
·
2021-04-13 21:56
ubuntu14离线安装
ambari
(一、搭建本地镜像库)
因环境限制不能访问外网,在ubuntu14上安装
ambari
,所以采用离线方式搭建,特此记录安装httpd服务(httpd依赖apr、apr-util、prce三个服务)名称下载地址aprhttp://
无忧默言
·
2021-04-12 23:33
状态机引擎选型
在电商场景(订单、物流、售后)、社交(IM消息投递)、分布式
集群管理
(分布式计算平台任务编排)等场景都有大规模的使用。状态机的要素状态机可归纳为4个要素,即现态、条件、动作、次态。
·
2021-04-09 00:23
fsmjavaspring
Kubernetes 前世今生( 附学习思维导图 )
虽然Docker已经很强大了,但是在实际使用上还是有诸多不便,比如
集群管理
、资源调度、文件管理等等。
·
2021-04-08 19:46
Kubernetes 前世今生( 附学习思维导图 )
虽然Docker已经很强大了,但是在实际使用上还是有诸多不便,比如
集群管理
、资源调度、文件管理等等。
·
2021-04-08 13:26
zookeeper
分布式应用程序可以基于Zookeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、
集群管理
、Master选举、分布式锁和分布式队列等功能。 Zo
luoyuan323
·
2021-04-07 18:09
java
Elasticsearch生态圈
Elasticsearch生态圈Elasticsearch主要功能1.海量数据的分布式存储和
集群管理
1.服务和数据的高可用,水平扩展2.近实时搜索,性能卓越1.结构化/全文/地理位置/自动完成3.海量数据的近实时分析
·
2021-04-01 12:20
mysql
Kubernetes
集群管理
工具 K9S
通常情况下,我们自行部署k8s集群之后,要么使用kubectl命令做
集群管理
,要么使用bashbroad的UI管理界面来管理集群。
·
2021-04-01 12:19
Elasticsearch生态圈
Elasticsearch生态圈Elasticsearch主要功能1.海量数据的分布式存储和
集群管理
1.服务和数据的高可用,水平扩展2.近实时搜索,性能卓越1.结构化/全文/地理位置/自动完成3.海量数据的近实时分析
·
2021-04-01 12:25
mysql
Kubernetes
集群管理
工具 K9S
通常情况下,我们自行部署k8s集群之后,要么使用kubectl命令做
集群管理
,要么使用bashbroad的UI管理界面来管理集群。
·
2021-04-01 12:53
监控系统负载(load average)、CPU和内存使用情况的工具推荐——WGCLOUD
WGCLOUD,支持高并发高性能,核心模块包括:主机监控,ES
集群管理
,CPU监控,CPU温度监控,内存监控,数据监控,docker监控,网络流量监控,服务接口心跳检测,应用进程管理,磁盘IO监控,系统负载监控
王逅逅_f6c0
·
2021-03-31 10:08
PyTorch 大杀器:用 AdaptDL 优化 GPU 集群中的 EDL
它支持多租户
集群管理
,可以平衡模型训练等待及完成时间,能够提高资源利用率。训练深度
·
2021-03-30 17:12
上一页
30
31
32
33
34
35
36
37
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他