E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
AMBARI
ambari
_HDP之mapreduce参数调优
一、基础环境基础环境:centos6.8
ambari
版本:2.2.1HDP版本:2.3.2.0HDP的默认配置文件:(本文以
ambari
-2.2.1为例):配置文件目录:/usr/hdp/2.3.2.0
陌小铠
·
2017-03-29 16:41
HDP和CDH
ambari
_HDP之mapreduce参数调优
一、基础环境基础环境:centos6.8
ambari
版本:2.2.1HDP版本:2.3.2.0HDP的默认配置文件:(本文以
ambari
-2.2.1为例):配置文件目录:/usr/hdp/2.3.2.0
cy309173854
·
2017-03-29 16:00
mapreduce
ambariHDP
MR参数调优
MR参数说明
Ambari
卸载shell
/bin/bash#Program:#uninstall
ambari
automatic#History:#2014/01/
[email protected]
h_1_y_m
·
2017-03-28 17:00
ambari
Hadoop建设工具
Ambari
的安装部署及完整使用(五)——
Ambari
使用之集群卸载
五.
Ambari
使用——卸载集群方式一:
ambari
本身并没有提供基于web管理端的自动化卸载的功能。
ambari
web管理端的操作更多的是实现服务或是主机的扩展(无法完全清除服务和主机)。
BalaBalaYi
·
2017-03-28 13:39
hadoop
Ambari
2.4 安装教程,另附配置 haodoop lzo
2.在集群内主机安装一台MySQLServer(MySQL为选装,
Ambari
默认的数据库为PostgreSQL)1.MySQL配置创建
ambari
-server 的数据库以及连接用户,且授权# mysql
Professor哥
·
2017-03-27 17:05
hadoop
HDP
ambari
大数据
Hadoop家族学习路线图
主要介绍Hadoop家族产品,常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,
Ambari
,Chukwa,新增加的项目包括,YARN,Hcatalog
csy_insist
·
2017-03-24 13:27
大数据
hadoop
Hadoop
【Hadoop】
Ambari
架构详解(转)
Ambari
介绍
Ambari
是Hadoop分布式集群配置管理工具,是由hortonworks主导的开源项目,它已经成为了apache基金会的开源项目,已经成为Hadoop运维系统中的得力助手。
mikeliuy
·
2017-03-23 16:13
Hadoop建设工具
Ambari
的安装部署及完整使用(四)——
Ambari
使用之集群建立
四.
Ambari
使用——建立集群登录并创建集群1)以管理员登录
ambari
-server,用户名和密码默认为:admin/admin2)点击【LaunchInstallWizard】开始安装集群 3)给集群命名
BalaBalaYi
·
2017-03-22 15:15
hadoop
Hadoop建设工具
Ambari
的安装部署及完整使用(三)——部署安装
三.部署安装1.安装
Ambari
-server在线安装1)在hortonworks公共资源库,选择
ambari
仓库地址并下载wgethttp://s3.amazonaws.com/public-repo
BalaBalaYi
·
2017-03-22 15:39
hadoop
Hadoop建设工具
Ambari
的安装部署及完整使用(二)——准备工作
二.准备工作关于linux环境创建,yum源配置等基础系统搭建过程就不在此赘述了。以下内容完全是基于centos7环境,root用户。1.安装JAVA环境1)下载jdk套件,此处作者使用的是:jdk1.8.0_111(选择合适的稳定版本即可)oracle官方下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html
BalaBalaYi
·
2017-03-22 15:03
hadoop
Hadoop建设工具
Ambari
的安装部署及完整使用(一)——介绍
一.介绍(请详见百度百科等链接)1.Hadoop介绍Hadoop原本来自于谷歌一款名为MapReduce的编程模型包。谷歌的MapReduce框架可以把一个应用程序分解为许多并行计算指令,跨大量的计算节点运行非常巨大的数据集。Hadoop这个名字不是一个缩写,而是一个虚构的名字。该项目的创建者,DougCutting解释Hadoop的得名:“这个名字是我孩子给一个棕黄色的大象玩具命名的。我的命名标
BalaBalaYi
·
2017-03-22 09:35
hadoop
Ambari
安装,配置和部署Hadoop集群
使用浏览器中运行的
Ambari
安装向导来安装,配置和部署集群,如下所示:1.登录到Apache
Ambari
:启动
Ambari
服务后,使用Web浏览器打开
Ambari
Web将浏览器指向http://:8080
狮锅艺
·
2017-03-20 10:53
Ambari
Presto集成到
Ambari
介绍
在
Ambari
中集成Presto,能在
Ambari
UI中方便地安装部署Presto到集群,并能方便修改Presto相关配置。
张峰
·
2017-03-17 14:09
Ambari
常用的 REST API 介绍
Ambari
借鉴了很多成熟分布式软件的API设计。RestAPI就是一个很好地体现。通过
Ambari
的RestAPI,可以在脚本中通过curl维护整个集群。
程裕强
·
2017-03-10 13:07
大数据
Ambari运维
centos6.5下安装配置hudson
mirror.bit.edu.cn/apache/maven/maven-3/3.3.9/binaries/apache-maven-3.3.9-bin.tar.gz```####安装```[root@
ambari
shouhou2581314
·
2017-03-09 16:18
hudson
日常总结
Ambari
postgres数据库操作
控制台默认的用户和数据库是postgresbash-4.2$psqlcouldnotchangedirectoryto"/root"psql(9.2.18)Type"help"forhelp.postgres=#3.进入
ambari
程裕强
·
2017-03-09 10:00
Linux
Ambari运维
【Hbase异常】记一次hbase集群修复过程
Hbase异常hbase集群使用
ambari
安装,机房突然断电,重启后,发现hbase写不进数据,但使用list命令可以获取的表,scan命令也可以获取到数据。
帅胖子
·
2017-03-03 09:18
异常汇总
centos6.5下安装
ambari
Apache
Ambari
是一种基于Web的工具,支持ApacheHadoop集群的供应、管理和监控。
shouhou2581314
·
2017-03-02 13:49
hadoop
hadoop
基于Apache
Ambari
搭建Hadoop大数据平台
基于Apache
Ambari
搭建Hadoop大数据平台作者:雨水/家辉日期:2017年2月28日CSDN博客:http://blog.csdn.net/gobitan摘要:对于大数据的初学者来说,搭建一个
gobitan
·
2017-02-28 23:58
Ambari
和ClouderaManager主要不同对比
打算对新建的hadoop集群使用管理工具,列了以下主要的不同点:主要的不同点apache
Ambari
ClouderaManagerExpress(免费版)配置版本控制和历史记录支持不支持二次开发支持不支持集成支持
程序优化
·
2017-02-28 11:00
Ambari
快速部署Hadoop大数据环境
Ambari
是什么
Ambari
跟Hadoop等开源软件一样,也是ApacheSoftwareFoundation中的一个项目,并且是顶级项目。
陌小铠
·
2017-02-27 11:01
HDP和CDH
Ambari
快速部署Hadoop大数据环境
Ambari
是什么
Ambari
跟Hadoop等开源软件一样,也是ApacheSoftwareFoundation中的一个项目,并且是顶级项目。
cy309173854
·
2017-02-27 11:00
hadoop
大数据
Ambari-HDP
Ambari
安装freeIPA
环境:
Ambari
-2.4.2、HDP-2.5.3、CentOS6.5freeIPA包含了Kerberos、ldap等服务,经调研感觉可以用它来做认证和统一用户管理,用户都存在freeIPA的ldap中
光于前裕于后
·
2017-02-22 11:30
大数据动物园
ambari
删除脚本 重新安装
#1.删除hdp.repo和hdp-util.repocd /etc/yum.repos.d/rm -rf hdp*rm -rf HDP*#rm -rf
ambari
*#2.删除安装包#用yum list
王上京小伙
·
2017-02-09 14:10
ambari删除脚本
重新安装
大数据及问题
Kerberos与Ranger、KMS整合
环境:
Ambari
-2.4.2、HDP-2.5.3、CentOS6.51.之前用的是HDP2.4,装上Kerberos后Ranger的策略就失效了,KMS对秘钥也无法管理(WEB端),总感觉是因为哪里没配置好
光于前裕于后
·
2017-02-07 11:15
Hadoop
大数据动物园
ambari
集群管理安装→ssh无密登录设置
安装常用命令:查看防火墙状态:firewall_cmd–state关闭防火墙:systemctlstopfirewalld.service禁止防火墙开机启动:systemctldisablefirewalld.service生成秘钥:ssh-keygen–trsa–P“”远程发送文件:scp本地文件路径user@ip:~/目标路径scp创建文件夹:mkdir查看IP地址:ipaddrCentOS7
微信搜-毕设在线
·
2017-01-23 11:54
大数据
Ambari
——大数据平台的搭建利器之进阶篇[配置spark]
有了
Ambari
,这些都不再是难题前言本文适合已经初步了解
Ambari
的读者。对
Ambari
的基础知识,以及
Ambari
的安装步骤还不清楚的读者,可以先阅读基础篇文章《Amb
奔跑-起点
·
2017-01-18 10:17
hadoop
ambari
大数据相关技术
大数据集群搭建主要基于
ambari
来同一管理监控集群主要安装步骤:准备机器,修改hostname,固定ip等机器间免密码登录host机器开启httpd服务,准备本地仓库安装
ambari
setup访问页面
哎哟喂喽
·
2017-01-15 21:20
大数据相关技术
大数据集群搭建主要基于
ambari
来同一管理监控集群主要安装步骤:准备机器,修改hostname,固定ip等机器间免密码登录host机器开启httpd服务,准备本地仓库安装
ambari
setup访问页面
哎哟喂喽
·
2017-01-15 21:20
使用
Ambari
来部署hadoop集群(搭建内网HDP源)
规划OS:centos6.5
Ambari
-yumrepo10.10.10.20公网
Ambari
-server10.10.10.10内网hadoop-master110.10.10.1内网hadoop-master210.10.10.2
酱酱酱子啊
·
2017-01-09 14:08
hadoop
大数据
ambari
Hadoop
Ambari
服务依赖关系图生成脚本
1.生成服务依赖关系#!/usr/bin/python importsys importcommands importjson defgenDependString(ip): url="curl--useradmin:admin-H'X-Requested-By:admin''http://{0}:8080/api/v1/stacks/HDP/versions/2.2/services?fie
Florian
·
2017-01-07 21:53
Ambari
安装与集群配置
参考网址:http://www.ibm.com/developerworks/cn/opensource/os-cn-bigdata-
ambari
/index.htmlhttp://docs.hortonworks.com
程裕强
·
2017-01-03 18:45
大数据
Ambari运维
ambari
2.0.0升级到2.4.1
官方升级文档:http://docs.hortonworks.com/HDPDocuments/
Ambari
-2.4.0.1/bk_
ambari
-upgrade/content/adding_grafana_to_
ambari
_metrics.html0
王上京小伙
·
2017-01-03 09:52
大数据及问题
HDP学习--YARN Component Failure
三、修改
Ambari
中的故障检测行为四、ResourceManager的设置检查为了检查各组件是否存活,定期巡检,并处理故障组件。五、N
chbxw
·
2016-12-22 23:27
#
HDP学习
HDP学习--YARN Resource Management(02)
本节介绍通过UI,命令行,配置文件,YARNAPI管理YARN资源:
Ambari
UIResourceManagerUICommandlineandmanualconfigurationYARNAPI一、
chbxw
·
2016-12-22 22:05
#
HDP学习
Ambari
删除Ranger
想把Ranger删了却发现
ambari
web上没有删除的方法搜了下发现
ambari
提供了RestAPI,不过删了Service后web中没了,但是Service还在机器上,需要手工的到每个机器卸载(例如在每个机器执行
光于前裕于后
·
2016-12-20 17:08
大数据动物园
Ambari
删除Ranger
想把Ranger删了却发现
ambari
web上没有删除的方法搜了下发现
ambari
提供了RestAPI,不过删了Service后web中没了,但是Service还在机器上,需要手工的到每个机器卸载(例如在每个机器执行
光于前裕于后
·
2016-12-20 17:08
大数据动物园
HDP学习--HDFS Storage(上)
学习HDFS1、了解分布式文件系统(HDFS)的属性2、了解HDFS的访问方法3、知道所有者及组用户的角色,以及文件和目录的访问权限4、使用HDFS命令或
Ambari
FilesView管理文件和目录5、
chbxw
·
2016-12-19 18:21
hdp
ambari
Confirm Hosts 部署错误问题
hdp
ambari
ConfirmHosts部署错误问题ERROR:Bootstrapofhostc6401.
ambari
.apache.orgfailsbecausepreviousactionfinishedwithnon-zeroexitcode
diannao720
·
2016-12-17 16:59
hadoop
使用
Ambari
给HDP集群安装Kerberos
环境:Amabri2.2.2、HDP2.4.2、CentOS6.5以下没有特殊说明的操作都是在ws1es机器上进行的:1.在集群中找台机器安装KDC#这台机器自带了kerberosclient的两个包,需要先升级再安装server[root@ws1essysconfig]#rpm-qa|grepkrbkrb5-workstation-1.10.3-10.el6_4.6.x86_64krb5-lib
光于前裕于后
·
2016-12-09 10:05
Hadoop
大数据动物园
使用
Ambari
给HDP集群安装Kerberos
环境:Amabri2.2.2、HDP2.4.2、CentOS6.5以下没有特殊说明的操作都是在ws1es机器上进行的:1.在集群中找台机器安装KDC#这台机器自带了kerberosclient的两个包,需要先升级再安装server[root@ws1essysconfig]#rpm-qa|grepkrbkrb5-workstation-1.10.3-10.el6_4.6.x86_64krb5-lib
光于前裕于后
·
2016-12-09 10:05
Hadoop
大数据动物园
快速的部署Hadoop,Hbase和Hive
之前的有点忘记了,这里在云笔记拿出来再玩玩.看不懂的可以留言大家可以尝试下
Ambari
来配置Hadoop的相关环境快速的部署Hadoop,Hbase和Hive等并提供Ganglia和Nagios的监控功能
HT_Jonson
·
2016-11-20 14:01
Ambari
生成的hive配置文件位置
etc/hive/2.3.0.0-2557/0/conf.server/hive-site.xml位置http://osdir.com/ml/general/2015-06/msg07465.html
ambari
shouldupdatethehive-site.xml.Doesrestartingthehiveservicehelp
hua_ed
·
2016-11-03 12:06
hive
修改ranger ui的admin用户登录密码踩坑小记
的配置里把admin_password改成一样的,否则hdfs的namenode在使用admin时启动不起来,异常如下:Traceback(mostrecentcalllast):File"/var/lib/
ambari
-agent
程序优化
·
2016-10-27 10:00
使用
ambari
搭建Hadoop平台
1.操作系统CentoOSServerwithGUI(有GUI,有浏览器*
ambari
基于浏览器*推荐lateststableversion),安装操作系统前先将bios设置Default一下,然后将legacy
weixin_30518397
·
2016-10-26 09:00
大数据
java
操作系统
查看
Ambari
自动配置的hive与spark sql元数据库
我用
Ambari
搭建的HDP集群,顺便装了hive和spark客户端(勾上即可),有时间我会写一篇完全离线安装
Ambari
并搭建HDP集群的博客,敬请期待~先找下spark配置文件在哪[root@ws1dn3
光于前裕于后
·
2016-10-13 15:05
Spark
大数据动物园
Hive
Kafka多个broker 启动失败
启动失败大家都知道Kafka可以部署多个broker,在部署多台broker时,需要注意一个问题:brokerid不能重复,否则会导致broker启动后因为brokerid冲突而只能启动一个broker.
Ambari
biggeng
·
2016-10-08 16:34
Apache
Ambari
简介
Ambari
的作用
Ambari
服务器是对集群做修改的主要接口,配置文件由它维护,
Ambari
保证所有节点上的配置文件是相同的,每一次服务的配置更改时会被自动重新分发到所有的几点,整个集群(10-4000
狮锅艺
·
2016-10-01 15:46
Ambari
Hadoop和大数据:60款顶级开源工具
相关链接:http://hadoop.apache.org2.
Ambari
作为Hadoop生态系统的一部分,这个Apache项目提供了基于Web的直观界面,可用于配置、管理
doitmyway
·
2016-09-20 16:52
大数据
大数据相关60款顶级开源工具
相关链接:http://hadoop.apache.org2.
Ambari
作为Had
chuhui1765
·
2016-09-18 15:00
上一页
20
21
22
23
24
25
26
27
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他