Cloudera Hadoop(cdh5.1.0)平台搭建1

1.系统及版本选择

Centos6.5 64位

cm5.1.0  cdh5.1.0

Cloudera版本进行hadoop平台搭建维护,安装简单,系统稳定,维护简单

Apache版本的系统不稳定,安装繁琐费时

2.系统安装(http://www.jianshu.com/p/4e6fb2bdfa51)

3.安装CM

(1)下载所需文件

1. 下载rpm包:

http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.1.0/RPMS/x86_64/

Cloudera Hadoop(cdh5.1.0)平台搭建1_第1张图片

2.下载bin文件:http://archive.cloudera.com/cm5/installer/5.1.0/

Cloudera Hadoop(cdh5.1.0)平台搭建1_第2张图片

下载好的文件放入创建的/opt/soft/cm文件夹下

通过命令:mkdir -p /opt/soft/cm (图中为相对路径) 创建文件夹

Cloudera Hadoop(cdh5.1.0)平台搭建1_第3张图片

通过 rz命令 上传本地文件到linux

Cloudera Hadoop(cdh5.1.0)平台搭建1_第4张图片
上传后的结果

3.下载repo源文件:cloudera-manager.repo

 通过命令:wget +地址 的方式下载

wget http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo

Cloudera Hadoop(cdh5.1.0)平台搭建1_第5张图片

修改repo文件中的CM版本为我们需要的,这边为5.1.0

通过命令:vi cloudera-manager.repo 进行修改

Cloudera Hadoop(cdh5.1.0)平台搭建1_第6张图片
未改动前
Cloudera Hadoop(cdh5.1.0)平台搭建1_第7张图片
改动后

拷贝repo文件到所有节点的/etc/yum.repos.d目录下

通过命令: mv ./cloudera-manager.repo /etc/yum.repos.d

Cloudera Hadoop(cdh5.1.0)平台搭建1_第8张图片

验证下载源中的文件是否匹配

通过命令:

yum clean all   (图片中没有先清空yum缓存,会造成验证失败)

yum list >aa.txt   (解决yum list|grep cloudera慢,先将list内容写入aa.txt中)

cat aa.txt|grep cloudera (cat aa.txt过滤出cloudera的内容)

如果不匹配,可以先清空yum缓存 通过命令 yum clean all(可以解决大部分不匹配问题)

Cloudera Hadoop(cdh5.1.0)平台搭建1_第9张图片

(2)安装rpm包

通过命令:sudo yum install -y ./*rpm (命令中为当前路径下)

Cloudera Hadoop(cdh5.1.0)平台搭建1_第10张图片

提示安装rpm包以及相关的依赖包

当出现complete!说明安装完成,安装过程一般不会报错,需要联网安装依赖包

运行bin文件 安装server

一直下一步

Cloudera Hadoop(cdh5.1.0)平台搭建1_第11张图片

然后几分钟后安装成功的CM界面应该是下图所示

Cloudera Hadoop(cdh5.1.0)平台搭建1_第12张图片

到这里CM的安装过程就结束蓝,接下来要安装cdh5了

Cloudera Hadoop(cdh5.1.0)准备工作:http://www.jianshu.com/p/0a323137fe4f

你可能感兴趣的:(Cloudera Hadoop(cdh5.1.0)平台搭建1)