Impala学习笔记(一)CDH5.4.0安装

鲁春利的工作笔记,好记性不如烂笔头


Impala是Cloudra公司发布的实时查询开源项目,基于Hive但使用内存进行计算,是使用CDH的首选PB级大数据实时查询分析引擎。


Impala的安装方式有两种,CM方式和手动安装,手动安装比较麻烦,需要额外的步骤验证与其他组件的交互,这里采用CM的方式安装。


0、扩展VM虚拟机空间

原来给虚拟机分配了10G的硬盘空间,用来安装和测试Hadoop相关的框架,但是下载了CDH之后忽然感觉10G的空间好小,需要扩容。

a、选中需要扩容的主机-->虚拟机-->设置-->硬盘(SCSI)-->实用工具-->扩展

wKiom1aObUqgM4jAAAEt4pxp8Ho961.jpg

b、登录到虚拟机查看当前情况

[root@nnode ~]# df -h
Filesystem      Size  Used Avail Use% Mounted on
/dev/sda2       8.6G  5.1G  3.1G  63% /
tmpfs           935M     0  935M   0% /dev/shm
/dev/sda1       291M   39M  238M  14% /boot
.host:/         146G   79G   68G  54% /mnt/hgfs    # 这是我的共享目录
[root@nnode ~]#

c、创建分区



1、安装准备

CM当前最新版本为5.5.1,这里安装CM5.4.0和CDH5.4.0。

http://www.cloudera.com/content/www/en-us/downloads.html

在该网站能够找到CM和CDH的下载链接,下载时选定了相应的版本后,会有安装的帮助信息。


安装CM可以使用在线安装和离线安装两种方式,在线安装也需要将基础安装包下载到本地再进行安装,安装过程中自动下载需要安装的软件,但对于带宽要求较高,由于国内的网络环境下载境外的资源时容易受到限制,影响安装速度,可以通过在本地配置yum源进行安装。


http://archive.cloudera.com/cm5/redhat/6/x86_64/cm/5.4.0/

实际需要使用的文件为RPMS/x86_64目录下的文件:

wKiom1aNMNGh9u1oAAQj362LaEE727.jpg

http://archive.cloudera.com/cdh5/parcels/

wKiom1aNNtjC16VoAAYZgj2p_q0919.jpg


2、yum源配置


3、CM安装

http://archive.cloudera.com/cm5/installer/5.4.0/

wKiom1aNMPXAwoJHAACp5R6Tdsk050.jpg


4、CDH安装


5、Hive安装


6、Impala安装





你可能感兴趣的:(impala,学习笔记)