版权声明:本文为博主原创文章,未经博主允许不得转载,该博客仅用于个人学习,欢迎大家互相交流讨论 。
flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(比如文本、HDFS、Hbase、KAFKA等)的能力 。
安装操作笔记:
1 . Flume下载
http://www.apache.org/dyn/closer.cgi/flume/1.5.0/apache-flume-1.5.0-bin.tar.gz
2.拷贝apache-flume-1.5.0-bin.tar.gz 到/home/Hadoop
cp apache-flume-1.5.0-bin.tar.gz /home/Hadoop
3. 解压缩
cd /home/Hadoop
tar –xvf apache-flume-1.5.0-bin.tar.gz
4. CentOS 6.5 下安装 Sun JDK 1.7
cd /opt
cp /home/ecommerce/Desktop/jdk-7u80-linux-x64.tar.gz .
tar -zxvf jdk-7u80-linux-x64.tar.gz
ln -s /opt/jdk1.7.0_80/bin/java /sbin/java
echo "export JAVA_HOME=/opt/jdk1.7.0_80" >/etc/profile.d/java_env.sh &&echo "export JRE_HOME=/opt/jdk1.7.0_80/jre" >>/etc/profile.d/java_env.sh && echo "export CLASSPATH=.:\$JAVA_HOME/lib:\$JRE_HOME/lib:\$CLASSPATH">> /etc/profile.d/java_env.sh && echo "exportPATH=.:\$JAVA_HOME/bin:\$JRE_HOME/bin:\$PATH" >>/etc/profile.d/java_env.sh
chmod +x /etc/profile.d/java_env.sh
验证是否安装JDK成功:
[root@localhost opt]# source /etc/profile.d/java_env.sh
[root@localhost opt]# java -version
java version "1.7.0_80"
Java(TM) SE Runtime Environment (build 1.7.0_80-b15)
Java HotSpot(TM) 64-Bit Server VM (build 24.80-b11, mixed mode)
5. 修改flume配置文件,主要是JAVA_HOME变量设置
[[email protected]]# cd conf
[root@localhost conf]# cpflume-env.sh.template flume-env.sh
[root@localhost conf]# viconf/flume-env.sh
# Enviroment variables can be sethere.
JAVA_HOME= /opt/jdk1.7.0_80
6.验证Flume是否安装成功
[[email protected]]# pwd
/home/hadoop/apache-flume-1.5.0-bin
[[email protected]]# cd bin
[root@localhostbin]# ls
flume-ng
[root@localhostbin]# flume-ng version
Flume1.5.0
Sourcecode repository: https://git-wip-us.apache.org/repos/asf/flume.git
Revision:8633220df808c4cd0c13d1cf0320454a94f1ea97
Compiledby hshreedharan on Wed May 7 14:49:18PDT 2014
Fromsource with checksum a01fe726e4380ba0c9f7a7d222db961f
[root@localhostbin]#
出现上面信息表示安装成功了。