指标相关部署文档

1. common
2. zookeeper
3. hadoop
4. hbase
5. opentsdb
6. 指标监控系统部署

common：

IP 角色
192.168.1.80 master
192.168.1.81 slave1
192.168.1.82 slave2

1.将上述映射 添加到host

$ vi /etc/hosts

2.ssh无密码登陆

1.生成秘钥
2.将公钥添加到每个host的authorized_keys

$ ssh-keygen -t rsa             
$ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys 

$ scp authorized_keys master:/root/.ssh/
$ scp authorized_keys slave1:/root/.ssh/
$ scp authorized_keys slave2:/root/.ssh/

zookeeper

说明

存放相关数据目录：${zookeeper_data}
存放log日志目录：${zookeeper_log}
解压目录：${zookeeper_home}

1.下载，解压

2.配置

1. 获取zoo.cfg

cd ${zookeeper_home}
cp zoo_sample.cfg zoo.cfg

2. 修改zoo.cfg

dataDir=${zookeeper_data}
dataLogDir=${zookeeper_log}
clientPort=2181
//
server.0=master:2888:3888
server.1=slave1:2888:3888
server.2=slave2:2888:3888

3. 新建myid 文件

vi ${zookeeper_data}/myid 
//写入数字x,该数字与配置文件中的server.x 有关，
//例如 本台服务器为master，则在myid中填入0即可

3.相关命令

1. 启动

${zookeeper_home}/bin/zkServer.sh start 

2. 查看状态

${zookeeper_home}/bin/zkServer.sh status

3. bin/zkServer.sh stop

${zookeeper_home}/bin/zkServer.sh stop

hadoop

1.下载，解压

2.配置

1. core-site.xml

        hadoop.tmp.dir
        file://${hadoop_data}
    
    
        fs.defaultFS
        hdfs://master:9000
    

2. hdfs-site.xml

   
        dfs.name.dir
        ${hadoop_data}/name
    
    
        dfs.data.dir
        ${hadoop_data}/data
    
    
        dfs.replication
        3
    

3. hadoop-env.sh
   添加java的软连接到sbin里面 或者

export JAVA_HOME=${java_home}

4. 修改slaves文件

vi ${hadoop_home}/etc/hadoop/slaves
//--------
master
slave1
slave2

5. 分发同步包（将整个hadoop安装目录都拷贝到所有slave服务器：）

 scp -r ${hadoop_home} slave1:${hadoop_home}
 scp -r ${hadoop_home} slave2r:${hadoop_home}

3.相关命令

1. 启动

${hadoop_home}/sbin/start-all.sh
//
//第一次启动前，需要执行,以后不可以执行
${hadoop_home}/bin namenode -format

2. 停止

${hadoop_home}/sbin/stop-all.sh

hbase

1.下载，解压

2.配置

1. hbase-env.sh

export JAVA_HOME=${java_home}
export HBASE_CLASSPATH=${hadoop_home}

2. hbase-site.xml

    hbase.rootdir
    hdfs://master:9000/hbase

  
  
    hbase.cluster.distributed
    true
  
  
 
    hbase.zookeeper.quorum
   master,slave1,slave2
 
 
 
    hbase.tmp.dir
    /software/tmp/hbase/tmp



  hbase.master.info.port
  60010

3. 修改 regionservers

vi ${hbase_home}/conf/regionservers
//
master
slave1
slave2

4. 分发同步包（将整个hbase安装目录都拷贝到所有slave服务器：）

 scp -r ${hbase_home} slave1:${hbase_home}
 scp -r ${hbase_home} slave2r:${hbase_home}

3.相关命令

1. 启动

${hbase_home}/bin/start-hbase.sh

2. 停止

${hbase_home}/bin/stop-hbase.sh

opentsdb

1.下载，安装

rpm -ivh xxx.rpm

2.配置

1. 导入表到hbase

env COMPRESSION=NONE HBASE_HOME=${hbase_home} /usr/share/opentsdb/tools.create_table.sh

2. 配置config

vi xxx

tsd.http.cachedir - 临时文件的路径
tsd.http.staticroot - 找到的静态GUI文件的路径./build/staticroot,后台管理用到
tsd.storage.hbase.zk_quorum - 如果HBase和Zookeeper未在同一台计算机上运行，请在此处指定主机和端口。

3.相关命令

1. 启动

service opentsdb start

2. 关闭

seervice opentsdb stop

指标监控系统部署

1.编译 打成jar包

mvn clean package

(打包前，需要自己修改配置参数)

2.运行

nohup java -jar xxxx.jar &