新购买的服务器搭建大数据集群之前的准备工作

1、 设置时区,统一设置为东8区,手动同步时间(hbase对集群服务器之间时间要求比较严格)

   date -R   ##查看时区时候是东八区时间
   date -s 'hh:mm:ss'   #设置相应的时间
   clock -w     #保存时钟,将时间写入系统硬盘,永久有效

2、 检查防火墙是否关闭,并将防火墙设置为永久关闭

(1)检查防火墙状态

    service iptables status  #检查防火墙状态
    service iptables stop   #关闭iptables

(2)永久关闭

    chkconfig iptables off #重新开机后永久有效,提示:必须先临时关闭,然后才能永久关闭

(3) 检查是否成功关闭

chkconfig --list iptables 
或者 service iptables status

3、 设置主机名以及IP,主机名主节点设置为master,子节点slave1-slaveN

    修改主机名在/etc/sysconfig/network,重启后永久生效
    修改集群中主机名与IP的映射关系: /etc/hosts

4、 SSH免密码登陆设置,双向

    ssh-keygen   #产生本机的公钥
    ssh-copy-id   {ip|hostname} #将公钥分发给其他机器

5、 修改linux的最大文件打开数量

修改linux的nofile(路径:/etc/security/limits.conf;值:1024000)以及noproc(路径:/etc/security/limits.d/90-nproc.conf;值:root soft nproc unlimited)

6、 升级glibc到2.14

tar -zxvf glibc-2.14.tar.gz
cd glibc-2.17
mkdir build
cd build
../configure --prefix=/usr --disable-profile --enable-add-ons --with-headers=/usr/include --with-binutils=/usr/bin  
make && make install

7、 安装jdk,配置环境变量

略…


感悟:自身搭建集群的一点感悟,不完整部分欢迎补充;

你可能感兴趣的:(大数据技术,集群)