HADOOP集群搭建实战

参考《史上最详细的hadoop环境搭建》https://blog.csdn.net/hliq5399/article/details/78193113

参考《单机部署》https://www.cnblogs.com/ee900222/p/hadoop_1.html

参考《超详细单机版搭建hadoop环境图文解析》https://blog.csdn.net/chongxin1/article/details/76105472

参考(2012年)http://www.cnblogs.com/end/archive/2012/08/13/2636645.html

参考《hadoop集群配置中需要注意到问题》https://www.cnblogs.com/JaneZSS/p/6132349.html

硬件环境:

一、Linux环境安装

      第一步,下载安装VMware,配置Wmware  NAT网络(虚拟机和宿主机之间通讯)

                 安装Linux系统时提示“已在 BIOS/固件设置中禁用 Intel VT-x,或主机自更改此设置后从未重新启动”,解决:进入BIOS--Advanced--Virtualiation Technology将disaled设置为enabled即可,参考http://blog.sina.com.cn/s/blog_64995b990101sg6w.html

                虚拟机安装linux系统https://blog.csdn.net/colin_lisicong/article/details/70193539

               界面太小点不到“继续”选项卡时,按住Alt键同时鼠标左右拖动即可----解决 

               最终linux安装成功!

             LINUX系统开机后出现assuming drive cache:write through,就卡住了----重启/重装linux时选择多文件存储

     第二步,配置网络/IP

               1. 普通用户进入linux系统tty(终端):ctrl+alt+f1 , 测试:ping  www.baidu.com 收到很多包,ctrl+z终止当前

               查看IP地址和子网掩码:ifconfig -a

               退出tty:ctrl+d    exit     只有ctrl+alt+f7(可用)能退出tty切换到桌面上

               为VM分配IP时发现,已经可以直接ping通外网了

              2.普通用户切换到root用户

                普通用户登录后,输入sudo -s  回车,输入普通用户密码即可进入root用户;退出ctrl+d (测试成功)

                或者sudo  - root  (测试失败的)

              3.修改hostname 、配置host和hostname

                  临时:[root@localhost Desktop]# hostname bigdata-senior01.chybinmy.com

                  永久:修改配置文件 /etc/sysconfig/network   

                            命令:[root@bigdata-senior01 ~] vim /etc/sysconfig/network

                                     进入后,设置成“NETWORKING=yes #使用网络

                                                HOSTNAME=bigdata-senior01.chybinmy.com #设置主机名”

           安装vim: apt  install  vim (注意vim /vim-gnome/vim-tiny/vim-gtk等多个备选项)

           host和hostmane暂时先不配

              4.安装JDK

                查看是否安装:java  -version  如果出现版本号则为安装

               ???

二、Hadoop伪分布式模式部署

      HADOOP集群搭建实战_第1张图片

 

       

            

      

 

  

                

 

               

                

                   

                           

   

转载于:https://my.oschina.net/u/3575262/blog/2246223

你可能感兴趣的:(大数据,操作系统,开发工具)