BigData && Hadoop && Spark生态圈

一、Hadoop

Hadoop基础

  1. Hadoop基础学习
  2. Hadoop集群大数据平台搭建
  3. 分布式存储的原理
  4. HDFS常用操作命令
  5. HDFS文件恢复机制
  6. HDFS中的数据块
  7. Federation配置
  8. ViewFS的配置
  9. 告诉你怎么使用Snapshots
  10. Rebalance和SafeMode

Hadoop问题处理

  1. 修改DNS、修改IP、修改网管——相关问题
  2. 修改主机名
  3. ssh 免密码设置失败原因总结
  4. jps 没有输出
  5. 在运行sbin/start-dfs.sh时出现错误
  6. 执行start-dfs.sh,datenode没有启动
  7. 执行start-dfs.sh,namenode无法启动
  8. 部署hadoop后,datanode无法连接namenode

二、MapReduce&&Yarn

  1. ResourceManager的HA配置
  2. Yarn Capacity Scheduler配置
  3. Yarn Fair Scheduler配置
  4. Yarn的三种资源调度机制
  5. Hadoop压缩机制的了解
  6. HDFS中两个集群数据文件拷贝的方式
  7. MR内存cpu资源配置

三、Zookeeper

  1. HDFS HA(高可用性)集群规划
  2. Master选举原理
  3. 使用Zookeeper完成对数据库配置的管理
  4. 安装分布式zookeeper

你可能感兴趣的:(大数据,Spark,Hadoop)