Hadoop目录

文章目录

  • 1. Apache hadoop普通使用
    • 1.1 nameNode
    • 1.2 dataNode
      • 1.2.1 datanode Unhealthy Nodes
      • 1.2.2 资源监控web接口
    • 1.3 安全模式
    • 1.4 安全
      • 1.4.1 hadoop的ACL权限
      • 1.4.2 apache hadoop 配置kerberos
  • 2. CDH 普通使用
    • 2.1 cdh集群的重启过程
    • 2.2 组件
      • 2.2.1 HUE组件
        • 2.2.1.1 HUE简介与原理
        • 2.2.1.2 HUE安装
      • 2.2.2 Sentry组件
        • 2.2.2.1 为什么Cloudera要创建Hadoop安全组件Sentry?
        • 2.2.2.2 Sentry介绍
        • 2.2.2.3 Sentry安装
    • 4.4 适配
      • 4.4.1 cdh适配
        • 4.4.1.0 hdfs集成ldap
        • 4.4.1.1 Cloudera CDH 5.14.4版本的Hive与LDAP-2.4.44集成
        • 4.4.1.2 Cloudera CDH 5.14.4版本的HU与LDAP-2.4.44集成
        • 4.4.1.3 Cloudera CDH 5.14.4版本的Hive集成Sentry
        • 4.4.1.4 Cloudera CDH 5.14.4版本的LDAP+HUE+Setry+hive
        • 4.4.1.5 Cloudera Manager 配置 LDAP - 通过搜索绑定实现用户和组的映射
        • 4.4.1.6 Cloudera CDH 5.14.4版本的LDAP+HUE+Setry+hive+用户组管理
        • 4.4.1.7 Cloudera CDH 5.14.4版本的LDAP+HUE+Setry+hive基于角色的权限管理
          • 1.基于角色的访问控制
          • 2. Cloudera CDH 5.14.4版本的LDAP+HUE+Setry+hive基于角色的权限管理
        • 4.4.1.6 Cloudera CDH 5.14.4版本的LDAP+Sentry+hive(可参考)
  • 3.编译
    • 3.1 mac下编译hadoop-2.7.4
    • 3.2 mac下编译hadoop-3.0.3
  • 4. hdfs
    • 4.1 hdfs回收站
  • 5. yarn
    • 5.1 yarn队列
  • 源码
    • hadoop-3.0.3源码
      • 1. start-all.sh开始
        • 1.1 hadoop-2.7.4
        • 1.2 hadoop-3.0.3
      • 2.NameNode源码
        • 2.1 NameNode格式化
        • 2.1.1 NameNode开启debug模式

1. Apache hadoop普通使用

1.1 nameNode

1.2 dataNode

1.2.1 datanode Unhealthy Nodes

https://blog.csdn.net/qq_21383435/article/details/83118790

1.2.2 资源监控web接口

https://blog.csdn.net/qq_21383435/article/details/83142683

1.3 安全模式

https://blog.csdn.net/qq_21383435/article/details/83388074

1.4 安全

1.4.1 hadoop的ACL权限

https://blog.csdn.net/qq_21383435/article/details/84861659

1.4.2 apache hadoop 配置kerberos

https://blog.csdn.net/qq_21383435/article/details/83651443

2. CDH 普通使用

2.1 cdh集群的重启过程

https://blog.csdn.net/qq_21383435/article/details/83345909

2.2 组件

2.2.1 HUE组件

2.2.1.1 HUE简介与原理

2.2.1.2 HUE安装

2.2.2 Sentry组件

2.2.2.1 为什么Cloudera要创建Hadoop安全组件Sentry?

https://blog.csdn.net/qq_21383435/article/details/83388426

2.2.2.2 Sentry介绍

https://blog.csdn.net/qq_21383435/article/details/83388046

2.2.2.3 Sentry安装

https://blog.csdn.net/qq_21383435/article/details/83388331

4.4 适配

4.4.1 cdh适配

4.4.1.0 hdfs集成ldap

https://blog.csdn.net/qq_21383435/article/details/83585201

4.4.1.1 Cloudera CDH 5.14.4版本的Hive与LDAP-2.4.44集成

https://blog.csdn.net/qq_21383435/article/details/83384059

4.4.1.2 Cloudera CDH 5.14.4版本的HU与LDAP-2.4.44集成

https://blog.csdn.net/qq_21383435/article/details/83411910

4.4.1.3 Cloudera CDH 5.14.4版本的Hive集成Sentry

https://blog.csdn.net/qq_21383435/article/details/83420833

4.4.1.4 Cloudera CDH 5.14.4版本的LDAP+HUE+Setry+hive

https://blog.csdn.net/qq_21383435/article/details/83445130

4.4.1.5 Cloudera Manager 配置 LDAP - 通过搜索绑定实现用户和组的映射

https://blog.csdn.net/qq_21383435/article/details/83501667

4.4.1.6 Cloudera CDH 5.14.4版本的LDAP+HUE+Setry+hive+用户组管理

https://blog.csdn.net/qq_21383435/article/details/83511715

4.4.1.7 Cloudera CDH 5.14.4版本的LDAP+HUE+Setry+hive基于角色的权限管理

1.基于角色的访问控制

https://blog.csdn.net/qq_21383435/article/details/83589229

2. Cloudera CDH 5.14.4版本的LDAP+HUE+Setry+hive基于角色的权限管理

https://blog.csdn.net/qq_21383435/article/details/83590446

4.4.1.6 Cloudera CDH 5.14.4版本的LDAP+Sentry+hive(可参考)

https://blog.csdn.net/qq_21383435/article/details/83415772

3.编译

3.1 mac下编译hadoop-2.7.4

mac下编译hadoop-2.7.4
https://blog.csdn.net/qq_21383435/article/details/82766029

3.2 mac下编译hadoop-3.0.3

mac下编译hadoop-3.0.3
https://blog.csdn.net/qq_21383435/article/details/82766029

4. hdfs

4.1 hdfs回收站

https://blog.csdn.net/qq_21383435/article/details/85319449

5. yarn

5.1 yarn队列

yarn队列的使用方法

源码

hadoop-3.0.3源码

1. start-all.sh开始

1.1 hadoop-2.7.4

源码:Hadoop-2.7.4 启动过程中执行start-all.sh开始
https://blog.csdn.net/qq_21383435/article/details/82790991

1.2 hadoop-3.0.3

源码:Hadoop-3.0.3启动过程中执行start-all.sh开始
https://blog.csdn.net/qq_21383435/article/details/82794322

2.NameNode源码

2.1 NameNode格式化

2.1.1 NameNode开启debug模式

https://blog.csdn.net/qq_21383435/article/details/82794276

NameNode启动
https://blog.csdn.net/qq_21383435/article/details/82791326

你可能感兴趣的:(大数据-hadoop)