温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。

1.文档编写目的


本文档讲述如何通过Hue管理Sentry权限,您将学习到以下知识:

1.如何使用Hue创建用户

2.如何使用Hue为hive用户组授权超级权限

3.如何使用Hue验证授权

文档主要分为以下几步:

1.使用Hue创建测试用户

2.授权hive组为管理员

3.创建角色并授权验证

4.备注

这篇文档将重点介绍如何使用Hue管理Sentry权限,并基于以下假设:

1.CDH集群运行正常

2.集群已启用Kerberos

3.集群已安装Sentry服务,已和HDFS/Hive/Impala/Hue服务集成

以下是本次测试环境,但不是本操作手册的硬限制:

1.操作系统:CentOS 6.5

2.CDH和CM版本为5.12.1

3.采用root用户进行操作

4.Hue的管理员账号为admin

2.在Hue上创建用户


通过Hue管理员分别创建用户hive/fayson_d/fayson_a/fayson_c/fayson_h,hive用户所属组为hive组,其它用户所属组也与用户名称一样。

注意:确保以上用户在集群所有节点均存在。

0033-如何在Hue中使用Sentry_第1张图片

1.使用admin用户登录Hue

0033-如何在Hue中使用Sentry_第2张图片

2.进入用户管理,创建hive的组

0033-如何在Hue中使用Sentry_第3张图片

0033-如何在Hue中使用Sentry_第4张图片

点击“Add group”保存新建的组

0033-如何在Hue中使用Sentry_第5张图片

3.创建hive用户(以创建hive用户为例)

0033-如何在Hue中使用Sentry_第6张图片

0033-如何在Hue中使用Sentry_第7张图片

0033-如何在Hue中使用Sentry_第8张图片

0033-如何在Hue中使用Sentry_第9张图片

0033-如何在Hue中使用Sentry_第10张图片

3.授权hive组为管理员


1.使用hive用户登录Hue

0033-如何在Hue中使用Sentry_第11张图片

2.点击Hue左上角菜单,进入Security界面

0033-如何在Hue中使用Sentry_第12张图片

0033-如何在Hue中使用Sentry_第13张图片

0033-如何在Hue中使用Sentry_第14张图片

3.创建管理员角色admin,并授权给hive组

0033-如何在Hue中使用Sentry_第15张图片

点击上图右边“Click here to add some”

0033-如何在Hue中使用Sentry_第16张图片

点击保存,显示server1所拥有的角色

0033-如何在Hue中使用Sentry_第17张图片

点击刷新按钮,查看是否有权限

0033-如何在Hue中使用Sentry_第18张图片

hive用户可以查看到server1下所有的数据库和表

0033-如何在Hue中使用Sentry_第19张图片

4.创建角色并授权验证

4.1库级别授权


使用hive用户创建一个对default库有只读(SELECT)权限的角色dread,并授权给fayson_d用户组,所属该用户组的用户对default库下所有表只有SECLET权限没有INSERT权限。

0033-如何在Hue中使用Sentry_第20张图片

添加角色并授权

0033-如何在Hue中使用Sentry_第21张图片

点击保存并查看

0033-如何在Hue中使用Sentry_第22张图片

4.2库授权验证


使用fayson_d用户登录Hue,可以看到default下所有表

  • Hive验证

0033-如何在Hue中使用Sentry_第23张图片

对test表进行select、count和insert操作

0033-如何在Hue中使用Sentry_第24张图片

0033-如何在Hue中使用Sentry_第25张图片

只读权限所以INSERT操作失败

0033-如何在Hue中使用Sentry_第26张图片

对test_hive_delimiter表进行select、count和insert操作

0033-如何在Hue中使用Sentry_第27张图片

0033-如何在Hue中使用Sentry_第28张图片

0033-如何在Hue中使用Sentry_第29张图片

  • Impala验证

0033-如何在Hue中使用Sentry_第30张图片

对test表进行select、count和insert操作

0033-如何在Hue中使用Sentry_第31张图片

0033-如何在Hue中使用Sentry_第32张图片

0033-如何在Hue中使用Sentry_第33张图片

对test_hive_delimiter表进行select、count和insert操作

0033-如何在Hue中使用Sentry_第34张图片

0033-如何在Hue中使用Sentry_第35张图片

0033-如何在Hue中使用Sentry_第36张图片

  • File Browser验证

无权限访问/warehouse目录下的fayson库的数据目录

0033-如何在Hue中使用Sentry_第37张图片

test表为内部表,数据目录为/user/hive/warehouse/test

0033-如何在Hue中使用Sentry_第38张图片

可以查看test表的数据文件

0033-如何在Hue中使用Sentry_第39张图片

test_hive_delimiter表为外部表,数据目录为/fayson/test_hive_delimiter

0033-如何在Hue中使用Sentry_第40张图片

可以查看/fayson/test_hive_delimiter目录下的数据文件

0033-如何在Hue中使用Sentry_第41张图片

无权限编辑数据文件

0033-如何在Hue中使用Sentry_第42张图片

结论:fayson_d用户可以使用Hive/Impala查看所有default库下的表,但是没有insert权限,插入表失败。对应到HDFS目录,可以查看所有目录文件夹,并查看文件内容,但是无法修改文件内容。说明Sentry实现了HDFS ACL的同步。

4.3表级别授权


使用hive用户创建一个对default库下test表有所有(ALL)操作权限的角色testall,并授权给fayson_a用户组,所属该用户组下的所有用户能对default.test表SELECT、INSERT。

0033-如何在Hue中使用Sentry_第43张图片

创建角色并授权

0033-如何在Hue中使用Sentry_第44张图片

点击保存并查看

0033-如何在Hue中使用Sentry_第45张图片

4.4表授权验证


使用fayson_a登录Hue,可以看到default库下的test表

  • Hive验证

0033-如何在Hue中使用Sentry_第46张图片

可以对test表进行select、count和insert操作

0033-如何在Hue中使用Sentry_第47张图片

0033-如何在Hue中使用Sentry_第48张图片

0033-如何在Hue中使用Sentry_第49张图片

  • Impala验证

0033-如何在Hue中使用Sentry_第50张图片

可以对test表进行select、count和insert操作

0033-如何在Hue中使用Sentry_第51张图片

0033-如何在Hue中使用Sentry_第52张图片

0033-如何在Hue中使用Sentry_第53张图片

  • File Browser验证

可以浏览/user/hive/warehouse目录

0033-如何在Hue中使用Sentry_第54张图片

可以查看/user/hive/warehouse/test目录下的数据文件

0033-如何在Hue中使用Sentry

可以向/user/hive/warehouse/test目录下上传数据文件

0033-如何在Hue中使用Sentry_第55张图片

可以删除数据文件

0033-如何在Hue中使用Sentry_第56张图片

结论:fayson_a用户可以使用Hive/Impala查看所有default库下的表,并能执行insert操作。对应到HDFS目录,可以查看所有目录文件夹,并查看文件内容,同时还能上传新的文件。说明Sentry实现了HDFS ACL的同步。

4.5列级别授权


使用hive用户创建一个对test表的s1列有只读(SELECT)权限的角色testcolumn,并授权给fayson_c用户。所属该用户组下的所有用户对test表的s1列只有SELECT权限。

0033-如何在Hue中使用Sentry_第57张图片

添加角色并授权

0033-如何在Hue中使用Sentry_第58张图片

点击保存并查看

0033-如何在Hue中使用Sentry_第59张图片

4.6列授权验证


使用fayson_c登录Hue,可以看到default库下的test表

  • Hive验证

0033-如何在Hue中使用Sentry_第60张图片

对test表进行select、count和insert操作

0033-如何在Hue中使用Sentry_第61张图片

由于只有s1列的SELECT权限,所以不能查看所有列(*)

0033-如何在Hue中使用Sentry_第62张图片

只可以查看有权限的列

0033-如何在Hue中使用Sentry_第63张图片

只能count那一列

0033-如何在Hue中使用Sentry_第64张图片

无法插入新的数据

  • Impala验证

0033-如何在Hue中使用Sentry_第65张图片

对test表进行select、count和insert操作

0033-如何在Hue中使用Sentry_第66张图片

由于只有s1列的SELECT权限,所以不能查看所有列(*)

0033-如何在Hue中使用Sentry_第67张图片

只可以查看有权限的列

0033-如何在Hue中使用Sentry_第68张图片

只能count那一列

0033-如何在Hue中使用Sentry_第69张图片

无法插入新的数据

  • File Browser验证

无权限访问/user/hive/warehouse/test目录

0033-如何在Hue中使用Sentry_第70张图片

结论:fayson_c用户使用Hive/Impala只能查看test表的s1列,无法对整表select *,无法执行insert操作。对应到HDFS目录,不能查看相应目录文件夹/文件,同时无法上传新的文件。说明Sentry实现了HDFS ACL的同步。

4.7HDFS URI授权


使用hive用户创建一个角色,并授权给fayson_h用户组

  • 授权hdfsall角色对fayson库有所有权限
  • 授权hdfsall角色对HDFS目录/fayson_data/test_hive有所有(ALL)权限

所属该用户组下的所有用户均对fayson库有所有操作权限,对/fayson_data /test_hive目录有所有权限,在fayson库下创建外部表只能指向/fayson_data /test_hive目录

0033-如何在Hue中使用Sentry_第71张图片

创建角色并授权

0033-如何在Hue中使用Sentry_第72张图片

0033-如何在Hue中使用Sentry_第73张图片

点击保存,查看创建的角色

0033-如何在Hue中使用Sentry_第74张图片

4.7HDFS URI授权验证


  • 授权验证

使用fayson_h用户登录Hue,可以看到fayson库

0033-如何在Hue中使用Sentry_第75张图片

在fayson库下创建外部表,执行如下建表语句

create external table test_hive
(
  id int,
  name string,
  address string
)
row format delimited fields terminated by ','
stored as textfile location '/fayson_data/test_hive';

表创建成功

0033-如何在Hue中使用Sentry_第76张图片

删除test_hive表

0033-如何在Hue中使用Sentry_第77张图片

向test_hive表插入数据

0033-如何在Hue中使用Sentry_第78张图片

使用hive用户将hdfs的授权权限删除,再次测试

0033-如何在Hue中使用Sentry_第79张图片

0033-如何在Hue中使用Sentry_第80张图片

使用fayson_h用户在fayson库下再次创建表,表创建失败。

0033-如何在Hue中使用Sentry_第81张图片

  • File Browser验证

访问fayson库数据目录/user/hive/warehouse/fayson.db

0033-如何在Hue中使用Sentry_第82张图片

访问外部表数据目录/fayson_data/test_hive

0033-如何在Hue中使用Sentry_第83张图片

不能向外部表数据目录上传数据文件

0033-如何在Hue中使用Sentry_第84张图片

无权限删除外部表数据目录下文件

0033-如何在Hue中使用Sentry_第85张图片

访问内部表数据目录/user/hive/warehouse/fayson.db/test

0033-如何在Hue中使用Sentry_第86张图片

可以向/user/hive/warehouse/fayson.db/test数据目录上传数据

0033-如何在Hue中使用Sentry_第87张图片

可以删除/user/hive/warehouse/fayson.db/test目录下的数据文件

0033-如何在Hue中使用Sentry_第88张图片

0033-如何在Hue中使用Sentry_第89张图片

测试总结:

fayson_h用户对fayson库有所有权限,在create table test_hive的时候,如果不指定location,默认的数据目录为/user/hive/warehouse/fayson.db/test_hive。如果创建外部表如create external table test_hivexxx location /fayson_data/test_hive的时候,若不授权/fayson_data/test_hive目录的ALL权限给fayson_h,fayson_h是不能创建表的。

注:对于上述测试不能向外部表插入数据。

5.备注


  • 以上操作都是使用Hue界面操作,由于集群开启Kerberos,要使用命令行操作需要为上述用户创建Kerberos账号,否则不能在命令行正常使用。
  • Sentry的URI授权,主要是用于非hive用户创建外部表时对HDFS数据目录授权。Sentry授权的URI可以指向外部表的数据目录,也可以指向外部表数据目录的父目录,指向父目录则父目录下的所有子目录都可以为外部表的数据目录。

醉酒鞭名马,少年多浮夸! 岭南浣溪沙,呕吐酒肆下!挚友不肯放,数据玩的花!
温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。

推荐关注Hadoop实操,第一时间,分享更多Hadoop干货,欢迎转发和分享。

0033-如何在Hue中使用Sentry_第90张图片
原创文章,欢迎转载,转载请注明:转载自微信公众号Hadoop实操