E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
kerberos
SparkStreaming读写
kerberos
HBase(Yarn Cluster)
yarnCluster模式也可适用于从集群外部提交(接口机)提交命令spark-submit的最后一行为args参数,经多次尝试发现yarncluster模式通过该方式传入
kerberos
文件可行krb5
雾幻
·
2019-05-15 14:54
spark
kerberos
SparkStreaming读写
kerberos
HDFS(Yarn Cluster)
yarnCluster模式也可适用于从集群外部提交(接口机)提交命令spark-submit的最后一行为args参数,经多次尝试发现yarncluster模式通过该方式传入
kerberos
文件可行krb5
雾幻
·
2019-05-15 14:17
spark
kerberos
SparkStreaming读写
kerberos
Kafka(Yarn Client、Yarn Cluster)
因YarnClient模式、YarnCluster模式下SparkStreaming程序的提交及运行机制不同,则对读写kafka【
kerberos
】集群中相关代码也略有差异首先需要确保集群中的相应组件正常部署
雾幻
·
2019-05-15 13:26
sparkStreaming
kerberos
kafka
yarn
安全认证
spark
kerberos
sparkstreaming使用keberos认证写hbase
最近在项目实施过程中,使用hdp和cdh集群时,hbase配置了
kerberos
认证之后,通过sparkstreaming程序连接操作hbase时,会出以如下错误:1、ERRORipc.AbstractRpcClient
hblicy
·
2019-05-10 11:23
Hadoop
CDH
HBase Thrift with Python (
Kerberos
)
说在文前本文内容是基于Centos7、HDP3.0.0、HBase2.0.0、Python2.7环境下,其他环境的童鞋选择性进行参考安装Thrift安装依赖包yuminstall-yautomakelibtoolflexbisonpkgconfiggcc-c++libevent-develzlib-develpython-develruby-developenssl-devel安装boost(Ce
迹_Jason
·
2019-05-08 00:00
hbase
thrift
python2.7
kerberos
Kerberos
认证原理
在keberosAuthentication中,
Kerberos
有三个主体:Client、Server和KDC。
_JiangXin
·
2019-04-29 22:26
快速搭建
Kerberos
服务端及入门使用
快速搭建
Kerberos
服务端及入门使用作者:尹正杰版权声明:原创作品,谢绝转载!否则将追究法律责任。
Kerberos
是一种网络身份验证协议。
尹正杰
·
2019-04-24 22:00
使用DBeaver访问
Kerberos
环境下的Hive
测试环境:CDH版本为5.13.1客户端OS为Windows10或Windows7.配置
Kerberos
客户端环境在客户端OSWindows10或Windows7上安装
Kerberos
客户端,在
Kerberos
padluo
·
2019-04-19 23:58
Hadoop
详解Linux运维工程师高级篇(大数据安全方向)
hadoop安全目录:
kerberos
(已发布)elasticsearch(已发布)https://blog.51cto.com/chenhao6/2113873knoxoozierangerapachesentry
IT8421
·
2019-04-16 23:23
大数据
配置两个Hadoop集群
Kerberos
认证跨域互信
两个Hadoop集群开启
Kerberos
验证后,集群间不能够相互访问,需要实现
Kerberos
之间的互信,使用Hadoop集群A的客户端访问Hadoop集群B的服务(实质上是使用
Kerberos
RealmA
菜鸟飞不动-公众号 读书ReadBook
·
2019-04-12 00:00
配置两个Hadoop集群
Kerberos
认证跨域互信
两个Hadoop集群开启
Kerberos
验证后,集群间不能够相互访问,需要实现
Kerberos
之间的互信,使用Hadoop集群A的客户端访问Hadoop集群B的服务(实质上是使用
Kerberos
RealmA
XIAO的博客
·
2019-04-11 13:00
Java api访问集群(
Kerberos
认证不通过)
本地环境访问集群OK生产环境却报错查找日志信息,发现
Kerberos
认证的时候,域名解析出现问题?!!
lhxsir
·
2019-04-08 18:11
java
hadoop
Kerberos
配置与使用
阅读更多1.
Kerberos
协议:
Kerberos
协议主要用于计算机网络的身份鉴别(Authentication),其特点是用户只需输入一次身份验证信息就可以凭借此验证获得的票据(ticket-grantingticket
flylynne
·
2019-04-03 00:00
部署
Kerberos
配置与使用
阅读更多1.
Kerberos
协议:
Kerberos
协议主要用于计算机网络的身份鉴别(Authentication),其特点是用户只需输入一次身份验证信息就可以凭借此验证获得的票据(ticket-grantingticket
flylynne
·
2019-04-03 00:00
部署
Windows环境下
Kerberos
的配置
1实验环境1.1硬件环境virtualbox虚拟机Windowsserver2003中文企业版Windows7旗舰版Windowsserver2003x64中文企业版镜像链接:https://pan.baidu.com/s/1d-jmoVLPiU3Wfs-aQSM4Bg提取码:7cl0Windowsserver2013中文企业版安装过程Windows7x64旗舰版镜像:链接:https://pan
Charonmomo
·
2019-04-01 23:06
Kerberos
kerberos
配置
配置共涉及2台ubuntu虚拟机kdc服务器ip:172.16.66.143kdc客户端ip:172.16.66.142
kerberos
realm:SILENCEubuntu16.04下载连接:http
Edmonton
·
2019-04-01 23:32
Filebeat、Logstash、Kafka 整合
Filebeat>Logstash>Kafka使用步骤使用filebeat收集日志到logstash中,再由logstash再生产数据到kafka,如果kafka那边没有
kerberos
认证也可以直接收集到
大猪大猪
·
2019-03-29 10:08
基于 ambari 安装
Kerberos
问题总结
更多问题解决来源https://steveloughran.gitbooks.io/
kerberos
_and_hadoop/content/sections/errors.html(包含大部分
Kerberos
dymkkj
·
2019-03-26 15:03
spark
美团数据平台
Kerberos
优化实战
背景
Kerberos
是一种网络认证协议,其设计目标是通过密钥系统为客户端、服务器端的应用程序提供强大的认证服务。
Wei-L
·
2019-03-22 10:28
Big
Data
StormUI 无法获取数据
SimpleandProtectedGSS-APINegotiation)是微软提供的一种使用GSS-API认证机制的安全协议,用于使Webserver共享WindowsCredentials,它扩展了
Kerberos
FanoLi
·
2019-03-20 16:16
storm
kerberos
【笔记】信息安全原理与实践(一)
(相比SSL更加复杂)另一个真实协议是
Kerberos
,一个基于
_鹤梦_
·
2019-03-19 23:00
spark + hadoop 访问 基于
Kerberos
安全认证、授权的hdfs集群
1.在本地安装
kerberos
client组件yuminstallkrb5-userlibpam-krb5libpam-ccredsauth-client-configyuminstallkrb5-workstation2
dymkkj
·
2019-03-16 12:13
hadoop
spark
初识ldap 及
kerberos
被测的项目是做登录权限管理(用户账密信息存在mysql中)及底层权限管控(在登录及界面操作时,比如创建一个项目,对应会在hdfs上创建对应的路径,及赋予用户所在组别的访问权限),其中底层权限的管控需要Ldap及
kerberos
龙葵1992
·
2019-03-15 20:28
CDH5配置
kerberos
集群配置假设集群节点为:cat/etc/hosts172.16.100.101master172.16.100.102node1172.16.100.103node2172.16.100.104node3安装
kerberos
david9
·
2019-03-11 18:56
SpringBoot整合并简单使用
Kerberos
认证的Kafka
早餐一个白鸡蛋吃得俺打嗝-_-|||准备工作1、启动需要
Kerberos
认证的kafka。
justry_deng
·
2019-03-11 10:08
Kafka
向hbase导入数据
阅读更多1.环境信息大数据集群利用CHD5.7.0搭建,包括master节点、worker节点、name节点、secondaryname节点等总共10个节点,集群通过
Kerberos
进行认证权限管理。
fengyilin
·
2019-03-04 14:00
Hadoop
hbase
向hbase导入数据
阅读更多1.环境信息大数据集群利用CHD5.7.0搭建,包括master节点、worker节点、name节点、secondaryname节点等总共10个节点,集群通过
Kerberos
进行认证权限管理。
fengyilin
·
2019-03-04 14:00
Hadoop
hbase
向hbase导入数据
阅读更多1.环境信息大数据集群利用CHD5.7.0搭建,包括master节点、worker节点、name节点、secondaryname节点等总共10个节点,集群通过
Kerberos
进行认证权限管理。
fengyilin
·
2019-03-04 14:00
Hadoop
hbase
Hive的授权机制——总体介绍
使用
kerberos
可以为类似于hive命令行这样的工具提供一种强认证。对于Hiveserver2,还有一些其他的认证方
看得出的就是
·
2019-03-02 18:27
Hive
HBase的ACL说明
HBase版本:1.1.2前言该文只是对
Kerberos
应用部分中HBase使用的一个补充,主要介绍了HBaseACL的使用。
CREATE_17
·
2019-02-17 23:51
HBase
opentsdb加
kerberos
认证
1.编辑启动脚本catstart_tsdb.shOPENTSDB_HOME=/data/opentsdbJVMARGS="${JVMARGS}-Djava.security.auth.login.config=${OPENTSDB_HOME}/jaas.conf-Dzookeeper.sasl.client=false"./tsdbtsd--config=${OPENTSDB_HOME}/open
bigdataf
·
2019-02-15 11:37
opentsdb
大数据
hbase
kerberos
ftp脚本遇到AUTH GSSAPI错误
在执行脚本时老出现如下错误:'AUTHGSSAPI':commandnotunderstood'AUTH
KERBEROS
_V4':commandnotunderstood
KERBEROS
_V4rejectedasanauthenticationtype
M_ling
·
2019-02-02 09:04
ftp
脚本
遇到
ssh/telnet/ftp
记一次HDFS Delegation Token失效问题(续)
上篇传输门:地址上文我有提到livyspengo是通过代理的方式实现
Kerberos
的认证的,当使用类似于Spark-Submit方式添加对应的sp
迹_Jason
·
2019-01-22 00:00
kerberos
记一次HDFS Delegation Token失效问题
由于我们团队是最近上的
Kerberos
,免不了会出现一些问题,现阶段还处于踩坑阶段。希望通过我们的填坑的经历,帮助到同样身处坑内的伙伴。我们使用的Hortonworks-HDP环境。
迹_Jason
·
2019-01-17 00:00
kerberos
YARN、Spark、Hive使用
kerberos
本文记录YARN、Spark、Hive各服务配置使用
kerberos
的过程。
mnasd
·
2019-01-08 23:46
ranger
Windows
Kerberos
客户端配置并访问CDH
最终发现是端口问题,因为kdc默认端口是88,所以必须给88端口为UDP协议使用API访问开启安全
Kerberos
的Hdfshadoop集群(cdh集群)在开启
kerberos
安全认证方式后,通
脚丫先生
·
2019-01-04 10:48
大数据开发
Kerberos
主从配置
前言本篇文档衔接上一篇
Kerberos
的安装配置;详见:https://blog.51cto.com/784687488/2332072配置指定
Kerberos
配置文件的系统环境变量#以下配置是
Kerberos
FanoLi
·
2018-12-27 19:49
kerberos
主从
HBase常用Shell命令
进入hbaseshellconsole$HBASE_HOME/bin/hbaseshell如果有
kerberos
认证,需要事先使用相应的keytab进行一下认证(使用kinit命令),认证成功之后再使用
Saxon_323e
·
2018-12-25 10:33
第5章 协议安全技术
考试大纲掌握安全协议的概念掌握
Kerberos
e协议掌握TLS和SSL协议身份认证协议——一次性口令认证,加“盐”的认证系统、PAP、CHAP等一、协议安全基础安全协议:在消息交换和处理过程中使用的若干密码算法的协议二
soyouwantme
·
2018-12-20 10:15
Ambari2.6.2集成
Kerberos
“坑”说明如果HDP版本是2.6.5、Ambari版本是2.6.2.2,切记与
Kerberos
集成时,注意一下
Kerberos
的版本。
Kerberos
版本一定不能是1.15.1-18,会受伤的。
FanoLi
·
2018-12-18 15:02
ambari
kerberos
kdc
Hive开发使用-
.海量数据的离线分析3.1目前的Hive的Thrift服务端通常使用HiveServer2,它是HiveServer2改进版本,它提供了新的ThriftAPI来处理JDBC或者ODBC客户端,可以进行
Kerberos
老子跑的动
·
2018-12-16 21:34
大数据
Hive
Sql
Hack The Box -----------------------Active
==========================================================================信息收集nmap-sV-sT10.10.10.100
Kerberos
大方子
·
2018-12-16 13:20
CTF以及各类靶机
经验心得
HTB靶场题解集合
开源大数据平台如何才能保证身份认证安全?
在古希腊神话中,
Kerberos
是住在冥河岸边的三头犬,负责看守冥界的入口。而在信息技术界,
Kerberos
是一种被广泛采用的网络认证协议,通过对称加密的技术,保护网络系统的安全。
charliewei
·
2018-12-11 00:00
kerberos
Thrift方式连接hiveServer2+
Kerberos
最近在做一个大数据查询平台,后端引擎有部分用了hive,通过thrift的方式连接hiveServer2,由于集群加了
kerberos
,所以实现thrift连接hiveServer2的时候需要加上
kerberos
冰上浮云
·
2018-12-09 15:26
kerberos
bigdata
hive
Kerberos
笔记
本文以《HadooopSecurity》等资料为基础,罗列关于
Kerberos
的一些重要内容的笔记。文章目录
Kerberos
的基本思想没有
Kerberos
时,Hadoop是如何工作的?
bluishglc
·
2018-12-08 13:47
java连接有
kerberos
认证的hbase
最近有这个需求,因为
kerberos
认证,一直连不上,通过很多大佬的帮忙,终于成功连上,在此分享下自己的一点点收获话不多说,1.需要hbase-site.xml这个配置文件,里面有很多配置属性是需要的,
嘿嘿哈嘻
·
2018-12-03 21:49
BUG
0469-如何使用DBeaver访问
Kerberos
环境下的Impala
1.文章编写目的在前面Fayson的文章《0467-Hadoop客户端工具之Dbeaver安装及使用》和《0468-如何使用DBeaver访问
Kerberos
环境下的Hive》。本篇文章Fayson主
Hadoop_SC
·
2018-12-02 10:28
Hadoop实操
0468-如何使用DBeaver访问
Kerberos
环境下的Hive
1.文章编写目的在前面Fayson的文章《0467-Hadoop客户端工具之Dbeaver安装及使用》介绍了DBeaver的安装以及访问非
Kerberos
环境下的Hive。本篇文章Fayson主要介绍
Hadoop_SC
·
2018-12-01 11:27
Hadoop实操
聊聊Hadoop安全认证体系:Delegation Token和Block Access Token
主要来聊聊这两者间的差异,顺带也会提及一些
Kerberos
认证的一点内容。这里不深挖其中的技术细节,整体阐述会比较简单,明了。
Android路上的人
·
2018-11-29 23:59
Hadoop
HDFS
Kerberos
认证代码分析Can't get
Kerberos
realm
1.Can'tget
Kerberos
realm原因分析:原始代码为:12org.apache.hadoop.security.UserGroupInformation.setConfiguration(
hellozhxy
·
2018-11-29 15:36
Hadoop
上一页
28
29
30
31
32
33
34
35
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他