E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
CDH5.7
Hudi 集成 Hive
lib/hudi/packaging/hudi-hadoop-mr-bundle/target/hudi-hadoop-mr-bundle-0.11.0-SNAPSHOT.jar~/cloudera/
cdh5.7
雾岛与鲸
·
2022-05-31 07:42
数据湖
spark
sql
big
data
Cloudera Manager和CDH升级流程
ClouderaManager6.0可以管理运行
CDH5.7
到CDH5.14的集群,只要Clouder
caibian0371
·
2020-09-16 02:49
数据库
java
大数据
cdh5.7
下载地址以及spark和scala下载地址
cdh5.7
版本下载链接http://archive.cloudera.com/cdh5/cdh/5/+自己想要下载的东西的名称eg:hbasehttp://archive.cloudera.com/cdh5
xianshigudu
·
2020-08-24 18:40
大数据
CDH5.7
hue集成Hbase
一、Hbase开启代理用户相关配置ClouderaManager修改Hbase配置或Hbase配置文件-hbase-site.xmlhbase.thrift.support.proxyusertruehbase.regionserver.thrift.httptrue二、代理用户授权认证在hbase中搜索core-site.xml并添加以下代码hadoop.proxyuser.hue.hosts*
lwz18642660013
·
2020-08-24 14:05
大数据
[Hadoop] CentOS7安装Zookeeper-3.4.5-cdh5.7.0(单节点)
1.Zookeeper下载安装我的环境使用的套件版本是
cdh5.7
,所以zookeeper也选择对应的版本下载。
cindysz110
·
2020-08-21 21:39
zookeeper
cdh5.7
权限测试示例
本文旨在展示CDH基于Kerberos身份认证和基于Sentry的权限控制功能的测试示例。1.准备测试数据123456cat/tmp/events.csv10.1.2.3,US,android,createNote10.200.88.99,FR,windows,updateNote10.1.2.3,US,android,updateNote10.200.88.77,FR,ios,createNot
weixin_30278311
·
2020-07-30 02:50
CDH5.7
中sqoop2使用
---------------------------------------sqoop2版本不支持直接导成hive表的形式,只能导入到hdfs中--------------------在官网下载对应版本的额包http://www.apache.org/dyn/closer.lua/sqoop/1.99.5设置配置文件/home/dba/sqoop2-1.99.5-cdh5.7.0/server/
aoerqileng
·
2020-07-15 20:50
hadoop
[Impala基础]-- Impala SQL语言参考(初步了解,
CDH5.7
以上版本)
初识ImpalaSQL语言之前一直使用Hive来实现业务,没有详细研究Impala!导致需要使用时才开始学习,昨天领导告诉我需要研究Impala,既然公司业务需要用,那作为开发人员的我们就尽可能地去学新东西来解决问题了。所以就先从看官方文档学起了,由于是菜鸟,水平有限,不足之处还请各位批评指正!一、Impala使用SQL作为其查询语言,为了保护用户在技能开发和查询设计方面的投资,Impala提供了
highfei2011
·
2020-07-14 11:17
Impala
CDH5.7
/5.8离线安装-使用CM5,基于CentOS 6.7
截至到2016年5月30日,在网上都没有找到离线安装CDH5.6的文章,最新的就是5.6,经过各种试验,总算装好了,记录如下。一、基础环境1.操作系统:Centos6.5Minimal版本2.CDH5.7/5.83.CloudraManager版本5.7/5.84.JDK版本:5.7用的JDK7,5.8用的JDK85.使用VirtualBox5搭建3个虚拟机6.硬件:笔记本i5第6代,16G内存,
jd29323
·
2020-07-10 16:47
大数据
hadoop
cdh
CDH5.7
快速离线安装教程
一、简介CDH是cloudera公司开发的一个快速部署、高效管理Hadoop和其各种组件的一个商业化产品。主要分为两部分,分别为ClouderaManager和CDH软件包。其中ClouderaManager负责集群的部署与管理。CDH软件包囊括了hdaoop各类的组件的安装包,例如hive、hdfs、spark等等。由于实验室服务器集群实现了硬件虚拟化,要在虚拟资源重新搭建CDH集群。cloud
四木夕宁
·
2020-07-08 08:28
hadoop
CDH
cdh5.7
下载地址JDK以及Maven和Spark和scala下载地址
cdh5.7
版本下载链接http://archive.cloudera.com/cdh5/cdh/5/+自己想要下载的东西的名称eg:JDKhttps://www.oracle.com/technetwork
yanghaibobo110
·
2020-06-30 05:18
网络安全
Mac搭建
CDH5.7
版本伪分布式集群
Mac搭建
CDH5.7
版本伪分布式集群参考:https://www.jianshu.com/p/61137cf00c681、下载软件在下面链接找自己想用的版本、我用的5.7.1https://archive.cloudera.com
weixin_42682000
·
2020-06-29 06:24
[Flume基础]-- 使用Kafka与Flume
二、条件在
CDH5.7
及更高版本中,Kafka的Flume连接器仅适用于Kafka2.0及更高版本。三、要点不要配置Kafka源以将数据发送到Kafka接收器。
highfei2011
·
2020-06-23 14:06
Kafka
Flume
hive参数优化
目录小文件处理的参数数据倾斜参数分区表参数并行执行参数代码块中的参数值都是
cdh5.7
的默认值.查看hive配置的方式为[root@namenode1~]#hive-e"set"|grephive.merge.mapredfiles1
wangliang938
·
2020-02-18 19:11
CDH5.7
hive+sqoop踩坑实践
为了做一个基于hive的大数据采集平台,最近踩了不少的坑。首先是想采用开源的项目代码搭建hadoop+hive+spark+hbase+sqoop平台的,hadoop采用2.7.7,spark用spark-2.3.0-bin-hadoop2.7,hbase用hbase-2.1.0,sqoop比较坑爹,只有1.4.7版本和1.99版本。了解过的人都不会用1.99版本,所以优先选择sqoop-1.4.
蚂蚁_8173
·
2019-06-28 16:56
Cloudera Manager和CDH升级流程
ClouderaManager6.0可以管理运行
CDH5.7
到CDH5.14的集群,只要Clouder
ClouderaHadoop
·
2019-06-03 15:20
Cloudera
Cloudera Manager和CDH升级流程
ClouderaManager6.0可以管理运行
CDH5.7
到CDH5.14的集群,只要Clouder
ClouderaHadoop
·
2019-06-03 14:46
CDH
Hadoop
CM
入门大数据
title:入门大数据categories:大数据tags:[java,大数据,hadoop]大数据概述导学环境linuxcentos6.4hadoop版本
CDH5.7
开发工具idea搭建环境章节安排大数据概述大数据故事大数据背景大数据基本概念大数据设计到的技术大数据带来的技术挑战大数据带来的思维变革
uanei
·
2018-11-18 17:34
java
hadoop
大数据
java
hadoop
大数据
Centos6 安装
cdh5.7
Centos6安装
cdh5.7
安装前的准备工作JDK环境版本:jdk-7u79-linux-x64.tar.gz下载地址:oracle官网(http://www.oracle.com/technetwork
xitaotao
·
2018-11-13 10:08
大数据
其他
centos7.4下离线安装
CDH5.7
(一)安装前的规划(1)操作系统版本:centos7.4(64bit)[root@hadoop22etc]#more/etc/centos-releaseCentOSLinuxrelease7.4.1708(Core)[root@hadoop22installPackage]#cat/proc/versionLinuxversion3.10.0-693.el7.x86_64(builder@kbu
gegeman
·
2018-04-07 18:00
Spark 2.0视频教程|快学Spark 2.0(新特性、含真实项目、纯Scala语言开发、
CDH5.7
)
快学Spark2.0(新特性、含真实项目、纯Scala语言开发、
CDH5.7
)分享网盘下载——https://pan.baidu.com/s/1mkqrTs0密码:y5hghttps://pan.baidu.com
fengzhongyela
·
2017-10-20 08:43
Spark 2.0视频教程|快学Spark 2.0(新特性、含真实项目、纯Scala语言开发、
CDH5.7
)
阅读更多快学Spark2.0(新特性、含真实项目、纯Scala语言开发、
CDH5.7
)分享网盘下载——https://pan.baidu.com/s/1mkqrTs0密码:y5hghttps://pan.baidu.com
老江师兄弟
·
2017-10-20 08:00
Spark
Hive on Spark系列一:CDH5.5配置支持hive on spark
ConfiguringHiveonSpark章节内容,地址:https://www.cloudera.com/documentation/enterprise/5-5-x/topics/admin_hos_config.html我写文档中
CDH5.7
雪地车
·
2017-05-08 13:24
大数据
CDH5.7
配置kerberos身份认证+sentry权限管理
更多大数据技术干货,欢迎关注“大数据技术进阶”微信公众号。4.为CDH5集群添加Kerberos身份验证4.1安装sentry1、点击“操作”,“添加服务”;2、选择sentry,并“继续”;3、选择一组依赖关系4、确认新服务的主机分配5、配置存储数据库;在mysql中创建对应用户和数据库:123mysql>createdatabasesentrydefaultcharactersetutf8co
DF_XIAO
·
2016-10-17 14:47
hadoop
CDH5.7
配置kerberos身份认证+sentry权限管理
更多大数据技术干货,欢迎关注“大数据技术进阶”微信公众号。4.为CDH5集群添加Kerberos身份验证4.1安装sentry1、点击“操作”,“添加服务”;2、选择sentry,并“继续”;3、选择一组依赖关系4、确认新服务的主机分配5、配置存储数据库;在mysql中创建对应用户和数据库:123mysql>createdatabasesentrydefaultcharactersetutf8co
DF_XIAO
·
2016-10-17 14:47
hadoop
cdh5.7
权限测试示例
转载请注明出处:http://www.cnblogs.com/xiaodf/本文旨在展示CDH基于Kerberos身份认证和基于Sentry的权限控制功能的测试示例。1.准备测试数据cat/tmp/events.csv10.1.2.3,US,android,createNote10.200.88.99,FR,windows,updateNote10.1.2.3,US,android,updateN
XIAO的博客
·
2016-10-17 00:00
NameNode配置HA后及其反过程Hive路径不正确的问题解决
在
CDH5.7
下,配置了NameNode的HA后,Hive无正常查询数据了,但是其他的组件HDFS,HBase,Spark都正常的。
BabyFish13
·
2016-10-11 14:37
#
Hive
CDH
CDH5.7
中sqoop2使用
---------------------------------------sqoop2版本不支持直接导成hive表的形式,只能导入到hdfs中--------------------在官网下载对应版本的额包http://www.apache.org/dyn/closer.lua/sqoop/1.99.5设置配置文件/home/dba/sqoop2-1.99.5-cdh5.7.0/server/
aoerqileng
·
2016-04-29 17:00
解决NameNode配置HA后Hive路径不正确的问题
解决NameNode配置HA后Hive路径不正确的问题在
CDH5.7
下,配置了NameNode的HA后,Hive无正常查询数据了,但是其他的组件HDFS,HBase,Spark都正常的。
kwu_ganymede
·
2016-04-25 18:26
Hive
解决NameNode配置HA后Hive路径不正确的问题
解决NameNode配置HA后Hive路径不正确的问题在
CDH5.7
下,配置了NameNode的HA后,Hive无正常查询数据了,但是其他的组件HDFS,HBase,Spark都正常的。
kwu_ganymede
·
2016-04-25 18:00
hive
CDH5.7
快速离线安装教程
解决方案:一、简介CDH是cloudera公司开发的一个快速部署、高效管理Hadoop和其各种组件的一个商业化产品。主要分为两部分,分别为ClouderaManager和CDH软件包。其中ClouderaManager负责集群的部署与管理。CDH软件包囊括了hdaoop各类的组件的安装包,例如hive、hdfs、Spark等等。由于实验室服务器集群实现了硬件虚拟化,要在虚拟资源重新搭建CDH集群。
u010022051
·
2016-04-21 09:00
上一页
1
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他