cdh5 第22页

Sentry权限赋权示例

nhive-phive-dorg.apache.hive.jdbc.HiveDriverConnectingtojdbc:hive2://host1:10000/Connectedto:ApacheHive(version1.1.0-cdh5.10.2

tuuuuski·2020-06-23 16:13

CDH集群的搭建及简单使用

：servicehttpdstart建立CMRPM包和parcels源的目录：mkdir-p/var/www/html/cm5/redhat/6/x86_64mkdir-p/var/www/html/cdh5

hua_ed·2020-06-23 15:19

通过http调用操作hue管理的oozie

前提关闭csrf验证编辑/opt/cloudera/parcels/CDH-5.8.3-1.cdh5.8.3.p0.2/lib/hue/desktop/core/src/desktop/settings.py

hua_ed·2020-06-23 15:48

[Flume基础]-- 使用Kafka与Flume

一、描述在CDH5.2及更高版本中，Flume包含Kafka源和sink。使用这些从Kafka到Hadoop或从任何Flume源到Kafka的流数据。

highfei2011·2020-06-23 14:06

Oozie实例

oozie-examples.tar.gztar-zxvfoozie-examples.tar.gz解压完成后会创建一个examples文件夹将程序上传到HDFS的家目录bin/hdfsdfs-put/opt/cdh-5.3.6/oozie-4.0.0-cdh5.3.6

H_Hao·2020-06-23 13:31

CDH中添加Elasticsearch服务

目前测试该方法适用于CDH5.X和6.X版本，对于6.X版本需要稍

果粒多·2020-06-23 11:55

Phoenix的搭建和使用

apache/phoenix|Download|Performance|支持的SQL语法CDH6中集成的HBase版本为2.1.0+cdh6.2.0,我们从官方的镜像资源下载列表中看到最新的CDH支持到cdh5.14.2

YoreYuan·2020-06-23 10:12

Flume实战案例之整合Kafka实现日志采集

目标将A服务器上的日志实时采集到B服务器技术选型版本说明flume：apache-flume-1.6.0-cdh5.15.1-binkafka：kafka_2.11-0.9.0.0配置文件A服务器Flume

senga07·2020-06-23 09:42

CDH5.8 HUE的使用（那些年走过的坑）

HUE=HadoopUserExperienceHue是一个开源的ApacheHadoopUI系统，由ClouderaDesktop演化而来，最后Cloudera公司将其贡献给Apache基金会的Hadoop社区，它是基于PythonWeb框架Django实现的。通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据，例如操作HDFS上的数据，运行MapReduc

gao123456789amy·2020-06-23 09:11

CM离线安装CDH5.5.0

环境准备：本机：mac虚拟机软件：parallelsdesktop虚拟机系统：Linux-CentOS6.564位主节点：master（1台）从节点：slave1（1台）原先设置了俩台从节点，资源太紧张，导致各种问题。做实验只能先部署俩台了。mster节点内存最少4G，slave1最少1G。系统准备：1.修改主机名：vim/etc/sysconfig/networkNETWORKING=yesHO

撸依天·2020-06-23 09:18

CDH集成Kylin

CDH集成Kylin下载地址：下载CDH5版本Kylin一、安装启动1.上传并解压下载的tar包tar-zxvfapache-kylin-2.6.4-bin-cdh57.tar.gz-C/opt/cdh

IORILYCY·2020-06-23 05:21

入门篇：从零到一搭建大数据开发平台（五）Hive安装部署教程(derby单机版不推荐强烈推荐集群式)

环境：VMware15.5Pro【安装传送门】CentOS6.9【安装传送门】JKD1.8【安装传送门】Hadoop2.6-CDH5.15【安装传送门】一、derby单机版（了解即可不推荐学习）1、上传安装包和

BigData攻城狮·2020-06-23 05:39

给hive的metastore做JVM优化

最近在测试环境下，hive的metastore不稳定，于是做一次JVM优化在hive-env.sh中exportHADOOP_HOME=/opt/cdh/hadoop-2.6.0-cdh5.14.0if

diaojing1918·2020-06-23 04:48

完整CDH搭建，适用于Docker下安装CDH

1.1环境说明CentOS6.9JDK1.8CDH5.14.0ClouderaManager5.14.0MySql5.1.73JDBCmysql-connector-java-5.1.32-bin.jar1.2CDH

得过且过1223·2020-06-23 04:27

spark-sql部署实现与Hive交互

spark-sql部署版本Hadoop-2.5.0-cdh5.3.2Hive-0.13.1-cdh5.3.2Spark-1.5.1以CNSH001节点为例sparkmaster在CNSH001上：spark

developerinit·2020-06-23 03:52

史上最全cdh安装详细教程

版本中的安装以后会推出.这篇文档将着重介绍Cloudera管理器域CDH的安装,并基于以下假设:>>操作系统版本:centos6.8>>MySQL数据库版本:5.6.24>>CM版本:CM5.12.1>>CDH版本:CDH5.12.1

流一恩典·2020-06-23 02:49

HBase的常用API

clouderahttps://repository.cloudera.com/artifactory/cloudera-repos/org.apache.hadoophadoop-client2.6.0-mr1-cdh5.14.0o

彭于晏郑州分晏·2020-06-23 02:45

CDH5.12.0集群离线安装

第一、前置准备1、基础环境规划操作系统：CentOSLinuxrelease7.4.1708(Core)CDM版本:5.12.1CDH版本：5.12.1MySQL版本:5.7.13浏览器版本:ChromeStandalone_56以上、IE10内存:16G以上CPU:8core网络:千兆以上2、主机用途规划主机名称IP地址用途备注cdh01.domain172.27.9.191cm、namendo

陌小铠·2020-06-23 02:32

如何在CDH5.12集群中启用Kerberos认证

参考链接:https://www.cloudera.com/documentation/enterprise/5-8-x/topics/security.html一、前置准备1、基础环境说明操作系统：CentOS6.8minimalCDM版本:5.12.1CDH版本：5.12.1MySQL版本:5.1.73JDK:1.8.0_131浏览器版本:ChromeStandalone_56以上、IE10内

陌小铠·2020-06-23 02:56

spark SQL集成Hive

一、Hive的安装和配置解压$tar-zxvf~/hive-0.13.1-bin.tar.gz-C/opt/cdh5.7.0/创建hive仓库和tmp目录$bin/hdfsdfs-mkdir-p/user

Wantonn·2020-06-23 02:48

zookeeper整合kafka

安装zookeeper集群1.将zookeeper-3.4.5-cdh5.3.6.tar.gz拷贝到spark1的/usr/local目录下。

祗要习惯就好·2020-06-22 23:11

hadoop整合flume

安装flume1、将flume-ng-1.5.0-cdh5.3.6.tar.gz拷贝到spark1的/usr/local目录下。

祗要习惯就好·2020-06-22 23:11

HBase的java客户端

工作中用到的HBase版本是1.2.0-cdh5.12.0，使用的开发工具是IDEA,简单的写一个Demo。

cy_wtt_ysys·2020-06-22 22:06

cloudera manager 升级到jdk1.8

CDH5.11自带的是spark1.6，在把spark升级到2.2之后，添加服务，执行服务Spark2上的命令部署客户端配置阶段报错。

浮生物语QAQ·2020-06-22 21:24

Hadoop cdh版本搭建

[在这里插入图片描述](https://blog.csdn.net/liangzelei/article/details/80359461述本文是针对LinuxCentos7服务器与CDH5.11的安装手册

cdmazzq·2020-06-22 20:21

CDH5.9 hive查询表注释为乱码解决方法

hive元数据库用的是MySQL创建表后，用desc在hive中查看表信息，注释显示乱码。解决方案如下：1进入mysql，执行showcreatedatabasehive查看hive数据库当前编码，如果是utf8则执行下面sqlalterdatabasehivedefaultcharactersetlatin1将hive数据库默认编码改成latin12执行下面sql，修改表usehive;alte

bsf5521·2020-06-22 19:30

windows版docker desktop里，启动用kubernetes管理的容器

系列前言最初是想用虚拟机做大数据开发的，还特地搞了包括完整CDH5的iso镜像，希望能在单机上启动完整的CDH集群。

傲慢程序员·2020-06-22 18:43

hue端查看任务日志报错

环境：CDH5.14.0,HIVE,YARN,HDFS都是cdh默认的版本背景：配置资源池的时候将resourcemanager的权限从*改为指定用户和group现象：在hue中执行workflow后看不到日志报错

向阳飞行·2020-06-22 18:43

Apache Kylin 2.3.1 安装,基于CDH5

环境信息：Linux系统Redhat7CDHCDH5.14.3jdk1.8apachekylin2.3.1下载地址：apachekylin地址：forcdh5apachekylin2.3.1官网地址：http

belialxing·2020-06-22 17:17

HBase的java代码开发（通过startRowKey和endRowKey进行扫描）

clouderahttps://repository.cloudera.com/artifactory/cloudera-repos/org.apache.hadoophadoop-client2.6.0-mr1-cdh5.14.0org.apache.hbasehbase-client1.2.0

神说要有光，于是就有了我·2020-06-22 17:15

flume学习（九）：使用Morphline Interceptor

kitesdk.org/docs/current/kite-morphlines/morphlinesReferenceGuide.html这里有一个注意点，是和clouderasearch版本有关系的，我是用CDH5.0.0

奔跑-起点·2020-06-22 17:34

json数据处理实战:Kafka+Flume+Morphline+Solr+Hue数据组合索引

CDH5.8.3服务器*3，安装Flume,Solr,Hue,HDFS,Zookeeper服务。

arli_xu·2020-06-22 15:47

oozie官方案例

oozieoozied.shstart在后台运行步骤：1、在oozie的根目录下找到oozie-examples.tar.gzoozie-examples.tar.gz2、解压：[[email protected]cdh5.3.6

田野里的秋刀鱼仔·2020-06-22 14:18

CDH5.12.1版本搭建记录

Cloudera简介为了构建一个以数据为驱动的业务场景，我们需要一个强大的管理工具去统一并安全地管理我们的业务数据，所以Cloudera做为一个强大的数据中心管理工具为此孕育而生。Cloudera不光提供了自己衍化重新封装的市场领先并100%开源的商业化ApacheHadoop发行版本（CDH,Cloudera’sDistributionincludingApacheHadoop）和相关的组件，其

yekanghui·2020-06-22 13:24

Hadoop的hadoop-config.sh脚本详解

先简要说明下我的读该脚本的环境，集群是CDH5.3，在研究命令行中hadoop-jar***.jar命令的相关脚本时，在hadoop文件中追到了hadoop-config.sh这个文件，所以下边的注解添加了我当前情况的处理

sunyang098·2020-06-22 11:11

单机到集群安装cdh5.16

1单机到集群安装cdh5.16cdh5.16单机到集群安装，通过VM虚拟机安装。

felix.shao·2020-06-22 10:20

大数据 java hive udf函数的示例代码（手机号码脱敏）

hiveudf函数4.1上传jar包到集群4.2修改集群hdfs文件权限4.3注册UDF4.4使用UDFHiveUDF函数1POM文件4.0.0填写自己的组织名称udf1.0-SNAPSHOTUTF82.6.0-cdh5.13.31.1.0

·2020-06-22 08:01

MAC上安装使用KYLIN(OLAP工具)完整版

转载请尊重原著：_木子_简单_@[email protected]软件版本：下载地址：http://archive.cloudera.com/cdh5/cdh/5/hadoop-2.5.0-cdh5.3.2hive

_木子_简单_·2020-06-22 07:51

Spark1.6.0编译（Hadoop版本2.6.0-cdh-5.7.0）

本地想玩耍spark，Hadoop其他环境都使用的是CDH5.7.0，本想一路下来继续使用cloudera提供的版本，但是官方编译的版本运行起来各种错误，所以先码一片文章，发扬奉献精神，走你>>>开始入坑

移动的红烧肉·2020-06-22 07:40

nodemanager异常 org.fusesource.leveldbjni.internal.NativeDB$DBException: Corruption: checksum mismatch

系统环境：ubuntu14.04serverclouderaCDH5.10共计28个节点。单节点内存128G。有6台机器是24核，22台机器是32核。

TheManOfCoding·2020-06-22 06:39

CDH5.8.4-Hadoop2.6.0安常见报错及解决方法

1.cdh2.6.0安装完成时报错启动hadoop集群时报错，如下:20/01/2322:27:03WARNutil.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswhereapplicable原因：导致该问题的改版本是因为${HADOOP_PREFIX}/lib

SimpleSimpleSimples·2020-06-22 05:46

Hadoop大数据解决方案学习笔记整理

±±+Hadoop±±+一、配置方面解压方面linux解压zip文件，命令：unzip如果没有该命令，可先安装，命令为：yum-yinstallunzip解压unziphadoop-2.6.0-cdh5.14.2

超级可爱的彤彤·2020-06-22 05:39

基于CDH5.12大数据基础环境部署

说明有些步骤看自己的情况而定！3.1.2Ip修改这里要使用固定IP，而centOS7已经没有setup命令，所以图形界面的设置已经没有了，这里只能修改配置文件，而且配置文件的名称还不固定，每个人的都可能不一样，这里我说一下位置，IP配置文件的位置：cd/etc/sysconfig/network-scripts/转存失败重新上传取消Viifcfg-ens33我们需要先修改BOOTPROTO的参数为

编程人生之路·2020-06-22 04:49

0481-如何从HDP2.6.5原地升级到CDH6.0.1

https://github.com/fayson/cdhproject提示：代码块部分可以左右滑动查看噢1文档编写目的编写本文主要是因为Fayson在上篇文章《0480-如何从HDP2.6.5原地迁移到CDH5.16.1

Hadoop_SC·2020-06-21 21:56

如何在CDH5.16.2中部署Apache Dolphin Scheduler 1.2.0

作者：黄立，长安汽车ApacheDolphinScheduler组件介绍分布式易扩展的可视化DAG工作流任务调度系统。致力于解决数据处理流程中错综复杂的依赖关系，使调度系统在数据处理流程中开箱即用。官网:https://dolphinscheduler.apache.org/en-us/Github:https://github.com/apache/incubator-dolphinschedu

Hadoop_SC·2020-06-21 21:24

为什么cdh5.3.6 oozie 4.0无法连接 hadoop ha，认不到share lib？

安装oozie有些问题，按照教程执行以下命令导入ooziesharelibsudo-uoozie/usr/lib/oozie/bin/oozie-setup.shsharelibcreate-fshdfs://cloud61-locallib/usr/lib/oozie/oozie-sharelib-yarn一直报Causedby:java.net.ConnectException:CallFro

河南骏·2020-06-21 19:42

Cloudera QuickStart VM安装使用

VM安装下载ClouderaQuickStartVMs有VMware,KVM,andVirtualBox和docker版本，目前最新镜像对应的CDH版本是CDH5.13.0。

ChuckSheng·2020-06-21 18:50

【Oozie】（三）Oozie 使用实战教学，带你快速上手！

Oozie定时任务/循环任务常见问题总结案例一：Oozie调度shell脚本目标：使用Oozie调度Shell脚本分步实现：1）解压官方案例模板[[email protected]cdh5.3.6

云祁·2020-06-21 17:02

Kafka Java API

系统环境LinuxUbuntu16.04jdk-7u75-linux-x64kafka_2.10-0.8.2.2zookeeper-3.4.5-cdh5.4.5eclipse-java-juno-SR2

Bee_Darker·2020-06-21 17:26

安装Linux centos7 CDH5主机运行状况不良完美解决方案

官方参考文档参考官网说明：https://docs.cloudera.com/documentation/enterprise/releasenotes/topics/cm_rn_known_issues.html查看官方文档：解决办法翻译过来就是：删除agent目录下面的cm_guid文件，并重启失败节点的agent服务恢复。cm_guid文件的内容大概是uuid，用于唯一标示agent隶属于哪

angelasp·2020-06-21 16:30

推荐频道

cdh5