cdh5 第28页

Cloudera Manager和CDH升级流程

ClouderaManager6.0可以管理运行CDH5.7到CDH5.14的集群，只要Clouder

ClouderaHadoop·2019-06-03 14:46

java:jdbc连接hive2,1.1.0-cdh5.7.6版本

blog.csdn.net/zyzzxycj/article/details/79268754命令：jps找到RunJar的id命令：lsof-g204273|grephive-service所以找到版本是：1.1.0-cdh5.7.6

OutRoading·2019-06-01 12:42

Apache atlas 在CDH集群下的搭建问题及措施

综合同步CDH5.7.1hive和hbase经验，总结以下修改步骤：(1)import-hive.sh和import-hbase.sh路径：addons\hbase-b

Mr_小白不白·2019-05-31 16:46

【大数据----Spark】【CDH】spark集群环境搭建

1.环境spark-1.6.0-cdh5.12.0centOS6.5hadoop-2.6.0-cdh5.12.0jdk1.8.0_144scala2.12.3服务器规划HostNameServerIPRemarknode1

Sunny3096·2019-05-31 08:06

CDH5.16.1集群企业真正离线部署

⼀.准备⼯作1.离线部署大纲MySQL离线部署CM离线部署Parcel⽂件离线源部署2.规划linux版本:CentOS7.2节点MySQL组件Parcel⽂件离线源CM服务进程⼤数据组件hadoop001MySQLParcelAlertPublisherEventServerNNRMDNNMZKhadoop002AlertPublisherEventServerDNNMZKhadoop003Ho

Stitch_x·2019-05-28 21:30

Sqoop的简单使用

2、Sqoop的安装步骤Sqoop选择版本sqoop-1.4.5-cdh5.3.6，安装步骤如下：

Jorocco·2019-05-24 10:59

Hive On Tez

www-us.apache.org/dist/tez/0.9.2/apache-tez-0.9.2-bin.tar.gz2、配置Tez1）将$TEZ_HOME/share/tez.tar.gz上传至HDFS：hdfs:///cdh5

Michael-JOE·2019-05-23 23:16

hadoop2.6.0-cdh5.8.3安装

在搭建hadoop高可用之前先要搭建zookeeper：参考官方文档进行安装部署http://zookeeper.apache.org/doc/r3.4.5/zookeeperAdmin.html#sc_systemReq1.vim/etc/hosts添加：192.168.12.51cm01192.168.6.92cm02192.168.9.54cm032.vim/etc/hostname改成相应

monitor_bird·2019-05-23 17:28

impala创建kudu表过程，并发时异常

1.环境impala版本2.11.0-cdh5.14.0，kudu版本2.11.0-cdh5.14.02.问题现象最近使用impala+kudu时遇到个问题，有个程序会定时通过jdbc来创建kudu表，

1032851561·2019-05-22 15:26

CDH5.10.0 KYLIN2.6 SPARK2.1 心得

hostname不能有下划线#先执行了卸载mariajavacp了环境变量exportJAVA_HOME=/usr/local/jdk1.8.0_191exportM2_HOME=/usr/local/mavenexportCLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jarexportJRE_HOME=$JAVA_HOME/jree

dian张·2019-05-20 18:07

hadoop和hive单机部署

hadoop和hive单机部署本文hadoop安装的是Hadoop-2.6.0-cdh5.7.0版本,hive是hive-1.1.0-cdh5.7.0版本1.hadoop安装1.1jdk安装jdk的安装包在

丿灬逐风·2019-05-20 18:53

thrift.transport.TTransport.TTransportException: TSocket read 0 bytes报错解决

一、问题描述htrift版本：2.0.0-cdh6.0.1hbase版本：1.2.0-cdh5.7.0使用thriftclientwithpython连接hbase报错：File"C:\Users\HP

我心依依旧·2019-05-20 17:06

Spark ML（3）：回归算法实现（线性回归、逻辑回归）

一、环境配置1.spark2.1.0-cdh5.7.0（自编译）2.cdh5.7.03.scala2.11.84.centos6.4二、环境准备1.spark客户端调试环境搭建参考：https://blog.csdn.net

RayBreslin·2019-05-18 11:20

Ubuntu18.04安装Hadoop环境 Docker+Cloudera CDH5.13.0

Ubuntu18.04+Docker+ClouderaCDH5.13.0docker镜像cloudera-quickstart安装dockerdocker导入镜像Clouderadocker版本的启动命令

bingoingT_T·2019-05-18 00:46

如何将jar包安装到本地maven仓库

maven仓库地址：https://mvnrepository.com/下载jar包maven安装jar包命令：org.apache.kudukudu-spark2_2.111.6.0-cdh5.14.0test

Demon_gu·2019-05-16 17:17

离线安装cdh5.16.1

前置说明：集群之间的机器时间需要一致，本文是基于阿里云ecs安装测试，故省去安装ntp步骤。安装jdk过于简单，本文也略过该步骤，本文是基于jdk1.8。机器配置：机器名配置说明hadoop0012cpu8G内存centos7.6cloudera-managermysqlhttpdhadoop0022cpu8G内存centos7.6hadoop0032cpu8G内存centos7.61.安装apa

catcher92·2019-05-11 21:40

sqoop报错以及解决:Access denied for user 'root'@'172.16.21.22' (using password: YES)

在使用sqoop进行导入导出的时候出现了错误：Warning:/apps/sqoop-1.4.6-cdh5.13.2/../hcatalogdoesnotexist!

ZhuangYQ丶·2019-05-10 20:35

vmware14安装CetOS7搭建cdh5.13.3环境（三）

创建：2019-4-2816:44:09前提：启动服务内存设置大小为4GB，硬盘20GB足够。systemctlstartmysqld.service[root@izuf634p00rctpsgizg64oz~]#/opt/cm-5.13.3/etc/init.d/cloudera-scm-serverstartStartingcloudera-scm-server:[OK][root@izuf6

ninja59k·2019-05-10 06:51

搜索引擎：Elasticsearch、Solr、Lucene

word文档下载链接：日萌社原创点击打开链接请到日萌社的C/C++板块中的置顶帖中回复查看度娘链接下载【日萌社】用户画像【日萌社】C、C++笔记【日萌社】JavaWeb+大数据笔记【日萌社】CDH6、CDH5

日萌社·2019-05-09 23:52

CDH环境搭建及部署

CDH部署主要有以下几个部分：（以cdh5.1.3为例，系统环境为centos6.5）测试环境建议以root用户建立,可以减少一些权限的设置1设置集群环境，比如安装jdk，在作为master机器上安装mysql

时空守望者·2019-05-08 09:26

Hive兼容底层Json格式文件的方法

其实目前已经有jar包支持了，答案如下：不解释，直接看语句：addjar/opt/cloudera/parcels/CDH/jars/hive-hcatalog-core-1.1.0-cdh5.5.1.

--Alvin--·2019-05-07 10:21

【Spark实战】慕课网日志分析：Hadoop环境配置和基本操作

重要路径说明：app：所有软件的安装目录software：安装包目录data：测试数据目录source：软件源码目录app/hadoop-2.6.0-cdh5.7.0/bin：包含客户端相关的脚本app

w8ed·2019-05-03 10:38

Spark2.4.2源码编译

maven.apache.org/download.cgispark：2.42https://archive.apache.org/dist/spark/spark-2.4.2/hadoop版本：hadoop-2.6.0-cdh5.7.0

bigdata_lzw·2019-04-29 11:15

spark-2.4.2.tgz下载及编译

software#存放应用压缩包data#存放测试数据lib#存放jar包source#存放源码下载需要的软件及版本apache-maven-3.6.1-bin.tar.gzhadoop-2.6.0-cdh5.14.0

Stitch_x·2019-04-29 01:15

CDH版本Hadoop下载

下载地址：http://archive.cloudera.com/cdh5/cdh/5/你想下载得tgz包示例：http://archive.cloudera.com/cdh5/cdh/5/hadoop

Stitch_x·2019-04-28 11:01

vmware14安装CetOS7搭建cdh5.13.3环境（二）

创建时间：2019-4-2810:38:26。一、创建数据库createdatabasehiveDEFAULTCHARSETutf8COLLATEutf8_general_ci;createdatabaseamonDEFAULTCHARSETutf8COLLATEutf8_general_ci;createdatabasehueDEFAULTCHARSETutf8COLLATEutf8_gener

ninja59k·2019-04-28 10:21

手把手教你在centos7下搭建大数据CDH5.15.2平台（5个节点）

1、CDH的介绍1.1CDH是什么？hadoop是一个开源项目，所以很多公司在这个基础进行商业化，Cloudera对hadoop做了相应的改变。Cloudera公司的发行版，我们将该版本称为CDH（ClouderaDistributionHadoop）。截至目前为止，CDH共有5个版本，其中，前两个已经不再更新，最近的两个，分别是CDH4在ApacheHadoop2.0.0版本基础上演化而来的），

huicooling·2019-04-27 22:17

vmware14安装CetOS7搭建cdh5.13.3环境（一）

创建：2019-4-2522:37:00更新参考资料：Centos7离线安装ClouderaManager5和CDH5.13.0https://blog.csdn.net/Tx_Smile/article

ninja59k·2019-04-25 22:55

hive编译源码支持自定义UDF函数

在工作中，我们需要用到自定义UDF函数：1.可以创建持久函数2.也可以将其编译在源码中本文档以源码编译的方式使用，下面为编译步骤；下载源码包wget http://archive.cloudera.com/cdh5

bigdata_lzw·2019-04-24 09:57

Kylin 集群搭建

软件下载下载地址：https://archive.apache.org/dist/kylin/apache-kylin-2.3.2/1.2.2解压tar-zxvfapache-kylin-2.3.2-bin-cdh57

人情世故2017·2019-04-20 20:36

cdh配置lzo压缩格式

lzo文件创建index；2.lzo格式的文件，通过hive执行同样的查询操作时要比其它格式慢几倍之多；总结：暂时不建议使用lzo压缩环境：系统：Centos7.5hadoop：hadoop-2.6.0-cdh5.7.0

bigdata_lzw·2019-04-19 13:54

cdh编译安装支持各种压缩格式

hadoop安装包中,并没有native包,不支持各个任务阶段的压缩功能，但在生产任务中是必须要支持压缩功能的，所以要对CDH进行编译以支持压缩功能；本次编译使用的各软件版本：cdh：hadoop-2.6.0-cdh5.7.0

bigdata_lzw·2019-04-18 11:29

phoenix的安装

+Hadoop2.6.0-cdh5.7.

酒精灯_·2019-04-18 10:46

hue-3.9-cdh-5.7.0安装

1.下载安装包下载地址：http://archive.cloudera.com/cdh5/redhat/5/x86_64/cdh/5.7.0/RPMS/x86_64/#一共是15

丿灬逐风·2019-04-18 00:22

基于CDH5.12安装Kylin及官方用例测试

1kylin简介ApacheKylin是2013年由eBay在上海的一个中国工程师团队发起的、基于Hadoop大数据平台的开源OLAP引擎，它采用多维立方体预计算技术，利用空间换时间的方法，把很多分钟级别乃至小时级别的大数据查询速度一下子提升到了亚秒级别，极大地提高了数据分析的效率，填补了业界在这方面的空白。该引擎为超大规模数据集上的交互式大数据分析打开了大门。2软件下载社区版kylin下载地址：

XIAO的博客·2019-04-17 18:00

CentOS7+CDH5.14.0安装全流程记录，图文详解全程实测-8CDH5安装和集群配置

ClouderaManagerServer和Agent都启动以后，就可以进行CDH5的安装配置了。

weixin_33842304·2019-04-12 18:00

Hadoop运维记录系列（二十七）

访问源码如下，使用pyspark2.1.3，基于CDH5.14.0hive1.1.0+parquet，其中select的部分会访问hdfs加密区域。

Slaytanic·2019-04-10 18:37

hadoop-2.6.0-cdh5.7.0源码编译支持压缩

准备：解压hadoop-2.6.0-cdh5.7.0.tar.gz源码包，看到里面有个BUILDING.txt文件，里面列出了编译所需依赖组件。

Wish大人·2019-04-10 00:00

CDH5.10.2升级到CDH5.15.0常见的2个错误，Oozie和Hive Metastore

1、在CDH从5.10.2升级到5.15.0之后，oozie警告”OozieServer内部版本(4.1.0-cdh5.15.0)与OozieServer共享库版本(4.1.0-cdh5.10.2)不匹配

hblicy·2019-04-09 15:25

CDH集群部署

官网解读CDH5.12.1官网文档链接spark2与kafka之类的安装文档Linux本次搭建采用Centos7.2，而官网提示RHEL/CentOS/OEL7.0isnotsupported.

一只kaokaola·2019-04-08 14:42

大数据应用笔记:Phoenix +HBASE 在JAVA应用中错误一例“hbase.DoNotRetryIOException”

JAVA8+Mybatis+SpringMVC框架下，无论是通过phoenix-4.14.0-cdh5.14.2-client.jar驱动来查询数据表还是通过SQuirrel客户端工具查询界面来访问该数据表

安优小青和他的程序生活·2019-04-08 12:45

Hadoop HA部署(QJM)

准备三台Linux虚拟机(这里是centos7.5，我将其分别命名为hadoop001、hadoop002、hadoop003)jdk1.8.0_151hadoop-2.6.0-cdh5.7.0zookeeper

好笨的菜鸟·2019-04-08 03:47

hadoop之hadoop-2.6.0-cdh5.7.0源码编译支持压缩以及伪分布式部署

摘要：本文详细记载hadoop-2.6.0-cdh5.7.0源码编译支持压缩以及伪分布式部署的详细步骤，可用于学习以及生产参考1.需求与设计1.1需求直接使用的hadoop-2.6.0-cdh5.7.0

qq_32641659·2019-04-07 20:01

CDH5.14集成ranger0.5.3步骤

CDH5.14的hive版本是1.1.0，经过1周的尝试，开始选择了ranger最新版本1.2.0，最后jdbc连接时因为hive-jdbc版本和hive版本不匹配报错，所以选择ranger0.5.3版本做了集成测试

choulanlan·2019-04-04 11:14

Storm安装笔记

141-143]CentOSrelease6.7(Final)64位JDK1.7.0_80ItisstronglyrecommendedtouseOracleJDKratherthanOpenJDK.CDH5.7.0

怪兽·2019-04-04 00:00

解决spark streaming长时间运行日志不断增长问题

@[TOC](解决sparkstreaming长时间运行日志不断增长问题)组件：基于CDH5.13、spark2.2.X背景：由于sparkstreaming是7*24小时不间断运行的，日志必然会越来越多到最后大的惊人

学木·2019-03-31 11:26

05-2-3cdh搭建之mysql搭建和jdk

cdh之mysql的搭建cdh5.10~5.16支持mysql5.15.55.65.7cdh5.1~5.9支持5.15.55.6cdh5.0支持5.15.5线上我们用的是mysql5.6ClouderaManager

马吉辉·2019-03-28 11:23

CDH安装: rpm包+parcel

由于网络不稳定，下载rpm包经常中断，不方便完成任务，所以通过wget下载：nohupwget-t0-w10-c-r-nd-np-L-phttp://archive.cloudera.com/cdh5/

根哥的博客·2019-03-21 15:18

通过CDH5 Hadoop读取和写入OSS数据

CDH5中的Hadoop2.6版本不支持OSS。本文介绍如何配置CDH5支持OSS读写。由于CDH5的h

常飞梦·2019-03-21 11:58

七、GP安装-搭建hadoop环境

客户端在master节点，上传hadoop安装包到/opt/greenplum目录，hadoop客户端的版本根据hadoop集群版本而定，执行如下命令进行解压：tar-xvzfhadoop-2.6.0-cdh5.7.6

荷籽花结·2019-03-20 19:43

推荐频道

cdh5