cdh5 第18页

Hadoop笔记：YARN环境搭建

Hadoop笔记：YARN环境搭建标签：大数据Hadoop笔记：YARN环境搭建伪分布式YARN环境搭建配置参数启动进程验证定制YARN相关的进程使用版本：hadoop-2.6.0-cdh5.7.0配置文件

Japson_z·2020-07-07 11:08

Hbase和zookeeper的详细安装配置亲测完美

Hadoop集群详细步骤1.到官网中下载zookeeper稳定版本的安装包(建议3.4.6)2.利用xshell中的xftp上传安装包到/opt目录下3.解压tar-zxvfzookeeper-3.4.5-cdh5.14.2

一个努力不用肯秋C V的程序员·2020-07-07 10:56

Cloudera Manager 5 和 CDH5 本地（离线）安装指南

原文地址：http://www.wangyongkui.com/hadoop-cdh5/系统环境4台联想R510服务器，其中master节点4核心、8GB，其它节点双核心、4GB。网卡：100M。

hjckevin·2020-07-07 09:06

【Spark】Spark On Yarn 环境搭建及 WordCount 程序原理深度剖析

环境搭建参考文献：http://spark.apache.org/docs/1.6.1/running-on-yarn.html（1）将配置文件/opt/cdh-5.3.6/hadoop-2.5.0-cdh5.3.6

魏晓蕾·2020-07-07 08:00

CentOS7安装Cdh5

配置均为2G+20G192.168.65.101n1192.168.65.102n2192.168.65.103d1192.168.65.104d22.必要的软件CDH离线安装镜像CDH-5.15.0-1.cdh5.15.0

god__send·2020-07-07 08:45

高可用集群搭建系列文章之七：Oozie 搭建

1、下载安装包，并解压下载地址（http://archive.cloudera.com/cdh5/cdh/5/oozie-4.1.0-cdh5.8.0.tar.gz），选择hadoop和oozie的对应版本

thinkhui·2020-07-07 07:44

BIgData 命令操作

ntpdatentp4.aliyun.com启动HDFS启动start-all.sh关闭stop-all.sh启动Spark启动cd/export/servers/spark-2.2.0-bin-2.6.0-cdh5.14.0

神说要有光，于是就有了我·2020-07-07 03:12

hadoop-2.6.0-cdh5.15.1源码编译添加压缩支持

文章目录1.前言1.1测试官方包压缩支持情况2.环境准备2.1系统环境2.2软件环境2.3必要的依赖库安装2.4解压JDK2.4解压Maven2.5配置Maven2.6安装protobuf2.7添加环境变量2.8测试软件安装3.编译环节3.1解压源码3.2修改hadoop源码的pom.xml仓库,添加阿里云和cloudera仓库地址(可选)3.3使用Maven编译hadoop并使其支持压缩3.4编

SUDDEV·2020-07-07 00:56

CDH 6.1 环境搭建图文教程

CDH6.1环境搭建图文教程（非生产环境）因为以前搭建过CDH5.10本次教程在三台虚拟机centos7里面，提供一个CDH6.1基础的搭建对CDH6.x的版本熟悉一下检查环境关闭防火墙#检查防火墙状态

善皮之·2020-07-06 23:17

Flink如何连接hive

回顾在上篇文章中，笔者使用的CDH版本为5.16.2，其中Hive版本为1.1.0（CDH5.x系列Hive版本都不高于1.1.0，是不是不可理解），Flink源代码本身对Hive1.1.0版本兼容性不好

贝拉美·2020-07-06 20:11

Hive数据仓库ODS层数据存储设计

软件环境Hadoop2.6.0-cdh5.9.0Hive1.1.0-cdh5.9.0Zookeeper3.4.5-cdh5.9.0需求背景数据来源是将8台服务器日志各自压缩成*.gz(8个gz文件)后，

RotKang·2020-07-06 11:57

06.Hadoop:YARN环境搭建

YARN环境搭建1.系统环境：OS：CentOSLinuxrelease7.5.1804(Core)CPU：2核心Memory：1GB运行用户：rootJDK版本：1.8.0_252Hadoop版本：cdh5.16.22

負笈在线·2020-07-06 10:18

CDH hadoop-hdfs-fuse的安装使用

参考文档：http://www.cloudera.com/documentation/cdh/5-1-x/CDH5-Installation-Guide/cdh5ig_hdfs_mountable.html

wulantian·2020-07-06 07:01

求助帖：hive配置启动时遇到如下错误

[hadoop@hadoop001hive]$bin/hivels:cannotaccess/home/hadoop/app/spark-2.1.0-bin-2.6.0-cdh5.7.0/jars/*.

weixin_42878425·2020-07-06 04:53

hadoop-2.6.0-cdh5.7.0伪分布式搭建

1，这个我们是直接在linux中下载hadoop-2.6.0-cdh5.7.0，（当然你也可以在本地下载后再上传，这步就可以忽略）首先确保你的虚拟机有网络，可以先ping百度测试有网没，如下代码就是有网络的情况

总分全班倒数第一·2020-07-06 03:10

Zk学习笔记——读取节点

参考：从Paxos到Zookeeper分布式一致性原理和实践使用的zk依赖是cdh5.16.2的3.4.5org.apache.zookeeperzookeeper3.4.5-cdh5.16.2代码，在初始化

tonglin0325·2020-07-05 23:00

hive 未初始化元数据库报错

启动hive-metastore和hive-server2用beeline连接hive报错[root@node04hive]#beelineBeelineversion0.13.1-cdh5.3.0byApacheHivebeeline

weixin_33834075·2020-07-05 23:39

报错：org.apache.hadoop.hive.metastore.HiveMetaException: Failed to get schema version.

配置文件：/etc/hive/confhive-site.xml命令目录：/opt/cloudera/parcels/CDH-5.15.1-1.cdh5.15.1.p0.4/lib/hive/bin报错现象

weixin_30483697·2020-07-05 21:43

[Spark] spark-shell 命令使用

环境：操作系统：CentOS7.3Java:jdk1.8.0_45Hadoop：hadoop-2.6.0-cdh5.14.0.tar.gz1.spark-shell使用帮助[hadoop@hadoop01

cindysz110·2020-07-05 20:24

解决 Unable to retrieve remote parcel repository manifest

com.cloudera.parcel.components.ParcelDownloaderImpl:Unabletoretrieveremoteparcelrepositorymanifest这个错误就是你机器没有没有联网，访问不到：https://archive.cloudera.com/cdh5

周天祥·2020-07-05 18:58

sqoop安装与案例介绍

下载地址：http://archive.cloudera.com/cdh5/cdh/5/sqoop-1.4.5-cdh5.3.6.tar.gz参考：http://archive.cloudera.com

谢雪葵·2020-07-05 17:22

使用Kettle向CDH集群中Hive导入数据表

Hive导入数据表使用Kettle向CDH集群中Hive导入数据表步骤概览详细步骤环境准备环境配置数据抽取过程开发CDH集群搭建好了，需要向Hive中导入数据，环境如下：CDH版本：Hadoop2.6.0-cdh5.15.0Kettle6.0JDK1.8Oracle11g

俊不见高堂明镜·2020-07-05 15:45

CDH5.11.0安装启动hive过程org.apache.hadoop.hive.metastore.HiveMetaException: Failed to load driver

解决文章：http://blog.csdn.net/brotherdong90/article/details/49661731,通过ClouderaManager添加Hive服务，在启动Hive的时候遇到错误：.org.apache.hadoop.hive.metastore.HiveMetaException:Failedtoloaddriver这种情况，猜测是缺少jdbc驱动，于是添加jdb

_小海_·2020-07-05 15:36

HBase详细概述

不过在此之前，你可以先了解Hadoop生态系统，若想运行HBase，则需要先搭建好Hadoop集群环境，可以参考此文搭建5个节点的hadoop集群环境（CDH5）。好了，让我们来学习HBase吧！

沐茈静·2020-07-05 15:50

HBase-0.96.1.1-cdh5.0.1 单机、伪分布式、完全分布式

概述搭建hbase-0.96.1.1-cdh5.0.1单机环境，伪分布式，完全分布式一单机模式安装在单机模式中，HBase使用本地文件系统，而不是HDFS，所有的服务和zooKeeper都运作在一个JVM

shihlei·2020-07-05 11:55

CDH5.9集群安装要点

CDH5.9集群安装要点一、用vmware安装1台linux虚拟机，后续直接克隆出多台虚拟机1、采用centos6.764位2、为了节省固态硬盘空间，用最小化安装二、linux虚拟机配置1、修改hostnamehostnamevi

renccvip·2020-07-05 08:19

cdh5使用cloudera-manager-installer.bin离线安装

1.硬件准备一个2台节点集群，Host对应关系如下：192.168.0.168h168192.168.0.169h1692.软件准备系统环境CentOS6.5CDH-5.1.3-1.cdh5.1.3.p0.12

车路士_4everBLUE·2020-07-05 05:10

后来我使用了CM5.13.3spark2kafka3.1.1解决了很多疑难杂症——搭建

tar.gzscala-2.11.8.tgzClouderaManager安装包cloudera-manager-centos7-cm5.13.3_x86_64.tar.gzCDH相关包CDH-5.13.3-1.cdh5.13.3

challengedream·2020-07-05 03:11

phoenix安装---安装系列十

承接安装系列hadoop,hbase部署到（cdh5.5.1）安装flume下载安装包并解压flume-ng-1.6.0-cdh5.5.1.tar.gz配置环境变量：~/.bash_profileexportFLUME_HOME

李孟lm·2020-07-05 03:56

Kettle链接Hadoop的配置过程

版本：Kettle：7.1.0.0-12Hadoop：Hadoop2.6.0-cdh5.10.21、启动SpoonSpoon是Kettle图形化开发工具。

mikeliuy·2020-07-04 23:07

CentOS7 离线安装 CDH5

参考文章：CentOS7安装CDH第五章：CDH的安装和部署-CDH5.7.0CentOS7安装CDH第四章：CDH的版本选择和安装方式CentOS7安装CDH5.14.0过程全纪录----------

风情客家__·2020-07-04 20:27

cloudera cdh编译carbondata

carbondata编译，官方的git文档上只说明了如何使用原生spark编译，我们使用的是cdh版，所以编译命令是：mvn-DskipTests-Pspark-1.6-Dspark.version=1.6.0-cdh5.10.2cleanpackage

fz1989·2020-07-04 16:18

《Hadoop安装教程》---大数据系列

所需软件安装包：hadoop-2.6.0-cdh5.7.0.tar.gzjdk-8u172-linux-x64.tar.gz在centos中以下链接就可以下载所需的软件安装包wgethttp://archive.cloudera.com

xbmchina·2020-07-04 11:42

centos7.3-cdh5.14安装（二）

这篇安装教程不使用cloudera-manager-installer.bin方式进行安装，环境准备可以参考https://www.jianshu.com/p/80a8527c90e8，这些步骤都是一样的，主要的区别在于软件的安装过程二.软件准备：cloudera-manager.repo下载地址：http://archive.cloudera.com/cm5/redhat/7/x86_64/cm

cyclone_29·2020-07-04 08:27

hadoop集群环境下hive安装的详细步骤

文章目录一、hive安装前必备步骤1.hadoop集群搭建2.MySql安装（建议在非主节点的虚拟机上安装）二、安装hive（安装在主节点上）1.将hive拖入到opt文件夹2.解压hive-1.1.0-cdh5.14.2

:）คิดถึง·2020-07-04 03:34

内置zookeeper 来进行hbase简易安装步骤

1下载http://archive.cloudera.com/cdh5/cdh/5/hbase-0.98.6-cdh5.3.6.tar.gz2解压tar-zxvfxxx3修改conf/hbase-env.shJAVA_HOME

谢雪葵·2020-07-04 02:33

sqoop把mysql导入hive时报错：Could not load org.apache.hadoop.hive.conf.HiveConf.

环境：CDH5.7hadoop2.6.0hive1.1.0问题1：使用sqoop把mysql导入hive时报错#sqoopimport--hive-import--connectjdbc:mysql:/

常飞梦·2020-07-04 00:26

hadoop,hbase,hive,sqoop等大数据相关安装详细说明

安装包网上下载1.hadoop-2.6.0-cdh5.4.0.tar.gz2.scala-2.10.4.tgz3.sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz4.

iteye_8936·2020-07-04 00:46

Alex 的 Hadoop 菜鸟教程: 第21课不只是在HBase中用SQL：Phoenix

声明本文基于Centos6.x+CDH5.x什么是PhoenixPhoenix的团队用了一句话概括Phoenix："WeputtheSQLbackinNoSQL"意思是：我们把SQL又放回NoSQL去了

alexxiyang·2020-07-02 13:21

Sqoop的使用帮助

#查看命令帮助[hadoop@hadoop~]$sqoophelp20/06/0618:07:14INFOsqoop.Sqoop:RunningSqoopversion:1.4.6-cdh5.16.2usage

guaren2009·2020-07-02 13:09

CDH升级Spark2异常java.lang.NoClassDefFoundError: org/apache/hadoop/fs/FSDataInputStream

最近为了适配客户版本，搭建了CDH5.16版本的数据数据环境。

mlwise·2020-07-02 12:39

Sqoop部署

#解压并创建软连接[hadoop@hadoopsoftware]$tar-xvfsqoop-1.4.6-cdh5.16.2.tar.gz-C..

guaren2009·2020-07-02 12:50

flink python 从csv读取,写入csv

环境centos6.5Python2.7CDH5.15flink1.9获得pyflink库pyflink库在flink安装路径opt/python下$cd/usr/local/flink/opt/python

zhiliang-chen·2020-07-02 08:19

Centos6.7 + CDH5.4.5 集群环境离线安装

集群内所以机器以root用户安装，使用统一密码**操作系统：Centos6.7CDH版本：CDH-5.4.52.安装文件准备：CDH下载|CloudreaManager5下载文件下载链接CDH-5.4.5-1.cdh5.4.5

灏喾·2020-07-02 01:37

HBase的安装部署

前提已经安装好hadoop和zookeeper下载本次采用的是cdn版本，下载地址，版本是hbase-1.2.0-cdh5.15.1解压，配置环境变量解压命令：tar-zxvfhbase-1.2.0-cdh5.15.1

senga07·2020-07-02 00:16

SparkStream整合Flume和Kafka

版本说明apache-flume-1.6.0-cdh5.15.1-binkafka_2.11-0.9.0.0scala-2.11.12apache-maven-3.3.9spark-2.4.4-bin-