CDH5

CDH5.8 HBase安装Phoenix

CDH5.8HBase安装Phoenix（部署到chd5.9）2016-10-1311:59353人阅读评论(2)收藏举报版权声明：本文为博主原创文章，未经博主允许不得转载。
javastart·2020-08-04 14:54

Spark大型项目实战：电商用户行为分析大数据平台

电商用户行为分析大数据平台（高端大数据项目实战课程）价值2250元课程目录：一、大数据集群搭建第1讲-课程介绍第2讲-课程环境搭建：CentOS6.4集群搭建第3讲-课程环境搭建：hadoop-2.5.0-cdh5.3.6
hr868686·2020-08-04 14:37

hive DDL 简单梳理

环境相关：OS：CentOSrelease6.9IP：192.168.77.10hadoop-2.6.0-cdh5.7.1hive-1.1.0-cdh5.7.1mysql5.11.相关说明学习hive的
VincentQB·2020-08-04 11:26

安装配置hive的n个坑

使用的cdh版本：hive-0.13.1-cdh5.3.3.tar.gz1hiveserver2启动后，beeline不能连接的涉及的问题：原因：权限问题解决：/user/hive/warehouse/
yang576017120·2020-08-04 09:16

hive搭配mysql和hadoop

1.解压hivetar-zxvfhive-1.1.0-cdh5.7.0.tar-C~/app2.修改hive配置文件cd~/app/hive-1.1.0-cdh5.7.0/confcphive-env.sh.templatehive-env.shvimhive-env.sh
高级大数据工程师·2020-08-04 06:59

kylin报错： failed on local exception: org.apache.hadoop.hbase.ipc.CallTimeoutException : Call id=xxxxx...

一个不写代码的码农不是好码农emm可是这么多好的分析工具呢背景：cdh5.15.1redhat7.3kylin2.5目前kylin运行过程中有1个报错：第一个报错：failedonlocalexception
weixin_30414155·2020-08-04 04:38

[Hadoop] Hadoop源码编译时“Remote host closed connection during handshake: SSL peer shut down” 错误解决

[[email protected]cdh5.7.0]$mvncleanpackage-Pdist,native-DskipTes
cindysz110·2020-08-04 03:26

cdh5.14 sqoop 问题记录

sqoop1client报错:Warning:/opt/cloudera/parcels/CDH-5.12.0-1.cdh5.12.0.p0.29/bin/../lib/sqoop/..
阿坚86·2020-08-03 17:15

sqoop概述与简单实践 & sqoop-1.4.6-cdh5.7.0安装

目录产生背景sqoop1与2的区别sqoop-1.4.6-cdh5.7.0安装sqoop导入导出简单数据产生背景当有数据想从RDBMS上抽取到Hadoop时，有以下几种方式：1）读取一个文件后，加载到Hive
Nekou_·2020-08-03 15:59

Spark错误异常-stdout日志乱码

采用Apache版本Spark1.2.1时没有出现乱码，但Spark-1.1.0-cdh5.2.1版本中，在分布处理的map函数里对中文数据进行debug打印输出进行时出现问号乱码valrs=rdd.filter
xubc·2020-08-03 05:54

Hbase启动警告：Java HotSpot(TM) 64-Bit Server VM warning: ignoring option PermSize=128m; ......

Hbase启动时，出现警告：[hadoop@hadoop000~]$start-hbase.shstartingmaster,loggingto/home/hadoop/app/hbase-1.2.0-cdh5.7.0
tiankong_12345·2020-08-03 05:22

spark教程1 (cdh5.12 安装自带spark)

1.在主页选择添加服务2.选择spark3.按步骤走下去，分配好historyserver和gateway角色，我这里选择一个节点作为historyserver，所有节点作为gateway，添加好并启动好spark后如下4.配置yarn服务，给节点添加yarn的gateway角色，然后重启yarn5.修改一下yarn的yarn.scheduler.maximum-allocation-mb参数和y
lief2liu·2020-08-03 03:11

kylin2.1.0_CDH5.9.3实现streaming CUBE

clouderamanage官方文档说明了CDH集成kafka的版本ProductCompatibilityMatrixforCDKPoweredByApacheKafkaCDKPoweredByApacheKafkaiscurrentlydistributedasapackageandinaparcelthatisindependentoftheCDHparcel.Theparcelintegr
fangqingchen·2020-08-02 23:34

Spring/Spring Boot 整合 Mybatis + Phoenix

Mybatis依赖包org.mybatismybatis-spring1.3.2org.mybatismybatis3.4.6org.apache.phoenixphoenix-core4.14.0-cdh5.14.22.3
CZXY18ji·2020-08-02 21:41

CDH5.16.2-Flink1.10.1-parcel制作

一.简介CDH除了能够管理自生所提供的一些大数据相关服务外，还允许将第三方服务添加到CDH集群（托管在CDH上）。你需要做的就是按照一定的规则流程制作相关程序包，最后发布到CDH上。虽然过程并不困难，但是手动操作尤其是一些关键配置容易出错，往往导致最终服务无法正常在CDH上安装运行。二.cm_exturl:https://github.com/cloudera/cm_ext.gitvalidato
李孟lm·2020-08-01 14:11

centos7.3-cdh5.14-cloudera-manager-installer.bin方式离线安装

说明：本篇安装教程使用root用户进行操作，其实使用普通用户进行操作也是可以的，只是要求用户可以不输入密码使用sudo权限，其实安装过程中基本所有的步骤都需要有root权限普通用户进行操作的时候需要加上sudo,sudo操作其实就等于使用root用户操作，然后再切换到普通用户，多此一举，所以全部操作都使用root进行操作了。环境要求系统：centos7.3系统,要求主机之间时间同步Cloudera
cyclone_29·2020-08-01 13:21

spark-2.4.5-bin-2.6.0-cdh5.15.1环境搭建:Local模式和StandAlone

下载源码进行编译在这一篇中，介绍了如何下载源码进行编译，编译好的文件名为spark-2.4.5-bin-2.6.0-cdh5.15.1对文件进行解压：tar-xvfspark-2.4.5-bin-2.6.0
vincent_duan·2020-08-01 02:31

centos7 spark local 模式搭建

linux上新建用户为hadoop，hadoop文件夹下新建文件夹app1、下载spark，我这里采用了自己编译的spark版本,解压到对应目录tar-zxvfspark-2.1.0-bin-2.6.0-cdh5.7.0
starkpan·2020-08-01 00:42

cdh5.16 重新编译flink1.10

文章目录一.简介二.环境三.flink-shaded四.flink五.测试六.下载一.简介Flink1.10.0正式宣告发布！作为Flink社区迄今为止规模最大的一次版本升级，Flink1.10容纳了超过200位贡献者对超过1200个issue的开发实现，包含对Flink作业的整体性能及稳定性的显著优化、对原生Kubernetes的初步集成以及对Python支持（PyFlink）的重大优化。Fli
李孟lm·2020-07-31 21:52

Solr 数据迁移

说明：此处描述的数据迁移主要是针对原有通过本地文件系统保存Solr索引文件的数据迁移到CDH5中通过HDFS保存Solr索引文件的流程。
kissmelove01·2020-07-31 19:38

Impala中多列转为一行

impala-shellStartingImpalaShellwithoutKerberosauthenticationConnectedtocdha:21000Serverversion:impaladversion1.4.2-cdh5RELEASE
DataFlow范式·2020-07-31 18:30

【CDH】centos6 下离线安装CM5.16和CDH5.16完全教程

centos6下离线安装CM5.16和CDH5.16完全教程关于CDH和ClouderaManager一、安装前准备1、系统环境2、安装包准备相关包下载：3、网络配置(所有节点)4、打通ssh,设置ssh
帅胖子·2020-07-31 15:05

CDH5.16+Flink1.11.0+zepplien初步踩坑

白斩鸡的博客：https://me.csdn.net/weixin_47482194====================================================================================经历了几天的折磨，在白斩鸡的帮助下完成集群任务提交运行：zeppelin提交任务运行：遇到了很多的坑，其中很多报错信息没有留下来或者截图，相对原生集
黄瓜炖啤酒鸭·2020-07-31 12:06

cdh5版本中的oozie hive action使用及踩坑集锦

本来的出发点是想做一个能够提交hiveql的web接口，然后我可以在接口层面做很多定制的功能，于是开始找hiverestful接口相关的信息，发现Hive有个webhcat服务，可以提交hiveql然后还可以将输出写入到指定的HDFS目录上，而且还有callback功能，在执行完成后给指定URL发送消息。看了一下源代码，原理其实和Oozie差不多，也是启动了一个单mapper任务来管理JOB，然后
xiao_jun_0820·2020-07-31 11:27

Oozie安装及安装过程中存在的问题

１.从网上下载oozie安装包，下载路径为http://archive.cloudera.com/cdh5/cdh/5/oozie-4.0.0-cdh5.0.1.tar.gz，上传文件到服务器，例如上传到
笔尖的痕·2020-07-31 11:53

在Hive中操作Phoenix，对比Hive查询Hbase

相关内容：CDH5.14集群下Phoenix4.14.0安装及性能对比phoenix/im
王义凯_Rick·2020-07-31 11:53

CDH6.2中使用parcel离线安装Phoenix5.0.0

如果需要在CDH5版本安装phoenix4请参考我之前的文章:CDH5.14集群下Phoenix4.14.0安装及性能对比phoenix/impala/hive官方文档：https://docs.cloudera.com
王义凯_Rick·2020-07-31 11:21

使用Phoenix映射hbase表创建表和视图

之前的文章介绍了如何在CDH5和CDH6中分别安装phoenix4和phoenix5:CDH6.2中使用parcel离线安装Phoenix5.0.0CDH5.14集群下Phoenix4.14.0安装及性能对比
王义凯_Rick·2020-07-31 11:21

2-10 就业课(2.0)-oozie：5、通过oozie执行hive的任务

4.2、使用oozie调度我们的hive第一步：拷贝hive的案例模板cd/export/servers/oozie-4.1.0-cdh5.14.0cp-raexamples/apps/hive2/oozie_works
dengmanzhou3124·2020-07-30 23:04

0671-6.2.0-如何将CDH5.12的Hive元数据迁移到CDH6.2

github：https://github.com/fayson/cdhproject推荐关注微信公众号：“Hadoop实操”，ID：gh_c4c535955d0f1文档编写目的这里我们假定一个场景，你需要迁移CDH5.12
Hadoop_SC·2020-07-30 23:20

CDH5.1.2 数据仓库搭建

创建CM用的数据库CDHjar包提取百度网盘链接：https://pan.baidu.com/s/1xCBIGAwJ6nw8zjDveNqCXw提取码：sxhf在MySQL中依次创建监控数据库、Hive数据库、Oozie数据库、Hue数据库1）启动数据库[root@hadoop102~]#mysql-uroot-p0000002）集群监控数据库mysql>createdatabaseamonDEF
Jeremy-D·2020-07-30 20:04

CDH5.1.2 数仓搭建基本环境准备

环境准备机器节点192.168.17.150hadoop102192.168.17.151hadoop103192.168.17.152hadoop104修改网卡信息vi/etc/sysconfig/network-scripts/ifcfg-eth0修改网卡设备文件vi/etc/udev/rules.d/70-persistent-net.rules修改主机名vi/etc/sysconfig/n
Jeremy-D·2020-07-30 20:31

cdh5.8.0 flume+kafka用户行为日志数据采集方案详解

组件版本flume1.6.0+cdh5.8.0kafka2.1.0+kafka4.0.0一、日志模拟1.1模拟日志生成java-classpath/data/opt/module/log-produce.jarcom.lsl.appclient.AppMain
叁木-Neil·2020-07-30 20:46

sqoop安装配置

一、安装sqooptar-zxvfsqoop-1.4.6-cdh5.6.0.tar.gzsudomvsqoop-1.4.6/usr/app/sqoop二、配置sqoop1、配置文件sqoop-env.shcdsqoop
Always_6778·2020-07-30 19:24

Ubuntu安装Cloudera Manager以及CDH5.15.2

一、机子分配注意，本安装教程是在真机上进行，而非虚拟机。另，此次搭建主要的目的是搭建测试环境，让Hadoop各组件能够运作起来即可，完成搭建后，将用小数据量进行相关数据的计算与测试。线上环境将会使用阿里云主机。以下是四台真机配置：机子内网IP地址主机名内存大小磁盘大小CPU192.168.0.29bigdata01（主）8GB2T1个物理CPU，4核192.168.0.133bigdata02（从
GetMyCode·2020-07-30 19:00

Ubuntu安装Cloudera Manager以及CDH5.15.2

一、机子分配注意，本安装教程是在真机上进行，而非虚拟机。另，此次搭建主要的目的是搭建测试环境，让Hadoop各组件能够运作起来即可，完成搭建后，将用小数据量进行相关数据的计算与测试。线上环境将会使用阿里云主机。以下是四台真机配置：机子内网IP地址主机名内存大小磁盘大小CPU192.168.0.29bigdata01（主）8GB2T1个物理CPU，4核192.168.0.133bigdata02（从
GetMyCode·2020-07-30 19:00

MR清洗IP数据

pom文件4.0.0com.ccj.pxjIPETL1.0-SNAPSHOTUTF-81.81.82.6.0-cdh5.16.21.1.0-cdh5.16.2clouderahttp://repository.cloudera.com
pxjwfy·2020-07-30 18:23

flume入门级

flume一、下载[pxj@pxj/opt]$sudowgethttp://archive.cloudera.com/cdh5/cdh/5/flume-ng-1.6.0-cdh5.16.2.tar.gz
pxjwfy·2020-07-30 18:23

mr实现count

4.0.0com.cc.pxj.wfyphoneWcRuoZe1.0-SNAPSHOTUTF-81.81.82.6.0-cdh5.16.2clouderahttps://repository.cloudera.com
pxjwfy·2020-07-30 18:22

Hive------------Hiveserver2、metastore脚本启动

/bin/sh#hive家目录HIVE_HOME=/opt/cdh5.7.6/hive-1.1.0-cdh5.7.6#启动服务的时间DATE_STR=`/bin/date"+%Y%m%d%H%M%S"`
leson-xu·2020-07-30 18:43

Spark Streaming与Flume集成小测试：PUSH的方式

datas/spark-flume下的wctotal.log文件，并将文件内容通过SparkStreaming进行批处理，在屏幕上输出event的数量实验在伪分布式环境下，用local的模式启动spark（CDH5.5.0
BestbpF·2020-07-30 16:46

Alex 的 Hadoop 菜鸟教程: 第20课 工作流引擎 Oozie

本文基于Centos6.x+CDH5.xOozie是什么简单的说Oozie是一个工作流引擎。
alexxiyang·2020-07-30 16:45

Alex 的 Hadoop 菜鸟教程: 第17课 更快速的MapReduce - Spark

原文地址：http://blog.csdn.net/nsrainbow/article/details/43735737最新课程请关注原作者博客，获得更好的显示体验声明本文基于Centos6.x+CDH5
alexxiyang·2020-07-30 16:45

SparkStreaming消费kafka中的数据保存到HBase中简单demo

hbase最近在做数据处理,但是通过javaapi进行处理的,目前想通过spark去做处理,这里记下了一个简单的实现,但是生产上肯定不是那么简单的.后面会说有哪些优化的点.环境jdk1.8cdh:1.2.0-cdh5.16.1scala
爆发的~小宇宙·2020-07-30 13:46

Sqoop详细安装与环境配置

2.安装教程下载安装包下载地址：http://archive.cloudera.com/cdh5/cdh/5/sqoop-1.4.6-cdh5.14.2.tar.gz解压到opt目录下ta
天ヾ道℡酬勤·2020-07-30 13:43

hive启动报错 java.lang.ClassNotFoundException: org.apache.hadoop.mapred.MRVersion

[[email protected]cdh5.7.0]$hivewhich:nohbasein(/home/hadoop/app/hive-1.1.0-cdh5.7.0/bin:/home
weixin_30794499·2020-07-30 12:20

CDH5.11 离线安装或者升级spark2.x详细步骤

简介：在我的CDH5.11集群中，默认安装的spark是1.6版本，这里需要将其升级为spark2.x版本。
疯狂的暴走蜗牛·2020-07-30 12:19

SolrCloud Collection 创建

环境版本：CDH5.12.0;Solr4.10.3CDH搭建SolrCloud集群十分方便，添加服务->solr->选择主机->next即可在SolrCloud中，跨多个节点的索引分割称为集合（collection
光于前裕于后·2020-07-30 07:04

Cloudera Manager安装Kafka集群

一、前提条件和环境1、环境：CDH5.16.x|Centos7.x|scala2.112、CM和CDH环境已经搭建完成。在CDH上集成Kafka，要求用CDH上的Zookeeper管理Kafka。
鲲鹏小飞猪·2020-07-30 07:34

cdh_集群spark2_中_kafka_版本配置问题

CDH5.14.2集群中安装spark2.3.0后的默认安装的Kafka依赖包有两个版本，分别是kafka0.9以及kafka0.10集群默认选中的是使用kafka0.9。
_游侠·2020-07-30 05:43
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他