E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cdh5
大数据入门系列 --
CDH5
.1.3集群搭建
CDH5
.1.3集群搭建环境:CentOS-6.10-x86_64-bin-DVD1.isoVMware-workstation-full-14.1.3-9474260.exejdk-7u80-linux-x64
陈集福
·
2020-02-19 10:25
Hbase的API案例实战
clouderahttps://repository.cloudera.com/artifactory/cloudera-repos/org.apache.hadoophadoop-client2.6.0-mr1-
cdh5
.14.2org.a
victor19901114
·
2020-02-19 09:22
hbase
JavaAPI
Hbase进阶之路
5堂Hadoop必修课,高手锻造之路
第一堂课:大数据集群搭建葵花宝典由浅入深,四步成“狮”1)快速搞定伪分布Hadoop集群搭建2)高可用的5节点Hadoop分布式集群搭建(Hadoop2.6.0)3)生产环境:
CDH5
高可用集群环境搭建
小讲嘚吧嘚
·
2020-02-19 07:11
hive参数优化
目录小文件处理的参数数据倾斜参数分区表参数并行执行参数代码块中的参数值都是
cdh5
.7的默认值.查看hive配置的方式为[root@namenode1~]#hive-e"set"|grephive.merge.mapredfiles1
wangliang938
·
2020-02-18 19:11
Hive的安装与使用-1
1.下载tar包,在客户端窗口上执行wget-chttp://archive.cloudera.com/
cdh5
/cdh/5/hive-1.1.0-
cdh5
.7.0.tar.gz2.解压到app目录下tar-zxvfhive
sparkle123
·
2020-02-18 15:48
P02_Hadoop CDH 5.3.6集群搭建
安装hadoop包1、下载hadoop-2.6.0-
cdh5
.12.0.tar.gz,上传到虚拟机的/usr/local目录下。
Albert陈凯
·
2020-02-18 11:06
CDH 5.13安装spark2
根据官网上的介绍可知
CDH5
.13是支持spark2.x的。这里讲spark2的安装做一个记录。 首先贴出一些官方的网址,有兴趣的可以去看看:Cloud
bigdata_er
·
2020-02-18 01:36
CDH 构建Spark 应用程序
有关
CDH5
组件的Maven属性,请参阅使用
CDH5
Maven存储库。对于Kafka的Maven属性,请参阅Kafka的Ma
金刚_30bf
·
2020-02-17 01:09
==GitHub 开源工具整理
数据分析/分布式工具Hadoop:分布式的文件系统,结合其MapReduce编程模型可以用来做海量数据的批处理(Hive,Pig,HBase啥的就不说了),值得介绍的是Cloudera的Hadoop分支
CDH5
葡萄喃喃呓语
·
2020-02-16 21:40
hive基于json格式创建hive表
我使用的是
cdh5
.13.3,在这里下载了hive-hcatalog-core的包hive-hcatalog-core下
飞天大漠
·
2020-02-15 23:26
Hadoop的安装与环境配置
HadoopCDH版本的安装:参考文档http://archive.cloudera.com/
cdh5
/cdh/5/hadoop-2.6.0-
cdh5
.7.0/下载地址:http://archive.cloudera.com
Cool小子
·
2020-02-13 17:00
无标题文章
Indexdownloadhttps://github.com/wankunde/tezhttps://github.com/apache/tezclouderaversionhadoop2.5.0-
cdh5
.2.0
万昆
·
2020-02-12 10:58
005.课程环境搭建:zookeeper-3.4.5-
cdh5
.3.6集群搭建
安装zookeeper包1、将课程提供的zookeeper-3.4.5-
cdh5
.3.6.tar.gz使用WinSCP拷贝到sparkproject1的/usr/local目录下。
iarchitect
·
2020-02-12 08:42
大数据入门系列 --
CDH5
.1.3集群搭建
CDH5
.1.3集群搭建环境:CentOS-6.10-x86_64-bin-DVD1.isoVMware-workstation-full-14.1.3-9474260.exejdk-7u80-linux-x64
陈集福
·
2020-02-12 02:40
003.课程环境搭建-hadoop-2.5.0-
cdh5
.3.6集群搭建
CDH5
.3.6集群搭建关闭集群时,使用快速休眠的方式关闭虚拟机image.png安装hadoop集群1、使用课程提供的hadoop-2.5.0-
cdh5
.3.6.tar.gz,上传到虚拟机的/usr/
iarchitect
·
2020-02-12 02:35
Hadoop集群搭建
Centos7.264-bitlsb_release-a命令查看操作系统版本file/bin/ls命令查看操作系统位数Jdkjdk-8u45-linux-x64.gzHadoophadoop-2.6.0-
cdh5
.15.1
cllblogs
·
2020-02-11 01:26
HBase统计表行数(RowCount)的四种方法_Abysscarry的博客-CSDN博客
下面来研究下吧~测试集群:HBase1.2.0-
CDH5
.13.0四台服务器注:以下4种方法效率依次提高一、hbase-shell的count命令这是最简单直接的操作,但是执行效率非常
·
2020-02-09 20:00
CDH安装其他服务
点击继续点击继续点击继续3.安装yarnNodeManager选择所以主机,点击继续点击继续点击继续3.安装Hive(1)将mysql驱动放到/opt/cloudera/parcels/CDH-5.14.0-1.
cdh5
.14.0
Movle
·
2020-02-08 17:24
大数据学习十五:Hive1.1.0编译及安装
1、使用CDH版本大数据组件可以避免在编程中遇到的jar包冲突等问题,下载地址:http://archive.cloudera.com/
cdh5
/cdh/5/2、Hive官方地址,https://hive.apache.org
RacyFu
·
2020-02-07 05:22
CENTOS 7.5离线安装Cloudera Manager 5和
CDH5
(5.15.0) 完全教程
关于CDH和ClouderaManager CDH(Cloudera’sDistribution,includingApacheHadoop),是Hadoop众多分支中的一种,由Cloudera维护,基于稳定版本的ApacheHadoop构建,并集成了很多补丁,可直接用于生产环境。 ClouderaManager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的
向零而一
·
2020-02-06 10:56
CentOS7安装
CDH5
.12.0报错:could not contact scm server at localhost:7182
描述:DNS反向解析错误,不能正确解析ClouderaManagerServer主机名。如下日志:DetectingClouderaManagerServer...DetectingClouderaManagerServer...BEGINhost-tPTR192.168.1.198198.1.168.192.in-addr.arpadomainnamepointerlocalhost.END(0
白面葫芦娃92
·
2020-02-05 23:11
CDH-5.15.1安装(Ubuntu16.04)
CDH对应jarhttps://repository.cloudera.com/artifactory/cloudera-repos/http://archive.cloudera.com/
cdh5
/cdh
浮生若梦____
·
2020-02-05 15:09
Log4j整合Flume
1.环境
CDH5
.16.1Spark2.3.0cloudera4Kafka2.1.0+kafka4.0.02.Log4j——>Flume2.1Log4j产生日志importorg.apache.log4j.Logger
大数据小码农
·
2020-02-03 23:00
SparkStreaming(二)--SparkStreaming整合Kafka
1.环境
CDH5
.16.1Spark2.3.0.Cloudera42.SparkStreaming整合Kafka地址:http://spark.apache.org/docs/2.3.0/streaming-kafka-integration.html
大数据小码农
·
2020-02-02 23:00
SparkStreaming(一)--核心概念及算子
1.环境
CDH5
.16.1Spark2.3.0.cloudera42.核心概念官网:https://spark.apache.org/docs/2.3.0/streaming-programming-guide.htmlGitHub
大数据小码农
·
2020-02-02 22:00
Centos7+
CDH5
.7.2集群搭建
Centos7+
CDH5
.7.2集群搭建一、前期准备1、虚拟机配置(本例为3节点)主节点:8g内存、硬盘120g从节点:2g内存、硬盘120g2、软件资源1.JDK2.Scala3.MySQL相关包4.
StoneHeart
·
2020-02-02 19:51
单节点安装cdh版 hdfs hive
本篇文章单节点安装hdfshive,实乃学习大数据必备的教程,环境为:Centos7JDK8.0
cdh5
.15.1下载地址:http://archive.cloudera.com/
cdh5
/cdh/5/
梁天
·
2020-01-17 10:00
使用Sqoop从MySQL导入数据到Hive和HBase
原文地址http://www.cnblogs.com/wgp13x/p/5028220.html基础环境sqoop:sqoop-1.4.5+
cdh5
.3.6+78,hive:hive-0.13.1+
cdh5
.3.6
我是Mr小赵先生
·
2020-01-08 11:47
dbeaver 去链接 hive server2 亲测可行 全网独博
见下面讲解首先我们的hive的版本为1.1.0-
cdh5
.4.9的百度搜maven进入地址为:https://mvnrepository.com/search?
马吉辉
·
2020-01-08 10:59
dbeaver
去链接
hive
maven的相关信息查找
hive
Flume 写 HBase 真实记录
环境说明:HBase:hbase(main):001:0>version1.2.0-
cdh5
.15.1,rUnknown,ThuAug909:08:28PDT2018Flume:[root@txdev-flumebin
帅可儿妞
·
2020-01-06 12:06
大数据Spark SQL慕课网日志分析
:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jarHIVE_HOME=/usr/local/src/app/hive-1.1.0-
cdh5
.12.0SPARK_HOME
HUAWEIMate20
·
2020-01-06 02:33
CDH离线安装
一:系统环境CentOSrelease6.5x64
CDH5
.2.0节点说明IP主机名角色描述192.168.80.3bigdata.hadoop.mastermaster192.168.80.4bigdata.hadoop.slaveslave192.168.80.5bigdata.hadoop.slave1slave1192.168.80.6bigdata.hadoop.slave2slave2
Bloo_m
·
2020-01-05 19:33
创建软链接
zeppelin/zeppelin-0.6.2-bin-all/interpreter/jdbcln-s/opt/cloudera/parcels/CDH/lib/hive/lib/hive-jdbc-1.1.0-
cdh5
.8.3
风恋绝尘
·
2020-01-05 05:50
解决hive的问题
问题1:启动hive后显示:无法访问/home/hadoop/app/spark-2.3.2-bin-2.6.0-
cdh5
.7.0/lib/spark-assembly-*.jar:没有那个文件或目录原来的
Sam_L
·
2020-01-03 00:30
Hive入门
conf目录#SetHADOOP_HOMEtopointtoaspecifichadoopinstalldirectoryHADOOP_HOME=/home/hadoop/cdh/hadoop-2.5.0-
cdh5
.3.6
Bottle丶Fish
·
2020-01-02 08:17
spark on yarn部署
软件版本spark2.0.22.6.0-
cdh5
.9.0一.编译参考官网配置即可:http://spark.apache.org/docs/latest/running-on-yarn.html下载spark2.0.2
breeze_lsw
·
2020-01-01 02:20
SparkSQL读取HBase数据
spark-sqlcli(关于SparkSQL和Hive的整合,见文章后面的参考阅读).本质上就是通过Hive访问HBase表,具体就是通过hive-hbase-handler.环境篇hadoop-2.3.0-
cdh5
.0.0apache-hive
Alukar
·
2020-01-01 01:26
2.安装Apache Spark 2.1
一、下载Spark2.1先查看hadoop版本,下面查询结果显示为:hadoop2.6$hadoopversionHadoop2.6.0-
cdh5
.11.0然后下载spark,下载地址:http://spark.apache.org
逆流而上kiss
·
2019-12-30 20:44
WaterDrop 系列报错
1.使用WaterDrop从kafka中消费数据,写入到ClickHouse1.1环境SPARK2-2.3.0.cloudera4-1.
cdh5
.13.3.p0.611179clickhouse-1.1.54236
大数据小码农
·
2019-12-30 18:00
CDH: HBase thrift server意外退出
最近用Cloudera的
CDH5
来跑HBase和HBasethriftserver。运行过程中HBASEthrift会意外退出,周期不定,三天两头。
杨小邪yxr
·
2019-12-30 04:02
Oozie案例运行MapReduced Workflow
解压oozie-examples.tar.gz[
[email protected]
cdh5
.3.6]$tar-zxvfoozie-examples.tar.gz上传ExamplesTheexamples
李治辉撩码
·
2019-12-29 16:15
【异常】连接Phoenix异常SYSTEM.CATALOG
进入/bin/hbasezkcli,或者进入zk的客户端:[
[email protected]
cdh5
.7.0]$cdbin[hadoop@hadoop001bin]$.
lemon胡
·
2019-12-28 19:00
环境准备(04)HDFS Shell常用操作
配置环境变量vi~/.bash_profileexportHADOOP_HOME=/home/hadoop/app/hadoop-2.6.0-
cdh5
.7.0exportPATH=$HADOOP_HOME
乌鲁木齐001号程序员
·
2019-12-27 03:11
如何卸载CDH(附一键卸载github源码)
DataEncryption)的集群,以下是本次测试环境,但不是本操作手册的硬限制:1.操作系统版本:CENTOS6.52.MySQL数据库版本为5.1.733.CM版本:CM5.114.CDH版本:
CDH5
.115
尼小摩
·
2019-12-23 03:49
HBaseregion RIT(Region-In-Transition)
解决方法:1、在一台zk节点上,登陆zkcd/opt/cloudera/parcels/CDH-5.13.1-1.
cdh5
.13.1.p0.2/lib/zookeeper/bin[root@hostbin
Moon_魔宽
·
2019-12-22 06:23
离线部署 CDH 5.15.0及使用CDH(4)——cloudera manager Server & Agent 离线安装
191MySQL:5.7ClouderaManager下载目录:http://archive.cloudera.com/cm5/cm/5/CDH下载目录:http://archive.cloudera.com/
cdh5
bclz
·
2019-12-22 02:58
CDH5
.8 HBase安装Phoenix
1、phoenix的简介hbase的javaapi或者其语法很难用,可以认为phoenix是一个中间件,提供了访问hbase的另外的语法。本文档为在CDH环境上安装Phoenix。2、下载CDH版Phoenixgitclonehttps://github.com/chiastic-security/phoenix-for-cloudera.gitcdphoenix-for-cloudera/git
虾米在海飘
·
2019-12-20 16:52
Mac Hadoop
CDH5
伪分布式 搭建(无脑版)
网上关于Mac原生系统
CDH5
搭建的千篇一律,对于Hadoop/Linux小白的我来说,终于在各种百度后,搭建
CDH5
成功。为了让其他想要自学Hadoop又在网上四处碰壁的兄弟们少走弯路。
地上最萌程序兔
·
2019-12-19 04:54
Flume入门
一、安装1、必备条件因为要把日志上传到hdfs上,所以需要以下hadoop依赖包:commons-configuration-1.6hadoop-auth-2.5.0-
cdh5
.3.6hadoop-common
Bottle丶Fish
·
2019-12-18 19:44
分布式部署安装zookeeper
前提已经安装好了jdk安装部署解压到/opt/module目录下tar-xzvfzookeeper-3.4.5-
cdh5
.3.6.tar.gz-C/opt/module/在zookeeper的目录下创建
天际神游
·
2019-12-18 07:37
上一页
21
22
23
24
25
26
27
28
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他