E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cloudera
sqoop 报错:Could not load db driver class: com.microsoft.sqlserver.jdbc.SQLServerDriver
一、问题描述将sqlserver的数据导入hive,结果报错:Warning:/opt/
cloudera
/parcels/CDH-5.15.2-1.cdh5.15.2.p0.3/bin/..
RayBreslin
·
2020-07-28 13:40
sqoop
dfs.datanode.max.xcievers&dfs.datanode.max.transfer.threads介绍
(参考自:http://blog.
cloudera
.com/blog/2012/03/hbase-hadoop-xceivers/)(dfs.datanode.max.xcievers和dfs.datanode.max.transfer.threads
tomson8975
·
2020-07-28 12:52
HDFS
HDFS数据平衡:节点间平衡与节点内平衡
Cloudera
Manager里与Balancer有关
tianlianchao1982
·
2020-07-28 12:32
Kafka学习之:Kafka背景及架构介绍
目前越来越多的开源分布式处理系统如
Cloudera
、ApacheStorm、Spark都支持与Kafka集成。InfoQ一直在紧密关注Kafka的应用以及发展,“Kaf
铁猴
·
2020-07-28 12:33
消息队列
Apache Sentry手动安装、使用手册
Sentry手动安装、使用手册1Sentry简介ApacheSentry是
Cloudera
公司发布的一个Hadoop开源组件,截止目前还是Apache的孵化项目,它提供了细粒度级、基于角色的授权以及多租户的管理模式
SunShine2025
·
2020-07-28 10:42
大数据
【Spark】用IDEA编写Spark程序 基础入门
工程并添加jar包4.0.0cn.itcastSparkDemo1.0-SNAPSHOTaliyunhttp://maven.aliyun.com/nexus/content/groups/public/
cloudera
https
没去过埃及的法老
·
2020-07-28 08:21
Sprak
Cloudera
Manager安装完后hive使用lzo小坑计
前提:打开hive能正常打开,且服务无报错,hdfs中hive库正常存在。问题1:hive中无法查看库,表,但是建表后hdfs中有表结果显示。报错信息:明显报错->Errorinconfiguringobject(配置对象时出错)。解决思路:查看/tmp/用户名/hive.log日志,发现causeBy->Classcom.hadoop.compression.lzo.LzoCodecnotfou
辅猪之王
·
2020-07-28 08:19
错误干扰
七、扩展
Kafkaproducer拦截器(interceptor)KafkaStreams扩展Kafka生产者调优1.Kafka与Flume比较在企业中必须要清楚流式数据采集框架flume和kafka的定位是什么:flume:
cloudera
Java及SpringBoot
·
2020-07-28 07:26
spark on yarn的理解
到/opt/
cloudera
/parcels/CDH/lib/spark/目录看里面,没有R文件夹,bin里面也没有spark-ql和sparkR。比较失望。
富兰克林008
·
2020-07-28 04:42
spark
CDH5
Centos7主机搭建CDH6.X机群
目录1操作系统要求1.1linux版本1.2
Cloudera
管理器服务器的存储需求1.3我的主机规划2准备linux系统配置环境2.1修改主机名2.2配置主机名ip映射2.3关闭防火墙2.4关闭selinux3
逃跑的沙丁鱼
·
2020-07-28 03:58
学习爱好
sentry配置
当前cdh版本为5.2.0,且通过
cloudera
manger来管理集群。选择sentry配置方式,fileordb。file形式(sentry-provider.ini),存于hdfs上。
空中的鱼1987
·
2020-07-28 02:28
sentry
cloudera
hadoop snapshot 备份恢复
通过snapshot实现hdfs上文件的备份api地址请见http://archive.
cloudera
.com/cdh5/cdh/5/hadoop-2.5.0-cdh5.2.0/hadoop-project-dist
糖糖_
·
2020-07-28 02:08
snapshot
hadoop
CDH postgreSQL启动报错DB initialization done. waiting for server to start.............. cloud not start
CDH启动postgreSQL时无法正常启动(事后问了专家,因为我kill-9关闭postgreSQL造成的,以后还是正常关闭不要kill)[root@servershare]#service
cloudera
-scm-server-dbstartpg_ctl
levy_cui
·
2020-07-28 01:23
CDH
Ranger 0.5.4-SNAPSHOT CDH 5.8.4 HDFS Plugin Hive Plugin
SNAPSHOTSolr版本:5.2.1Jdk版本:1.7.80前提条件:cdh-5.8.4需要修复HDFS-6826,否则RangerHDFSPlugin编译无法通过本地mvn仓库编译安装修改后hdfs依赖包:[
cloudera
huangyq5240
·
2020-07-27 23:40
Ranger
hadoop集群部署,内存,存储配置
翻译自:http://blog.octo.com/en/hadoop-in-my-it-department-how-to-plan-a-cluster/和http://blog.
cloudera
.com
春夏秋冬又一年
·
2020-07-27 23:03
hadoop
Cloudera
Search: 轻松实现Hadoop全文检索
近期
Cloudera
Search的推出,对于曾经做信息检索和使用过Lucene/Solr的我来讲,虽然不是那种令人乍舌的新技术,但从应用层面来考虑,我相信,对于业界而言,毫无疑问是一个相当令人兴奋的消息
hadoop17173
·
2020-07-27 23:34
Cloudera
Cloudera
Hue Issues
在使用
Cloudera
Hue时遇到一问题:1.使用Sqoop导入功能时,由于配置错误,使得“保存运行”后Job并不能正常提交,且界面上没有相关提示:使用Hue的Sqoopshell-》startjob-
hadoop17173
·
2020-07-27 23:34
Cloudera
数据摄取
ApacheChukwa:数据采集系统;ApacheFlume:管理大量日志数据的服务;ApacheKafka:分布式发布-订阅消息系统;ApacheSqoop:在Hadoop和结构化的数据存储区之间传送数据的工具;
Cloudera
Morphlines
chikailiao6191
·
2020-07-27 20:44
大数据
数据库
数据结构与算法
使用JMC工具对spark 程序调优(二)
基于
cloudera
的环境,我们可以查看cpu,memory,磁盘等资源使用情况,如图:由上图可以看到,集群系统资源利用保持平稳。再来看看内存使用:可以看到,下午开始以后,可用内存逐渐减小,中间3点到
texture_texture
·
2020-07-27 19:06
spark
调优
jmc
集群
大数据
spark
jmc
内存泄漏
调优
Ranger架构
在访问控制体系方面,Hadoop两大厂
Cloudera
和Hortonworks先后发起标准化运动,分别
andyguan01_2
·
2020-07-27 18:32
ranger
环境准备(07)Hive环境搭建
1.下载Hivewgethttp://archive.
cloudera
.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.0.tar.gz2.解压Hivetar-zxvfhive-1.1.0
乌鲁木齐001号程序员
·
2020-07-27 18:08
Hue连接HDFS -- HttpFS
文章目录1.简介2.WebHDFS与HttpFS1.简介HUE=HadoopUserExperienceHue是一个开源的ApacheHadoopUI系统,由
Cloudera
Desktop演化而来,最后
@TangXin
·
2020-07-27 15:39
Hue
0623-6.2.0-如何在CDH中安装CFM
github:https://github.com/fayson/cdhproject推荐关注微信公众号:“Hadoop实操”,ID:gh_c4c535955d0f1文档编写目的2019年4月15日,
Cloudera
Hadoop_SC
·
2020-07-27 15:35
Hadoop实操
推荐系统之大数据技术(超全面)
Hadoop(HDFS文件系统)HiveKafkaFlume1.1Flume定义Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。
一种tang两种味
·
2020-07-27 15:48
Missing artifact org.apache.hadoop:hadoop-client:jar:2.6.0-cdh5.12.0 的解决 CDH版本hadoop的pom.xml
需要配置下载环境CDH库
cloudera
https://repository.
cloudera
.com/artifactory/
cloudera
-repos/truefalsepom.xml加上这个就好了举个例子
Ahuuua
·
2020-07-27 14:23
大数据
Hive小文件合并
小文件带来的问题关于这个问题的阐述可以读一读
Cloudera
的这篇文章。简单来说,HDFS的文件元信息,包括位置、大小、分块信息
yycdaizi
·
2020-07-27 14:10
hive
hive
合并
存储
关于即将发布的 TensorFlow 2.0,你需要知道这几件事
10月3日,Hortonworks宣布将与其主要竞争对手
Cloudera
合作创建一家年收入约为7.3亿美元、拥有2,500名客户、市场估值达52亿美元的公司,这令很多人感到意外。
weixin_34302798
·
2020-07-27 13:00
hadoop-mapreduce-examples
cdh5.1.0.jarpi25[
[email protected]
]#hadoopversionHadoop2.3.0-cdh5.1.0Subversiongit://github.sf.
cloudera
.com
hzdxw
·
2020-07-27 12:28
hadoop-examples
hadoop
cdh部署文档
一.概述CDH
Cloudera
版本(
Cloudera
’sDistributionIncludingApacheHadoop,简称“CDH”),基于Web的用户界面,支持大多数Hadoop组件,包括HDFS
周周周周和
·
2020-07-27 09:19
Linux运维基础
大数据
下载地址2.CDH下载地址3.参考1.参考12.参考23.参考3_图形配置4.参考4_图形配置5.关闭透明大页4.rpm包下载5.遇到未连接到EventServer和HostMonitor问题可以通过添加
Cloudera
ManagementService
PeterWang2017
·
2020-07-17 21:20
centos&离线安装
Cloudera
Manager6.3.1 和CDH6.3.1
1.环境准备(所有节点,root用户环境下)1.1.设置唯一主机名sudohostnamectlset-hostnamefoo-1.example.com1.2.设置/etc/hosts举例:1.1.1.1foo-1.example.comfoo-12.2.2.2foo-2.example.comfoo-23.3.3.3foo-3.example.comfoo-34.4.4.4foo-4.exam
吃胡萝卜的鳄鱼
·
2020-07-16 06:25
大数据
CDH版 Phoenix 安装以及简单使用
下载进入/opt/
cloudera
/parcel-repo目录wgethttp://www.apache.org/dist/phoenix/apache-phoenix-4.14.0-cdh5.12.2
潇洒-人生
·
2020-07-16 06:24
hbase
phoenix
CDH6版本的Maven依赖
对于CDH6版本去找寻相关的依赖的方法:点击CDH6相应的版本号去找对应的groupId,artifactId,versionCDH对应依赖寻找步骤:1.指向
cloudera
的库
cloudera
https
雷雷飘过
·
2020-07-16 05:55
CDH
CDH重启服务
cloudera
-scm-agent启动失败( MainThread agent ERROR Heartbeating to 172.16.66.242:7182 )
,我就准备重启服务嘛,按照正常流程,先检查下mysql服务先确保mysql启动服务servicemysqldstatus如果没有开启重启下servicemysqldrestart然后进入cd/opt/
cloudera
-manager
沖冠一怒为红颜
·
2020-07-16 05:22
hadoop cdh版maven依赖解决方案
使用
cloudera
hadoop开发hadoop程序,官方文档上有两种方法。第一种即把相应jar包拷贝到工程目录中去,另一种即使用maven管理依赖jar包。
東川
·
2020-07-16 05:06
hadoop
CDH 6.3.2 安装(二)
静态网卡配置2、网关配置3、停止networkManager服务4、重启网卡服务二、配置静态网卡1、修改网络配置2、修改主机名三、加载MySQL驱动包1、准备文件2、下载地址3、加载MySQL驱动包四、安装
cloudera
-manager-daemons
静谧星空
·
2020-07-16 04:25
CDH
CentOS
Linux
运维
大数据
linux
hadoop
CDH 6.3.2 安装(一)
官方文档:https://docs.
cloudera
.com/documentation/enterprise/6/6.3/topics/installation_reqts.htmlnotepad++
静谧星空
·
2020-07-16 04:24
Linux
CDH
CentOS
大数据
cloudera
hadoop
CDH6.3.2 组件版本和Maven依赖版本
目录remoterepositorycomponentversiondependencytemplateartifactversionremoterepository
cloudera
https://repository.
cloudera
.com
静谧星空
·
2020-07-16 04:53
Maven
CDH
Hadoop
maven
cloudera
hadoop
Kafka原理及应用
目前越来越多的开源分布式处理系统如
Cloudera
、ApacheStorm、Spark都支持与Kafka集成。
qinzhaokun
·
2020-07-16 04:02
Hadoop
(5) cdh搭建 之 错误&解决
一、
cloudera
-scm-server启动错误1.1.Unabletoretrievenon-localnon-loopbackIPaddress.2019-07-0117:55:00,197ERRORScmActive
qiangweiyan
·
2020-07-16 04:34
大数据#cdh安装
(附件) CM搭建.log
[
[email protected]
]#rpm--importhttps://archive.
cloudera
.com/cm6/6.2.0/redhat7/yum/RPM-GPG-KEY-
cloudera
qiangweiyan
·
2020-07-16 04:33
大数据#cdh安装
Ubuntu16.04安装CDH Hadoop2.6单机版
CDHHadoop下载链接为:http://archive.
cloudera
.com/cdh5/cdh/5/。为什么安装
Cloudera
公司发布的hadoop版本?
hufengreborn
·
2020-07-16 04:15
Cloudera
Manager的安装
title:
Cloudera
Manager的安装tags:CM
Cloudera
Managercdh一、Linux系统的安装安装LinuxCentOS7.1系统设置网络配置IP与主机之间的映射,命令如下:
踹不死的小强
·
2020-07-16 03:25
impala-kudu安装
我不知道如何用
Cloudera
Manager这个安装,这个貌似比较简单。)我的系统时centos6.5的1、首先进入官网,下载所需要的包,有以下这些官网链接:http
mr_jack_xu
·
2020-07-16 03:58
impala-kudu
大数据基础学习笔记(安装CDH的环境配置)-CDH-5.15
1.下载软件地址((以centos7.4))CDH安装包地址:http://archive.
cloudera
.com/cdh5/parcels/5.14.0/CDH-5.14.0-1.cdh5.14.0
小马的学习笔记
·
2020-07-16 03:59
大数据
如何在CDH中使用Phoenix
1.文档编写目的昨天我们简单介绍了一下ApachePhoenix,请参考
Cloudera
Labs中的Phoenix。今天我们主要讲述如何在CDH中安装配置Phoenix,并会做一些使用示例。
lvtula
·
2020-07-16 02:27
Phoenix
CDH安全认证及使用
https://www.cnblogs.com/yinzhengjie/articles/10495217.htmlCDH构建大数据平台-配置集群的Sentry授权安全https://www.
cloudera
.com
lvtula
·
2020-07-16 02:23
CDH
CDH
安全
Centos7 安装包方式(离线)安装
cloudera
manager 和 CDH
Centos7环境下安装CDH首先要安装
cloudera
manager然后通过cm的图形界面来安装CDH和一些相关组件需要安装mysql来存储
cloudera
manager的一些数据也可以使用其他数据库使用安装包方式进行安装比
ltgsoldier1
·
2020-07-16 02:12
phoenix for
cloudera
phoenixfor
cloudera
软件版本:spark2.0.2cdh5.9phoenix4.9(phoenix-spark模块使用4.11)下载CDH版本的phoenix,最新版本目前只有phoenix4.9
breeze_lsw
·
2020-07-16 02:07
Spark
Kudu单机安装 【很简单】
0.下载rpm包地址:http://archive.
cloudera
.com/cdh5/redhat/7/x86_64/cdh/5.15.0/RPMS/x86_64package:kudu-1.7.0+
留歌36
·
2020-07-16 02:17
上一页
22
23
24
25
26
27
28
29
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他