cloudera

Scala编写JedisPoolUtils工具类

packagecom.cloudera.utilsimportredis.clients.jedis.
storm_fury·2020-08-22 23:36

cdh-禁用和重新部署HDFS HA

禁用和重新部署HDFSHA使用ClouderaManager禁用和重新部署HDFSHA最低要求的角色：群集管理员（也由完全管理员提供）1.进入hdfs服务页面2.选择操作>禁用高可用性3.选择NameNode
lisery_nj·2020-08-22 22:56

cloudera manager-5.10.2的安装（二、环境的依赖下载及安装CM）

==========================部署规划开始==============================server.commysql、server、namenode、agent、resourcemanager、journalnode、zookeeper、master、flume、masteragent01.comsecondarynamenode、datanode、agent
久醉绕心弦i·2020-08-22 21:22

基于CDH5.10.2安装spark2

默认安装的spark是1.6版本，这里需要将其升级为spark2.x版本在线安装：环境我这边是jdk1.8，scala-2.11.x，操作系统Centos6.5一、准备工作：创建目录：mkdir-p/opt/cloudera
久醉绕心弦i·2020-08-22 21:22

cloudera manager-5.10.2的安装（一、系统环境的配置）

clouderamanager管理大数据开发平台（集群）主从架构：server：主节点进程，启动在一台服务器上，与各个从节点通讯收集从节点发来的服务器状态信息，另外负责整个集群的启动和停止，负责集群框架的安装部署统一调配
久醉绕心弦i·2020-08-22 21:22

cloudera manager-5.10.2的安装（三、各个组件服务的安装分配）

选择自定义服务：（注意：合理分配主机，不要都按在一台，以免压力过大）点击添加服务即可(HDFS、YARN(MR2Included)、Zookeeper、namenode和resourcemanager的HA、Hive、HBase、Sqoop2、Flume、Oozie、Hue、Kafka、Spark、Spark2)异常现象：内存调度过阀：默认是0.8---》修改为1Java堆栈大小：修改为默认值11
久醉绕心弦i·2020-08-22 21:22

Apache HBase 的适用场景

原文：http://blog.cloudera.com/blog/2011/04/hbase-dos-and-donts/最近我在洛杉矶Hadoop用户组做了一次关于HBase适用场景的分享。
薄荷脑·2020-08-22 20:10

Flume简介和安装

Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据接受方
一个人一匹马·2020-08-22 20:05

查看kafka偏移量

kafka生产最大位置偏移量查看进入kafka的bin目录cd/opt/cloudera/parcels/KAFKA-3.0.0-1.3.0.0.p0.40/lib/kafka/bin查询topic为normal-tollgate
xiaoliuyiting·2020-08-22 20:05

nifi mysql CDC to mysql

https://community.cloudera.com/t5/Community-Articles/Change-Data-Capture-CDC-with-Apache-NiFi-Part-1-
ukakasu·2020-08-22 18:09

Spark如何提交job

--deploy-modeclient--executor-memory2G--executor-cores1--classorg.apache.spark.examples.SparkPi/opt/cloudera
sonia_liss·2020-08-22 18:57

spark1.4版本与CDH5.1.3版本hive整合

注：hive的配置文件目录位置为：/alidata/cloudera/parcels/CDH-5.1
重拾梦想·2020-08-22 17:16

[HBase基础]-- java 调用hbase api创建hbase分区表

1.2.0+cdh-5.8.0一、新建maven项目，编写pom.xml文件4.0.0com.enntestDB1.0-SNAPSHOTUTF-82.6.0-cdh5.8.01.2.0-cdh5.8.0clouderahttps
highfei2011·2020-08-22 16:58

cloudera-scm-server一直启动失败的解决办法

先说明下我使用的环境：centos7.xcdh6.3.2jdk1.8之前的配置都配好后执行systemctlstartcloudera-scm-server命令报如下错误：[root@s30~]#systemctlstatuscloudera-scm-server
雷禄辉·2020-08-22 16:05

Cloudera的CDH和Apache的Hadoop的区别

目前而言，不收费的Hadoop版本主要有三个(均是国外厂商)，分别是：Apache(最原始的版本，所有发行版均基于这个版本进行改进)、Cloudera版本(Cloudera’sDistributionIncludingApacheHadoop
PassionXxt·2020-08-22 13:53

各种软件下载地址收集

www.oracle.com/technetwork/java/javase/archive-139210.html用户名密码（[email protected]**124077）CDHhttp://archive.cloudera.com
易悠·2020-08-22 04:07

大数据技术之Flume

大数据技术之Flume第1章Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。
可爱的杨一凡·2020-08-21 23:47

[Hadoop] CentOS7安装Zookeeper-3.4.5-cdh5.7.0（单节点）

下载解压[hadoop@hadoop01software]$wgethttp://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.7.0.tar.gz
cindysz110·2020-08-21 21:39

源码下载地址

Hadoop2.6.0-cdh5.4.1源码编译安装http://www.tuicool.com/articles/vQzMRbQcdh源码下载地址：http://archive-primary.cloudera.com
qaws962839575·2020-08-21 20:38

zookeeper崩溃后修复

使用cloudera搭建hadoop集群，由于使用ubuntu系统，根目录空间分配不足，导致数据录入一部分，集群崩溃，后来对ubuntu系统的根目录进行设置，扩大了根目录的空间，但是zookeeper中一台机器的节点一直无法启动
nma_123456·2020-08-21 20:01

Zookeeper部署

1、下载安装包到softwarecurl-Ohttp://archive.cloudera.com/cdh5/cdh/5/zookeeper-3.4.5-cdh5.15.1.tar.gz2、解压到~/applicationtar-zxvfzookeeper
mfsh·2020-08-21 20:32

HDFS Java API实操&HDFS文件操作代码

settings.xml2)idea中的配置(2)pom文件中添加依赖UTF-81.71.72.6.0-cdh5.7.0org.apache.hadoophadoop-client${hadoop.version}clouderahttps
艾艾猫dori·2020-08-21 19:16

Hadoop安装流程&使用CDH版的Hadoop搭建HDFS环境

hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-common/SingleCluster.html软件下载cdh-hadoop2.6.0http://archive.cloudera.com
艾艾猫dori·2020-08-21 19:16

Apache Hadoop 3.x 最新状态以及升级指南

本文来自2019年9月23日至26日在纽约举办的StrataDataConference，分享者是来自Cloudera的WangdaTan和Wei-ChiuChuang，会议页面https://conferences.oreilly.com
过往记忆·2020-08-21 16:23

Hadoop的各种版本

其发行版除了有Apachehadoop外cloudera，hortonworks，mapR,华为,DKhadoop等都提供了自己的商业版本，商业发行版主要是提供了更为专业的技术支持，这对于大型企业更为重要
lipviolet·2020-08-21 14:12

401 Unauthorized: ERROR Failed to connect to newly launched supervisor. Agen

该情况分为两种:一:/opt/XXXX/lib/cloudera-scm-agent/目录下的uuid一样导致处理方式:1,删除该节点下/opt/XXXX/lib/cloudera-scm-agent/
kismet2399·2020-08-21 14:27

HADOOP版本选择

Cloudera版本：开源，免费，有商业和非商业版本。是在apache社区版本的hadoop基础上，选择
懒先森要努力·2020-08-21 14:34

Hadoop各商业发行版之比较

Hadoop的发行版除了社区的Apachehadoop外，cloudera，hortonworks，mapR，EMC，IBM，INTEL，华为等等都提供了自己的商业版本。
aizongmao2539·2020-08-21 13:25

Apache Hadoop版本详解分享

本文总结了ApacheHadoop和ClouderaHadoop的版本衍化过程，并给出了选择Hadoop版本的一些建议。
零一三南宫南·2020-08-21 12:44

hadoop apache版本和cdh版本的区别和联系

utm_source=blogxgwz2CDH下载地址https://archive.cloudera.com/cdh5/cdh/5/CDH之间Hadoop等版本
千里草竹·2020-08-21 12:37

黑猴子的家：Hadoop三大发行版本

Hadoop三大发行版本:Apache、Cloudera、HortonworksApache版本最原始（最基础）的版本，对于入门学习最好。Cloudera在大型互联网企业中用的较多。
黑猴子的家·2020-08-21 12:30

SparkStreaming连接到kafka，防止重复消费

packagecom.manulife.mbps.behavior.data.streamimportjava.util.Propertiesimportcom.cloudera.com.amazonaws.util.json.JSONObjectimportcom.manulife.mbps.behavior.common.utils
OOM_and_Exception·2020-08-21 04:17

ERROR streaming.StreamExecution：createConsumer(ConsumerStrategy.scala:63)

1.背景写的SparkStructuredSQL任务，然后用的spark版本为2.3.0.cloudera2<grou
九师兄·2020-08-21 04:32

Hive查询变慢及无响应问题分析

通过ClouderaManage查看B机器的负载情况，发现线程数达到了1
chenxyz707·2020-08-21 03:29

这几年人工智能和大数据的真实就业规律

hortonworks和cloudera在两年前合并了，如果满地都是钱，肯定不愿意合并。有这么几个原因：①小公司搞大数据不如excel来张报表②大公司看年龄③中型公司处于自己都没摸索明白和跟风中。
Applied Sciences·2020-08-21 03:44

Centos7安装kudu

1、下载kudurpm包下载地址:https://archive.cloudera.com/cdh5/redhat/7/x86_64/cdh/5.14.0/RPMS/x86_64/下载rpm包如下:kudu
木木竹·2020-08-21 03:12

CDH Cloudera Manager 5.16.2部署

1.下载安装包1.1CDH$wgethttp://archive.cloudera.com/cdh5/parcels/5.16.2/CDH-5.16.2-1.cdh5.16.2.p0.8-el7.parcel
发热安啃·2020-08-21 02:44

Apache Zookeeper :安装zookeeper步骤

前提安装zookeeper的注意事项：安装前需要安装好jdk检测集群时间是否同步检测防火墙是否关闭检测主机ip映射有没有配置下载下载安装包、解压下载地址：CDH版本：http://archive.cloudera.com
真情流露哦呦·2020-08-21 02:03

CentOS7 Cloudera Manager6 完全离线安装 CDH6 集群

ClouderaManager6.3.0CM6RPM：https://archive.cloudera.com/...需要下载该链接下的所有RPM文件，保存到cloudera-re
FreeShow·2020-08-20 23:29

CentOS7 Cloudera Manager6 完全离线安装 CDH6 集群

ClouderaManager6.3.0CM6RPM：https://archive.cloudera.com/...需要下载该链接下的所有RPM文件，保存到cloudera-re
FreeShow·2020-08-20 23:29

Cloudera：Hue监控页面的时间显示问题

背景：CM安装时选择时区正确各机器时间已同步、正确问题描述：其他各个监控页面的时间显示正常Hue中job监控页面的时间显示错误——时区不对解决方法：CM中，群集->Hue服务-->配置选择Hue（服务范围）->修改时区属性配置-time_zone，默认为America/Los_Angeles，修改为当前所在时区即可，即修改为Asia/Shanghai。由于属性对应为服务范围，因此重启hue服务（或
harli·2020-08-20 23:27

ZK HBASE HDFS 常用CLI

ZOOKEEPERzkServer.sh查看基本信息status[root@hmaster~]#find/-namezkServer.sh/opt/cloudera/parcels/CDH-5.4.7-
ahh25114·2020-08-20 22:45

CM & CDH 基本概念

什么是CDHHadoop是开源项目，所以很多公司在这个基础上进行商业化，不收费的Hadoop主要有三个：Apache，最原始的版本，所有发行版均基于这个版本进行Cloudear，全称Cloudera’sDistributionIncludingApacheHadoop
Tianny·2020-08-20 22:14

CM & CDH 基本概念

什么是CDHHadoop是开源项目，所以很多公司在这个基础上进行商业化，不收费的Hadoop主要有三个：Apache，最原始的版本，所有发行版均基于这个版本进行Cloudear，全称Cloudera’sDistributionIncludingApacheHadoop
Tianny·2020-08-20 22:14

CDH离线搭建

安装前必须考虑ClouderaManager和CDH的版本兼容关系。3-10个机
小鸡·2020-08-20 22:07

CDH 启用Kerberos安全认证

KDC服务器搭建在ClouderaManager服务器上安装KDC服务安装KDC服务yum-yinstallkrb5-serverkrb5-libskrb5-auth-dialogkrb5-workstation
笨兔儿·2020-08-20 20:01

CDH 启用Kerberos安全认证

KDC服务器搭建在ClouderaManager服务器上安装KDC服务安装KDC服务yum-yinstallkrb5-serverkrb5-libskrb5-auth-dialogkrb5-workstation
笨兔儿·2020-08-20 20:01

CDH之后搭建flink

.bash_profileexportFLINK_HOME=/home/bigdata/flink/flink-1.9.1exportHADOOP_CONF_DIR=/etc/hadoop/conf.cloudera.yarn
weixing_2006·2020-08-20 20:47

HBase 2.0.0 META 数据修复工具

必须先吐槽一下Cloudera6.x和Hbase2.0太坑了！不久前生产上的一套Hbase集群出现著名的RIT（RegionsinTransition）问题。
xyzkenan·2020-08-20 20:59

cloudera manager5.13.1离线安装记录

具体的操作过程参考官方文档https://www.cloudera.com/docu...以及以下几个参考文章：http://www.cnblogs.com/jasond...http://blog.cs
elina·2020-08-20 20:50
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他