E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cloudera
Hadoop 入门笔记 二十三 : MapReduce性能优化-文件类型
Hadoop得到了企业界及学术界关注,Yahoo、Facebook、
Cloudera
、Twitter、Intel、华为等诸多公司和技术团体对Hadoop给予了大力支持。
Cloudera
对Apache
·
2021-11-07 12:43
hadoop
flume详解
定义flume全称ApacheFlume技术角度:使用Java语言开发的一个分布式、高可靠、高可用中间件项目角度:最早是
Cloudera
提供的日志收集系统,现在是Apache软件基金会(ASF)的顶级项目
·
2021-11-05 19:12
Cloudera
Manager 术语和架构
简介:本文介绍了
Cloudera
Manager的常见术语和架构
Cloudera
Manager术语为了有效地使用
Cloudera
Manager,您应该首先了解其术语。
·
2021-10-28 11:09
大数据开发之HDFS的API操作过程
创建maven工程并导入jar包
cloudera
https://repository.
cloudera
.com/artifactory/
cloudera
-repos/org.apache.hadoophadoop-client2.6.0
·
2021-10-28 11:08
大数据hdfs
CDP 平台简介
简介:EDC建立在
Cloudera
DataPlatform(CDP)之上,该产品结合了
Cloudera
EnterpriseDataHub和HortonworksDataPlatformEnterprise
·
2021-10-27 14:04
大数据
【大数据】☀️搞定Hadoop集群☀️概述&环境配置
目录一、什么是Hadoop框架:二、Hadoop三大发行版:1.ApacheHadoop2.
Cloudera
Hadoop3.HortonworksHadoop三、Hadoop的优势:四、Hadoop组成
故里º
·
2021-10-24 09:00
大数据
1024程序员节
hadoop
big
data
大数据
hdfs
【填坑之旅-hadoop】centos7安装hadoop2.10.1 hive 1.2.2 / hdfs 文件上传写入流程 / MapReduce Yarn 流程/zookeeper/hive
的原理和编程第四天常见mr算法实现和shuffle的机制第五天hadoop2.x中HA机制的原理和全分布式集群安装部署及维护第六天hbasehive第七天storm+kafka第八天实战项目hadoop
cloudera
cloudera
edh
alwarse
·
2021-10-22 11:24
大数据hadoop-填坑
hadoop
hdfs
mapreduce
干货 | 如何为已有的 ambari 集群修改主机名
之前是有修改过ip的,主机名还真没修改过,只能给他提供一份官方的步骤:https://docs.
cloudera
.com/HDP...。不过经过后面小伙伴们的反馈,都修改成功了。
·
2021-10-16 16:42
java
为在线数据库构建基于 Kudu 的实时数据同步
简述Kudu是
Cloudera
开源的新型列式存储系统,是ApacheHadoop生态圈的成员之一。它专门为了对快速变化的数据进行快速的分析,填补了以往Hadoop存储层的空缺。
·
2021-10-09 12:52
数据库
【CDH安装】2、CDH 集群安装配置
1、登录
Cloudera
Managerhttp://bigdata001:7180admin/admin2、选择免费版或者试用版3、继续下一步4、选择当前管理主机
cloudera
-scm-agent正常启动后
粮忆雨
·
2021-06-27 21:28
搭建Hive环境
下载hive:wgethttp://archive.
cloudera
.com/cdh5/cdh/5/hive-1.1.0-cdh5.7.0.tar.gz解压:tar-zxvf.......
Ace_Wang
·
2021-06-27 00:55
Cloudera
Manager(CDH)入门系列之三 (安装)
操作系统:CentOs6.4虚拟机(4核3G)主机:cdh01(server&agent)+cdh02(agent)CDH版本:cdh5.7.1jdk8准备工作关闭防火墙在两台主机上都运行一下命令serviceiptablesstop设置主机名vim/etc/sysconfig/network将HOSTNAME分别改成cdh01和cdh02:NETWORKING=yesHOSTNAME=cdh01
Kooola大数据
·
2021-06-25 19:46
CentOS7-
Cloudera
Manager5.14.1-大数据集群安装
CentOS7-
Cloudera
Manager5.14.1-大数据集群安装前言本文主要记录
Cloudera
Manager5.14.1的安装步骤需要具有一定基础,一些简单的步骤简略带过1服务配置编号服务器主机名
弓昭
·
2021-06-25 07:38
长跑者百分点
正所谓是其兴也勃焉,
Cloudera
、HortonWorks、MapR等大数据公司受到了市场的追捧,成为屹立潮头、风头一时无两的弄潮儿。白驹过涧,一晃十年已过。
大数据在线
·
2021-06-24 05:59
hbase-window idea调试源码
环境配置1).下载源码,本次讲解的是cdh的hbase,所以git地址为:https://github.com/
cloudera
/hbase.git2).idea环境配置,使用ide
Demo_zfs
·
2021-06-22 23:30
迟到的Kudu设计要点面面观(前篇)
的初衷集群架构与共识保证表与分区的设计底层存储设计细节事务与数据一致性(待续)与Impala、Spark集成(待续)Benchmarking(待续)当前的主要不足(待续)简单调优方法(待续)PrologueKudu在大数据技术栈中是个相对年轻的角色,它原本是
Cloudera
LittleMagic
·
2021-06-22 15:06
kafka的安装和使用(单节点单broker)
下载安装zookeeper下载地址:http://archive.
cloudera
.com/cdh5/cdh/5/(选择自己需要的版本)我下载的版本:http://archive.
cloudera
.com
匪_3f3e
·
2021-06-20 17:12
CDH大数据安装手册--基础环境准备
该源会包括--
Cloudera
Manager5.11.2--CDH5.11.2Parcel--
Cloudera
Manager所需依赖包--mysql-connector-java-5.1.46.tar.gz
SmartNewSexy
·
2021-06-19 20:41
flume
协作框架之Flume1.概念Flume
Cloudera
公司开源的框架高效的收集海量日志文件官网应用场合日志来源于apache/Nginx应用服务器的日志-->HDFSFlume+kafka--->Storm
Bottle丶Fish
·
2021-06-19 16:17
HBase基础概述
安装下载cdh版本的http://archive.
cloudera
.com/cdh5/cdh/5/hadoop安装的Hadoop2.6.0-cdh5.7.0,因此hbase安装的也需要是cdh5.7.0
_羊羽_
·
2021-06-19 02:56
Kafka安装和测试
目前越来越多的开源分布式处理系统如
Cloudera
、ApacheStorm、Spark都支持与Kafka集成。Kafka是一种分布式的,基于发布/订阅的消息系统。
·
2021-06-18 21:00
HDFS数据平衡:节点间平衡与节点内平衡
Cloudera
Manager里与Balancer有关
LittleMagic
·
2021-06-15 06:21
hadoop hdfs HA
*后的HA,HA一般采用
cloudera
开发的QJM方案,已经合并到Apache分支。
july2993
·
2021-06-15 02:42
CDH6.3.2取消静态资源池
Cloudera
Manager提供了向导式的方式为CDH集群启用静态资源池管理,但取消静态资源池管理却不能在同样的界面直接回退。本文主要介绍如何通过CM来禁用静态资源池管理。
碎川689
·
2021-06-13 01:29
CDH详细部署方案
这篇文章中的部署方案主要参考
cloudera
官方手册1集群部署思路下面是一个脑图展示了一般的部署思路http://naotu.baidu.com/file/f78248ad91fcc2019bfc16faf3987f31
littlebear_xbz
·
2021-06-12 05:21
Kafka(一)说明
摘要Kafka是由LinkedIn开发并开源的分布式消息系统,因其分布式及高吞吐率而被广泛使用,现已与
Cloudera
Hadoop,ApacheStorm,ApacheSpark集成。
虾米咬小米
·
2021-06-10 12:48
CDH 开发运行Spark wordcount程序
翻译:https://www.
cloudera
.com/documentation/enterprise/latest/topics/spark_develop_run.html版本:5.14.2本教程描述如何使用
金刚_30bf
·
2021-06-09 09:35
[CDH安装】CDH部署客户端报错
重新部署hdfs客户端时出现如下错误:Can'topen/opt/
cloudera
-manager/cm-5.14.2/run/
cloudera
-scm-agent/process/ccdeploy_hadoop-conf_etchadoopconf.
cloudera
.hdfs
粮忆雨
·
2021-06-07 23:17
Cloudera
Manager(简称CM)+CDH构建大数据平台
一、
Cloudera
Manager介绍
Cloudera
Manager(简称CM)是
Cloudera
公司开发的一款大数据集群安装部署利器,这款利器具有集群自动化安装、中心化管理、集群监控、报警等功能
mantch
·
2021-06-07 16:24
开发环境搭建CDH
基础环境配置3,MySQL安装4,CDH的配置5,启动和安装组件服务器配置说明node0150G磁盘6GiB内存node0250G磁盘4GiB内存node0350G磁盘4GiB内存第一步:CDH下载地址
cloudera
-ma
玉面飞龙
·
2021-06-07 11:47
CDH6.2.0添加Phoenix服务(CentOS6)
下载包https://archive.
cloudera
.com/phoenix/6.2.0/parcels/https://archive.
cloudera
.com/phoenix/6.2.0/csd/
代码足迹
·
2021-06-07 00:26
Cloudera
Manager中启动oozie问题
Cloudera
Manager中启动oozie报错:Causedby:java.lang.ClassNotFoundException:com.mysql.jdbc.Driver.起初以为是OOZIE_HOME
和腐朽说再见
·
2021-06-06 00:39
大数据平台CDH搭建
一、概述
Cloudera
版本(
Cloudera
’sDistributionIncludingApacheHadoop,简称“CDH”),基于Web的用户界面,支持大多数Hadoop组件,包括HDFS、MapReduce
kaliarch
·
2021-06-05 22:50
【CDH安装】1、
Cloudera
Manager安装配置
安装版本:5.16.1服务器列表:编号服务器名称内网IP内存规划1cdhserver1192.168.26.2116G
cloudera
-scm-server、
cloudera
-scm-agent2cdhserver2192.168.26.2210G
cloudera
-scm-agent3cdhserver3192.168.26.2310G
cloudera
-scm-agent1.1
粮忆雨
·
2021-06-05 21:42
玩儿数据 - Centos7 CDH 5.X离线安装
CDH是一套开源的HadoopStack封装,提供开箱即用的Hadoop组件平台,结合
Cloudera
Manager(CM)工具使得集群的安装、扩展、管理、监控变得非常简单方便,使我们可以忽略繁琐的组件安装和配置过程
怒放的葱花
·
2021-06-05 09:56
Centos7下安装kudu
,在官网安装的页面详细介绍了怎么在各种系统下安装kudu:https://kudu.apache.org/docs/installation.htmlimage.png在centos7下我们需要先下载
cloudera
-kudu.repo
pandaAnthony
·
2021-06-05 09:42
集群部署YARN
翻译:https://www.
cloudera
.com/documentation/enterprise/latest/topics/cdh_ig_yarn_cluster_deploy.html#topic
金刚_30bf
·
2021-06-04 20:21
CDH6安装(七)——Server和Agent的安装
Cloudera
ManagerServer安装(bigdata01)sudoyuminstall-y
cloudera
-manager-server到SQL的服务器上,创建临时访问权限(bigdata02
PandaEyes聊大数据
·
2021-06-04 06:02
Hadoop之
Cloudera
Manager
基本介绍简单来说,
Cloudera
Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具,使得安装集群从几天的时间缩短在几个小时内,运维人员从数十人降低到几人以内,极大的提高集群管理的效率
_TIM_
·
2021-05-26 01:59
大数据
大数据组件 - Ambari 01 简介
它主要是由
Cloudera
公司参与贡献开发的(可以查看https://ambari.apache.org/team-list.html)。
雷学委
·
2021-05-24 23:36
大数据
ambari
大数据
Spark案例库V1.0版
Spark案例库案例一:使用SparkRDD实现词频统计pom.xml文件aliyunhttp://maven.aliyun.com/nexus/content/groups/public/
cloudera
https
ChinaManor
·
2021-05-24 22:32
#
Spark
大数据技术
2021年大数据Hadoop(四):Hadoop发行版公司
目录Hadoop发行版公司免费开源版本Apache:免费开源版本HortonWorks:软件收费版本
Cloudera
:CDHHadoop发行版公司Hadoop发行版本分为开源社区版和商业版。
Lansonli
·
2021-05-23 22:12
#
Hadoop
Hadoop发行版公司
Hadoop之Hue
HadoopUserExperience一个图形化界面,提供一个Web界面可以供我们查看执行我们其他的框架Hue是一个开源的ApacheHadoopUI系统,最早是由
Cloudera
Desktop演化而来
_TIM_
·
2021-05-23 05:05
hadoop
七十四、Hue的简介以及安装使用
~目录一、Hue的简介二、Hue的安装三、Hue的使用一、Hue的简介Hue(HadoopUserExperience,Hadoop用户体验),直白来说就一个开源的ApacheHadoopUI系统,由
Cloudera
Desktop
象在舞
·
2021-05-21 11:13
破茧成蝶——大数据篇
大数据
hue集群
使用
Cloudera
搭建数据平台
主要参考官方文档进行安装。安装与配置MySQL数据库$sudoapt-getinstallmysql-server$sudoapt-getinstalllibmysql-java根据文档进行配置,使用InnoDB引擎,添加并更新以下设置。$sudovim/etc/mysql/my.cnf[mysqld]max_connections=100#InnoDBsettingsinnodb_additio
eriolchan
·
2021-05-20 02:00
mysql 导入数据到hdfs
CDHSqoopGuide:http://archive.
cloudera
.com/cdh/3/sqoop/SqoopUserGuide.html使用Sqoop实现HDFS与Mysql互转:https:
宝旭
·
2021-05-18 07:59
Cloudera
Manager 安装 CDH5.x 心得
Cloudera
Manager安装CDH5.x心得废话不多说,先展示下这几天捣鼓的成果
Cloudera
Manager管理配置界面这里写图片描述Hbase管理界面及HbaseWebUI[图片上传失败...
运维前线
·
2021-05-17 05:20
JBOD磁盘配置和StorCLI命令使用小结
这次Hadoop大数据平台工具选择的是
Cloudera
,大家感兴趣的化也可以浏览下它的官网。本篇文章主要介绍如何实现在不停机状态下在线更换JBOD硬盘。利用Sto
王奥OX
·
2021-05-11 11:04
Cloudera
组件安装
翻译:https://www.
cloudera
.com/documentation/enterprise/latest/topics/cdh_ig_cdh5_comp_install.html#topic
金刚_30bf
·
2021-05-11 09:50
CDH5.12.0 安装Spark2及Gateway显示的状态为“不适用”问题
https://www.
cloudera
.com/documentation/spark2/latest/topics/spark2_installing.html1.首先下载想安装的CustomServiceDescriptor
白面葫芦娃92
·
2021-05-09 18:02
上一页
8
9
10
11
12
13
14
15
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他