E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cloudera
Streamsets简介
Streamsets是由Informatica前首席产品官GirishPancha和
Cloudera
前开发团队负责人ArvindP
叁木-Neil
·
2020-09-14 00:02
ETL-Streamsets
Streamsets
ETL
Impala不能查询到Hive中新增加的表
使用
Cloudera
Manager部署安装的CDH和Impala,Hive中新增加的表,impala中查询不到,其原因是/etc/impala/conf下面没有hadoop和hive相关的配置文件:将hadooop-core.xml
mozuc
·
2020-09-14 00:17
Hadoop
CentOS 7 配置CDH 5.16教程
文章目录一、预先需要下载的安装包二、关闭防火墙和SELINUX三、配置本地SSH免密钥登录四、安装JDK五、安装MySQL六、安装
cloudera
-manager七、CDH集群的配置一、预先需要下载的安装包
jackandsnow
·
2020-09-14 00:06
CDH
分布式
cloudera
-manager内存阈值问题
cloudera
-manager内存阈值问题所有服务安装完后,总的分配内存是27.9G,总内存是31.4G.内存调拨为27.9/31.4=0.89>默认值0.8,改成0.9就OKhttps://blog.csdn.net
With__Sunshine
·
2020-09-14 00:55
CDH
centos7离线部署CDH5.16.2
一个文档,里面是部署步骤:https://download.csdn.net/download/qq_40131121/11897302
cloudera
-manger版本和下载网址:
cloudera
-manager-centos7
yszhong123
·
2020-09-14 00:20
CDH
hadoop
Flume的优化
现在Hadoop用于日志ETL的工具主要有Facebook的Scribe,Apache的Chukwa和
Cloudera
的Flume等等。从容错性、负载均
yydcj
·
2020-09-13 20:12
日志系统
flume
flume搭建调试
InstallingCDH3https://ccp.
cloudera
.com/display/CDHDOC/CDH3+Installationwgethttp://archive.
cloudera
.com
yydcj
·
2020-09-13 20:40
flume
日志系统
Cloudera
Manager集群搭建
Cloudera
Manager集群搭建环境说明:Linux版本Centos6.5CDH版本CDH5linux操作用户root一、安装包下载?
yuxiaojianran
·
2020-09-13 20:39
CDH6.3.2集群启用授权
参考:https://docs.
cloudera
.com/documentation/enterprise/6/latest/topics/sentry.html操作系统:Centos7.8。
邢为栋
·
2020-09-13 20:08
大数据
大数据
运维
cloudera
Cloudera
Manager 5和CDH5离线安装
Cloudera
Manager5和CDH5离线安装前期准备:13台centos6.7(虚拟机部署)=12台(CDH集群)+1台(LAMP展示机器)HostNameIPmaster0110.255.184.32master0210.255.184.33slave0110.255.184.34slave0210.255.184.35slave0310.255.184.36slave0410.255.1
十色花
·
2020-09-13 20:28
集群部署
Hadoop
CDH7180界面打不开
问题描述:之前正常,今天突然打不开解决步骤:查看全部进程service--status-all定位到cdh服务没启动service
cloudera
-scm-serverstatus查看日志/var/log
wisdom_c_1010
·
2020-09-13 20:13
CDH
cdh集群hdfs namenode HA
使用
cloudera
manager只需在界面根据向导执行即可。
kevin_wf
·
2020-09-13 20:40
CDH
HA
hadoop
flume学习-含安装
1.Flume是什么:Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。
春_
·
2020-09-13 20:05
大数据技术
Flume
离线安装
Cloudera
Manager 5和CDH5及与遇到的问题总结
今天介绍一下:在linux系统下,如何搭建CDH集群.1.1
Cloudera
Manager简介
Cloudera
Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具(软件),使得安装集群从几天的时间缩短在几个小时内
new个对象先
·
2020-09-13 20:10
开发环境搭建
cdh5
cloudera
Manager
linux
hadoop集群
集群安装
如何使用
Cloudera
Manager启用HDFS的HA
1.文档编写目的在HDFS集群中NameNode存在单点故障(SPOF),对于只有一个NameNode的集群,如果NameNode机器出现意外,将导致整个集群无法使用。为了解决NameNode单点故障的问题,Hadoop给出了HDFS的高可用HA方案,HDFS集群由两个NameNode组成,一个处于Active状态,另一个处于Standby状态。ActiveNameNode可对外提供服务,而Sta
每天进步一点点...._____
·
2020-09-13 20:10
高可用
CDH6.0.0详细安装教程及所遇到的问题
关于CDH和
Cloudera
ManagerCDH(
Cloudera
’sDistribution,includingApacheHadoop),是Hadoop众多分支中的一种,由
Cloudera
维护,基于稳定版本的
weixin_34378767
·
2020-09-13 20:55
使用
Cloudera
Manager搭建HDFS完全分布式集群
使用
Cloudera
Manager搭建HDFS完全分布式集群作者:尹正杰版权声明:原创作品,谢绝转载!否则将追究法律责任。
weixin_34248258
·
2020-09-13 20:46
CDH平台部署参考手册
2019独角兽企业重金招聘Python工程师标准>>>1.平台概述1.1
cloudera
架构如上图所示,
Cloudera
Manager的核心是
Cloudera
ManagerServer(服务名:
cloudera
-scm-server
weixin_33775582
·
2020-09-13 20:54
大数据
python
ui
Ubuntu14.04离线安装CDH5.6.0
官方安装文档:http://www.
cloudera
.com/documentation/enterprise/5-6-x/topics/installation.html相关包的下载地址:
Cloudera
Manager
洽洽老大
·
2020-09-13 20:09
hadoop
CDH集群环境要求
根据CDH官网提供的虚拟机运行版本,可以看到,
Cloudera
Express版本,虚拟机最低单机运行的内存不能低于8GB。
WorkWorship
·
2020-09-13 19:02
大数据
Cloudera
Manager安装踩过的坑(NTP/JDK/HTTP)
1、NTP时钟源同步问题查看时钟源是否唯一且为master,如下图示有三个时钟源ntpq-p以下步骤将系统及硬件时钟同步至mastersystemctlenablentpd.servicentpdntpdate-u10.47.243.43hwclock–systohcsystemctlrestartntpd.service2、JAVA/JDK1.8.0_11问题告警如下[root@mastercl
qq_43095071
·
2020-09-13 19:05
Flume环境搭建及配置
Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。
灰灰鲁伊
·
2020-09-13 19:27
大数据
flume
Cloudera
|传统数据库向大数据的渐进式转型
数据仓库系统长期以来一直是企业IT架构的重要组成部分。随着开源技术的不断发展以及云端部署方式的不断深入,传统数据仓库的局限性日益凸显,难以适应新技术带来的市场变革,如何面向大数据技术进行数据仓库的优化、转型是企业IT管理者面临的重要挑战。处于不同阶段的企业如何应用大数据技术?如何面向大数据技术进行数据仓库转型?如何对现有数据仓库进行优化?如何在Hadoop中进行性能优化?这些已成为困扰IT管理者的
慧都大数据
·
2020-09-13 19:28
大数据
离线安装
Cloudera
Manager 5和CDH5(最新版5.9.3) 完全教程(一)环境说明
系统环境实验环境:Windowsserver2008下VMware虚拟机操作系统:CentOS6.5x64
Cloudera
Manager:5.9.3CDH:5.9.3安装说明由于处于数据安全保障,整个集群处于内网环境
Lv_Hulk
·
2020-09-13 19:10
Cloudera(CDH)
基于
Cloudera
Manager配置Impala的资源管理
Impala包含一些特性,可以在CDH集群中平衡和最大化资源。本章将说明如何使用Impala提升CDH集群的利用效率。创建静态服务池使用静态服务池可以给Impala和其他服务分配专用的资源,以考虑到预计的资源需求。静态服务池将服务彼此隔离开来,因此一个高负载的服务对其他服务的影响是有限的。你可以使用CM来配置静态服务池,控制内存,CPU和磁盘I/O。lHDFS通常最少需要5-10%的资源l一般,Y
DataFlow范式
·
2020-09-13 19:19
Impala
【Flume】文件收集框架Flume
1、Flume架构Flume是
Cloudera
开发的框架,用于从文件中实时收集数据,分为3部分:collecting(收集),aggregating(聚合),moving(移动),分别对应Source,
魏晓蕾
·
2020-09-13 18:30
BigData
Components
BigData
Cloudera
Manager5之安装部署CDH5.X
本文章介绍
Cloudera
Manager的安装以及部署CDH5.X。主要分如下章节介绍。
邹中凡
·
2020-09-13 18:50
Hadoop
Cloudera
【Flume】Flume入门
Flume简介Flume作为
cloudera
开发的实时日志收集系统,受到了业界的认可与广泛应用。
beautiful_huang
·
2020-09-13 18:21
Flume
flume
实现CDH支持Spark SQL功能
CDH内嵌spark版本不支持spark-sql,可能是因为
cloudera
在推自己的impala;如果上线spark却不能使用sql这种结构化语言,对于大部分分析人员其实是很不爽的!
sunyang098
·
2020-09-13 18:22
spark
CDH5和
Cloudera
Manager5对环境的要求
说明:1.一下内容针对
Cloudera
5.X版本,2.内容来源http://www.
cloudera
.com/documentation/enterprise/release-notes/topics/
wsppstwo
·
2020-09-13 18:34
大数据
Cloudera
Manager进行CDH生产环境集群配置及相关功能示例
目录主页主机角色Parcel配置-非默认值动态资源池静态服务池HDFSHiveImpalaKafkaSpark2YARNZooKeeper
Cloudera
ManagerService主页主机
ddttoop
·
2020-09-13 18:02
Hadoop
大数据
分布式
05搭建cdh 生产环境搭建(生产可用)
自己一直没有时间去写,安装cdh的博客,看到几个大神写的安装cdh比较完整,这里做一个记录CDH安装包下载地址http://archive.
cloudera
.com/cdh5/parcels/5.13.3.2
weixin_34265814
·
2020-09-13 18:44
Cloudera
:智能大数据分析搞定各种复杂应用
在云上,最常见的有两种工作状态,一种是上移和转移,就是把以前的工作负载从私有的平台转到云上;另外一种是
Cloudera
在云上生态的工作负载,在这上面有很多客户大规模的部署。
weixin_34004750
·
2020-09-13 18:43
【基本知识】Flume基本环境搭建以及原理
系统:CentOS6.5JDK:1.8.0_144Flume:flume-ng-1.6.0-cdh5.12.0一、什么是Flumeflume作为
cloudera
开发的实时日志收集系统,受到了业界的认可与广泛应用
weixin_33958366
·
2020-09-13 18:42
大数据集群
常见搭建方式:一、使用框架进行快速搭建,常见CDH(
Cloudera
Manager)和HDP(Ambari)https://www.ibm.com/developerworks/cn/opensource
weixin_30437847
·
2020-09-13 18:07
数据采集工具flume
概述flume是在2011年被首次引入到
Cloudera
的CDH3分发中,2011年6月,
Cloudera
将flume项目捐献给Apache基金会。
weixin_30445169
·
2020-09-13 18:07
大数据
java
Cloudera
Manager CDH 5.12 大数据处理平台部署指南
Cloudera
ManagerCDH5.12部署指南官方共给出了3中安装方式。第一种方法必须要求所有机器都能连网,由于各种网络超时错误,基本没法用。
运维个西瓜
·
2020-09-13 18:34
cdh-HDFS HA配置硬件
Cloudera
建议您在“主”主机或主机上部署JournalNode守护程序(NameNode,Standb
lisery_nj
·
2020-09-13 17:55
hdfs
cdh
海量日志采集Flume(HA)
海量日志采集Flume(HA)1.介绍:Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时
diyingshou8608
·
2020-09-13 17:29
Flume NG高可用集群搭建
软件版本:CentOS6.7hadoop-2.7.4apache-flume-1.6.0一、FlumeNG简述Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统
jinYwuM
·
2020-09-13 17:06
hadoop
Bigdata-
Cloudera
CDH5生产环境推荐的硬件配置
Bigdata-
Cloudera
CDH5生产环境推荐的硬件配置MasterNodeHardwareRecommendationsTypicalconfigurationsforworkernodesWorkerNodes—CPUWorkerNodes—RAMWorkerNodes—Disk
adson1987
·
2020-09-13 17:58
BigData
hive的表的基本操作
环境简介实验环境使用的是
cloudera
-quickstart-vm-5.0环境。
weixin_30894389
·
2020-09-13 16:42
hadoop发行商介绍:
Cloudera
在Hadoop生态系统中,规模最大、知名度最高的公司则是
Cloudera
。现在国内很多公司也都选用他们的发行版本(CDH)。
jiezhu2007
·
2020-09-13 12:49
hadoop技术专栏
hpe故障_HPE和MapR:Hadoop过多,云不足
hpe故障云扼杀了Hadoop三位一体的命运-
Cloudera
,Hortonworks和MapR-相同的云可能不会使HPE成功,后者最近收购了MapR的业务资产。
cxq8989
·
2020-09-13 11:29
大数据
人工智能
java
机器学习
编程语言
HPE和MapR:Hadoop过多,云不足
云扼杀了Hadoop三位一体的命运-
Cloudera
,Hortonworks和MapR-相同的云可能不会使HPE成功,后者最近收购了MapR的业务资产。
cxt70571
·
2020-09-13 11:29
大数据
swift
人工智能
HPE + MapR:Hadoop 过多,云 反而不足
云扼杀了Hadoop三位一体的命运——
Cloudera
,Hortonworks和MapR——相同的云可能不会使HPE成功,后者最近收购了MapR的业务资产。
cxq8989
·
2020-09-13 11:29
cloud
mapr
hadoop
Hadoop真的要死了吗?
10月3日,Hortonworks宣布将与其主要竞争对手
Cloudera
合作创建一家年收入约为7.3亿美元、拥有2,500名客户、市场估值达52亿美元的公司,这令很多人感到意外。
test 999
·
2020-09-13 11:20
【小技巧】HTML中检测浏览器是否受支持
Cloudera
Manager在GoogleChrome、Ap
大道-至简
·
2020-09-13 11:56
Html5
三驾马车已去,再论Hadoop已是凉凉
在2018年10月,最大的两个Hadoop发行版厂商
Cloudera
和Hortonworks宣布合并,抱团取暖,最近由于财报不太好,高层也离职了。
架构师技术联盟
·
2020-09-13 11:03
这个“警钟”,是HPE带着MapR大数据公司给大家敲的
不过,MapR同行的Hortonworks于2014年12月上市,
Cloudera
2017年4月上市。不幸被确定快要破产的时间是在2019年5月底。公布融资困难后,MapR已经寻找买
阿明观察
·
2020-09-13 10:43
人工智能
HPC
云计算
企业级存储
上一页
12
13
14
15
16
17
18
19
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他