E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cloudera
cloudera
manager清理日志
https://www.cnblogs.com/qinglanmei/p/11455010.htmlclearcdhlogrm/var/lib/
cloudera
-host-monitor/ts/*/partition
qq_43159264
·
2020-08-14 19:53
bigdata
3.Apache Zeppelin0.9.0 flink basic 官方示例 Batch WordCount 执行报错FLINK_HOME dosen‘t exists(todo)
官方示例任务BatchWordCount执行报错二、解决cd$ZEPPELIN_HOME/confvimzeppelin-env.sh#添加或修改,内容如下exportFLINK_HOME=/opt/
cloudera
终回首
·
2020-08-14 19:04
Apache
Zeppelin
部署HUE
第一步:下载Hue的压缩包并上传到linux解压http://archive.
cloudera
.com/cdh5/cdh/5/hue-3.9.0-cdh5.7.0.tar.gz第二步:编译安装启动2.1
5xh
·
2020-08-14 18:20
ambari 2.7.4.0安装(1):离线包准备
官网地址当前最新版的安装包为2.7.4.0下载地址及相关地址网址如下:https://docs.
cloudera
.com/HDPDocuments/Ambari/Ambari-2.7.4.0/index.html-clouder
猫影
·
2020-08-14 16:55
ambari
hadoop
如何配置CDH的企业微信-群机器人告警
本篇文章大概1968字,阅读时间大约5分钟采用
Cloudera
Mananger提供的自定义告警脚本的方式,收集告警信息并转发到企业微信群中~(企业微信群机器人)1文档主要内容实现
Cloudera
Manager
Eights-Li
·
2020-08-14 16:22
Grafana安装部署
1Grafana安装部署Prometheus+Grafana=监控全家桶Grafana支持
Cloudera
Manager数据源,因此可以搞一波把大数据集群中各种组件的监控都做到Grafana上。
Eights-Li
·
2020-08-14 16:20
kafka 数据可靠性深度解读
目前越来越多的开源分布式处理系统如
Cloudera
、ApacheStorm、Spark等都支持与Kafka集成。
大数据Arry
·
2020-08-14 16:40
大数据
大数据资讯
人工智能
互联网资讯
Ambari2.7.4+HDP3.1.4在centos7.6部署
根据官方文档https://docs.
cloudera
.com/HDPDocuments/Ambari-2.7.4.0/bk_ambari-installation/content/h
arli_xu
·
2020-08-14 16:40
Flume(1)使用入门
一、概述:Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。
aixian1969
·
2020-08-14 16:53
大数据
CDH6.3安装部署手册
目录一、概述二、CDH集群安装步骤1、基础配置,所有机器都需要执行2、所有节点安装JDK3、在dev-cdh1上面安装mysql4、安装
Cloudera
Manager5、在dev-cdh1下载CDH的parcel
惜鸟
·
2020-08-14 16:12
大数据
给Ambari集群里安装可视化分析利器工具Hue步骤(图文详解)
CDH版本大数据集群下搭建Hue(hadoop-2.6.0-cdh5.5.4.gz+hue-3.9.0-cdh5.5.4.tar.gz)(博主推荐)以下,是我在
Cloudera
manager平台下,安装
weixin_33970449
·
2020-08-14 15:23
CDH5.14定期清理指南
目录:1、将HDFS备份数降低2、删除无用HDFS数据和Hbase表格3、设置kafka的日志时间4、删除本机无用文件5、清理Trash回收站6、Balancer重新平衡7、
Cloudera
监控日志清理
北京小辉
·
2020-08-14 15:46
【大数据】CDH管理及优化
(3) 集群创建 -
cloudera
manager安装向导记录(6.2.0版本)
4、选择存储库存储库:安装文件资源的位置可能在parcel的CDH版本选择的时候,会出没有版本可选,并有以下提示:“VersionsofCDHthataretoonewforthisversionof
Cloudera
Manager
qiangweiyan
·
2020-08-14 10:14
大数据#cdh安装
Mariadb互为主从(双主模式)配置
前言这段时间一直在
Cloudera
Manager集群上配置高可用的Mariadb服务。今天花一点记录一下自己的配置过程希望后续的读者看到后在遇到相同业务需求时具有参考价值。
提灯寻梦在南国
·
2020-08-13 21:40
flume安装与使用
1.flume简介Flume是
Cloudera
提供的日志收集系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力
大码王
·
2020-08-13 11:00
学Hadoop之前的环境准备
GATEWAY配成自己的mac和ip/etc/hosts可增加两个映射192.168.198.10hadoop000192.168.198.10localhost二.资源下载使用的Hadoop相关版本:CDH(
Cloudera
程研板
·
2020-08-13 10:55
Hadoop
hadooop篇一-入门(配置及架构了解)
1.hadoop框架1.1Hadoop是什么1.2Hadoop发展历史1.3Hadoop三大发行版本Hadoop三大发行版本:Apache、
Cloudera
、Hortonworks。
smsmtiger
·
2020-08-12 12:17
hadoop学习篇
cloudera
:修改各组件的用户为统一的用户
>>>使用
cloudera
manager安装的组件,每一个组件都有一个用户,这样的处理方案确实更安全,如果不是有绕不过去的坎,不推荐改成统一的一个用户,因为这样改了用户除了不安全,还可能导致集群出现不稳定的情况
weixin_33735676
·
2020-08-11 23:08
数据库
操作系统
大数据
IO error: /var/lib/hadoop-yarn/yarn-nm-recovery/yarn-nm-state/LOCK: 权限不够
Cloudera
Manager启动Yarn阿报错错误日志如下:解决方案:logintherelatednodeserver,checkthepermissionandownershipofthosedirectories
阿文awen
·
2020-08-11 22:45
Hadoop
hadoop基础----hadoop实战(十三)-----hadoop管理工具---断电后重启CDH集群步骤
下面记录恢复CDH集群的步骤:首先需要启动CDH的server服务,并查看状态sudo/etc/init.d/
cloudera
-scm-serverstartsudo/etc/init.d/
cloudera
张小凡vip
·
2020-08-11 22:27
hadoop
基于CDH(
Cloudera
Distribution Hadoop)的大数据平台搭建
“ApacheHadoop存在版本管理混乱、部署过程繁琐、升级过程复杂、兼容性差、安全性低等问题,CDH是Hadoop商业发行版之一,本文介绍基于
Cloudera
Manager的
Cloudera
Hadoop6.1.0
数据社
·
2020-08-11 20:55
centos
linux
数据库
运维
docker
Flume知识整理
Flume定义Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。
xruihao
·
2020-08-11 05:48
笔记
大数据
flume
Sqoop 工具速查表(中文版)--转
Sqoop用户手册(英文版):http://archive.
cloudera
.com/cdh/3/sqoop/SqoopUserGuide.html1.概述本文档主要对SQOOP的使用进行了说明,参考内容主要来自于
weixin_30535913
·
2020-08-11 05:58
Kudu部署
2.Kudu的rpm下载地址http://archive.
cloudera
.com/cdh5/redhat/7/x86_64/cdh/5.15.1/RP
muyingmiao
·
2020-08-11 05:29
Kudu
impala安装部署(rpm安装)
1.下载impala所需的rpm包bigtop-utilsrpm包下载http://archive.
cloudera
.com/cdh5/redhat/6/x86_64/cdh/5.8.3/RPMS/noarch
muyingmiao
·
2020-08-11 05:29
impala
hadoop的基本简介及安装、配置、使用(一)
apachehadoop
cloudera
hadoop(CDH版had
kinglyjn
·
2020-08-11 05:47
JAVA基础
在clouder manager中使用Flume处理数据链
目标:在
Cloudera
Manager中创建两个Flume的Agent,Agent1从localfile中获取内容,写入到kafka的队列中。
wangjinming1976
·
2020-08-11 04:04
大数据
Flume
Kafka
HDFS
Flume-og和Flume-ng的变化
Cloudera
开发的分布式日志收集系统Flume,可以实时的将分布在不同节点、机器上的日志收集到存储系统中。
Polaris-zlf
·
2020-08-11 04:14
Flume
Sqoop informix导入hive
/bin/bashsql=“select*fromtablename”/opt/
cloudera
/parcels/CDH-5.16.1-1.cdh5.16.1.p0.3/lib/sqoop/bin/sqoopimport–connect
Jeremy-D
·
2020-08-11 03:37
Hadoop
flume-ng安装,应用,几个简单测试例子!
官网文档:http://flume.apache.org/FlumeUserGuide.htmlFlume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume
java的爪哇
·
2020-08-11 03:03
大数据
Flume简介
1、什么是flumeflume是由
cloudera
软件公司产出的可分布式日志收集系统,后与2009年被捐赠了apache软件基金会,为hadoop相关组件之一。
流川没有枫
·
2020-08-11 03:19
Flume
Flume
Flume高可靠传输实现原理
简介Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,
buzaiqq
·
2020-08-11 03:36
flume
Java
flume-ng安装与使用
2019独角兽企业重金招聘Python工程师标准>>>1前言Flume开始由
Cloudera
公司开发,2011年
Cloudera
公司将Flume贡献给开源社区,现在ApacheFlume是ApacheSoftwareFoundation
weixin_34284188
·
2020-08-11 02:50
Flume-ng的原理和使用
1.介绍Flume是
Cloudera
提供的日志收集系统,具有分布式、高可靠、高可用性等特点,对海量日志采集、聚合和传输,Flume支持在日志系统中定制各类数据发送方,同时,Flume提供对数据进行简单处理
春宇大数据
·
2020-08-11 02:40
Hadoop应用
分布式采集
Flume-ng 1.6.0安装、配置与使用
1.介绍FlumeNG是
Cloudera
提供的一个分布式、可靠、可用的系统,它能够将不同数据源的海量日志数据进行高效收集、聚合、移动,最后存储到一个中心化数据存储系统中。
ASIA_kobe
·
2020-08-11 02:46
Flume
Flume简介与详细安装教程
Flume简介Flume是
Cloudera
提供的日志收集系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。
天ヾ道℡酬勤
·
2020-08-11 02:14
flume
cdh4.2 在mac OS X10.9.1下编译
编译hadoop-2.0.0-cdh4.2下载tar包http://www.
cloudera
.com/content/
cloudera
-content/
cloudera
-docs/CDH4/latest
wf1982
·
2020-08-11 00:48
云计算
深入java
Hadoop安装与常见问题
前言先说一下当前环境:Ubuntu18.04jdk1.8Hadoop选用-2.6.0-cdh5.15.1用户名:supershuai-VirtualBoxHadoop的下载地址:http://archive.
cloudera
.com
旋转木马_浮世尘华
·
2020-08-10 19:16
解决
Cloudera
Clock Offset问题
Ijustsawthisafteranofficemove.Theserverswereofflineforawhile.ThisiswhatIdidforourCentOSLinuxservers(similar,butnotthesame,stepswouldworkforUbuntu/Debian):*verified/updatedthe/etc/ntp.conffiletobethesa
huoyin
·
2020-08-10 16:35
大数据
Windows环境中MR任务的三种运行方式
本地运行解压hadoop安装tar包hadoop-2.5.0-cdh5.3.6.tar.gz,下载地址:http://archive.
cloudera
.com/cdh5/cdh/5/设置环境变量HADOOP_HOME
H_Hao
·
2020-08-10 16:07
笔记
大数据学习
基于CM搭建的CDH集群之hive组件升级过程(hive0.13.1升级到hive-1.2.1且确保纳入CM管理)
1、在hive0.13.1版本下创建lib121目录cd/opt/
cloudera
/parcels/CDH/lib/hive;mkdirlib1212、下载hive1.2.1版本,并将该版本lib下所有文件拷贝到
jimmyxyalj
·
2020-08-10 08:36
hive
CDH初始化scm_prepare_database.sh数据库遇到的问题
在设置
Cloudera
Manager数据库格式:如果报错(1)数据库中必须没有表,用户权限表中没有增加记录我报错,存在这scm这个库,将库删除后就行了。
宝宝不哭^_^
·
2020-08-10 08:10
CDH 5.3.9(parcels)集群中hive0.13.0升级到hive-1.2.1步骤全,升级hive元数据库,数据不丢失
archive.apache.org/dist/hive/hive-1.2.1/apache-hive-1.2.1-bin.tar.gz2.将安装包传到集群所有节点上3.所有节点root用户下cd/opt/
cloudera
简单的心1
·
2020-08-10 07:15
Hive
sqoop的java操作,总结归纳,含代码
功能由于之前没用过sqoop,所以特地去学习怎么使用,这里总结下这两天了解到的简单内容首先sqoop有两个版本,1.4.X和1.99.X,前者俗称为sqoop1后者成为sqoop2,然后又有apache和
cloudera
你好杰米
·
2020-08-10 07:10
hadoop
java
CDH 中组件升级问题(hive为例)
1cd/opt/
cloudera
/parcels/CDH/lib/hive;mkdirlib1212、下载hive1.2.1版本,并将该版本lib下所有文件拷贝到li
eric_lee
·
2020-08-10 07:33
大数据开发
大数据运维
CDH集群升级hive
archive.apache.org/dist/hive/hive-1.2.1/apache-hive-1.2.1-bin.tar.gz将安装包拷贝到集群所有节点;创建hive-1.2.1的依赖路径(所有节点);midir/opt/
cloudera
留不住斜阳
·
2020-08-10 06:36
大数据
CDH 5.1.5(parcels)集群中hive1.1.0升级到hive-1.2.1步骤全,升级hive元数据库,数据不丢失(亲测可用)
archive.apache.org/dist/hive/hive-1.2.1/apache-hive-1.2.1-bin.tar.gz2.将安装包传到集群所有节点上3.所有节点root用户下cd/opt/
cloudera
宝宝不哭^_^
·
2020-08-10 05:53
心得体会
Hadoop与传统数据仓库的区别
Cloudera
公司的DougCutting与Hortonworks公司的ArunMurthy作为Hadoop领域的两位先驱者,在本届Hadoop2014峰会的问答环节中提出了这样的问题。
山坡坡上的蜗牛
·
2020-08-10 02:35
Hadoop
数据收集之Flume
Flume最初由
Cloudera
开发,于2011年6月贡献给Apache,于2012成为顶级项目。
wangpei1949
·
2020-08-10 02:01
Flume
Flume
kafka与flume集成小案例
Flume定位Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集,聚合和传输的流式架构适合多个生产者适合下游消费者不多的情况(如果存在多个sink,就需要多个channel,
123.56.119.133:8090
·
2020-08-09 23:06
BigData
上一页
18
19
20
21
22
23
24
25
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他