Cloudera

9.迁移CM和数据库-2

9.1将原CM节点数据迁移至新节点9.1.1备份原CM节点数据主要备份CM的监控数据和管理信息，数据目录包括:/var/lib/cloudera-host-monitor/var/lib/cloudera-service-monitor
大勇任卷舒·2024-09-03 05:01

大数据基础之Flume——Flume基础及Flume agent配置以及自定义拦截器

Flume简介Flume用于将多种来源的日志以流的方式传输至Hadoop或者其他目的地 -一种可靠、可用的高效分布式数据收集服务Flume拥有基于数据流上的简单灵活架构，支持容错、故障转移与恢复由Cloudera2009
Clozzz·2024-09-03 03:17

Flume介绍及调优

一、概述Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理
桓桓桓桓·2024-09-03 01:04

大数据技术之Flume

第1章Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。
okbin1991·2024-09-03 00:32

ubuntu16.04安装 ambari 2.7.3的环境准备工作

0、登录官网先看下资料https://docs.cloudera.com/HDPDocuments/Ambari-2.7.3.0/bk_ambari-installation/content/setup_options.html1
lbl251·2024-08-28 01:40

基于Hadoop平台的电信客服数据的处理与分析④项目实现：任务16：数据采集/消费/存储

Flume：是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据
我非夏日·2024-08-23 06:28

CDH 启停使用HiveServer2

翻译：https://www.cloudera.com/documentation/enterprise/latest/topics/cdh_ig_hiveserver2_start_stop.html
金刚_30bf·2024-03-26 23:41

大数据分析学习第十五课 自建云服务器集群离线安装Ambari2.7.5和HDP3.1.5(一)

之前了解了很多关于大数据平台一站式部署管理的工具，比如ApacheAmbari和CDH，目前最新的CDH已经没有了社区版，也就是说以后使用新版本的ClouderaManager和CDH都是要收费的，这对于很多小公司来说
猫头鹰数据分析·2024-02-20 08:29

大数据技术之 Flume

第1章Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。
骚戴·2024-02-11 09:34

【大数据】Flume-1.9.0安装➕入门案例

监控端口数据官方案例3.实时读取本地文件（hive.log）到HDFS案例4.实时读取目录文件到HDFS案例5.实时监控目录下多个追加文件总结前言大数据解决的无非是海量数据的采集、存储、计算，Flume是Cloudera
欧叶冲冲冲·2024-02-11 09:34

大数据Flume--入门

AgentSourceSinkChannelEventFlume安装部署安装地址安装部署Flume入门案例监控端口数据官方案例实时监控单个追加文件实时监控目录下多个新文件实时监控目录下的多个追加文件FlumeFlume定义Flume是Cloudera
泛黄的咖啡店·2024-02-11 09:04

初识kafka

目前越来越多的开源分布式处理系统如Cloudera、Storm、Spark、Flink等都支持与Kafka集成。
tracy_668·2024-02-09 14:07

69.Kudu、Spark2、Kafka安装—CDH

CentOS6.5CM和CDH版本为：5.12.1CM管理员为：admin用户操作系统用户为：root用户69.2操作演示Kudu安装Kudu的Parcel部署下载Kudu的Parcel包：http://archive.cloudera.com
大勇任卷舒·2024-02-09 14:55

Hadoop深度运维：Apache集群原地升级Ambari-HDP

作者介绍冯武，目前在瓜子从事大数据集群运维管理，主要负责Hadoop、Ansible、Ambari、ClouderaManager等技术栈的维护调优工作。
Summer_1981·2024-02-08 18:42

Spark Chapter 8 Spark SQL

SparkSQL/SparkCore直接使用SQL语句进行大数据分析hive的问题：底层MR，2.x之后可以用spark应用场景SQLonHadoop:Hive,Shark(不维护了)，Impala（Cloudera
深海suke·2024-02-07 01:34

CDH使用Disk Balancer平衡磁盘HDFS数据

从CDH5.8.2开始，ClouderaManager提供了一个全面的存储容量管理解决方
Alderaan·2024-02-05 16:05

在 CDH 中调优 Apache Hive on Spark

本主题假设您的集群由ClouderaManager管理，并且您使用YARN作为Spark集群管理器。以下部分中描述的
海阔天空&沫语·2024-02-05 09:27

CDH6.3.2 多 Spark 版本共存

一部署Spark客户端1.1部署spark3客户端tar-zxvfspark-3.3.1-bin-3.0.0-cdh6.3.2.tgz-C/opt/cloudera/parcels/CDH/libcd/
大数据AI·2024-02-05 09:56

Kudu+Impala介绍

转自：http://www.360doc.com/content/18/0913/16/59691344_786386910.shtmlKudu+Impala介绍概述Kudu和Impala均是Cloudera
wjmmjr1·2024-02-05 07:20

HIVE

TextFileSequenceFileRCFileORCParquetUDF自定义函数环境搭建1）hive下载http://archive.clordera.com/cdh5/cdh/5/wgethttp://archive.cloudera.com
Yagami_·2024-02-05 00:23

CDH-CM资源下载

http://ro-bucharest-repo.bigstepcloud.com/cloudera-repos/CDH-6.3.2 链接: https://pan.baidu.com/s/1Vd9ZaXcKG0JDCDszTtasjQoycpCDH
0X码上链·2024-02-03 21:12

Flink SQL Client 安装各类 Connector、组件的方法汇总（持续更新中....）

但是对于某些特定的平台，如果AWSEMR、ClouderaCDP等产品会有所不同，主要是它们中的某些Jar包可能被改写过，例如和HiveMetastore的交互，AWSEMR就有另外一套Metatstore
　Laurence·2024-02-03 06:53

CDH6.3.2安装

文章目录@[toc]一、CM简介1、ClouderaManager的概念2、ClouderaManager的功能3、ClouderaManager的架构二、准备清单1、部署步骤2、集群规划3、软件环境准备三
烟雨话浮生·2024-02-02 14:09

浅谈Spark Livy

SparkLivy什么是LivyLivy的特点Livy的运作流程阐述Livy的安装、启动、访问Livy的使用1.什么是Livylivy是cloudera开发的通过REST来连接、管理spark的解决方案
浅汐yt·2024-02-02 13:40

spark livy hue

Spark提供了REST接口，有如下特性:*提供交互式shell*批量提交*多用户使用用一个服务(用户模拟)*可以从任何地方使用REST的方式提交*无需对代码进行任何修改wgethttp://archive.cloudera.com
bigdataf·2024-02-02 13:08

【livy】Spark Livy深究

什么是livyLivy的特点Livycloudera开发通过REST来连接、管理spark的解决方案从任何地方提交job使用交互式的Scala、Python语言与远程的spark集群进行通信无需更改代码
小赵要加油·2024-02-02 13:07

大数据开发流程图

Flume：实时数据采集的一个开源框架，它是Cloudera提供的一个高可用
xyzkenan·2024-02-01 14:30

Cloudera Manager开启kafka JMX监控

在ClouderaManager上创建了3节点的kafka集群服务，想要外部连接kafkaJMX监控kakfa数据，需要修改kakfa配置：-Dcom.sun.management.jmxremote.host
Troyong·2024-02-01 13:28

利用 Cloudera Manager下安装kafka

文章目录前言一、基于CDH版本选择安装1.1基于CDH版本选择安装1.2选择依赖项1.3角色分配1.4设置KafkaBroker配置1.5查看命令详请1.6安装概要1.7主页查看/启动前言本文章是是利用ClouderaManager
914 JJ·2024-02-01 13:28

使用Cloudera Manager部署Kafka消息队列

一.下载需要安装的Kafka版本1.查看ClouderaDistributionofApacheKafka（简称CDK）版本CDK版本链接地址：https://www.cloudera.com/documentation
至尊宝l·2024-02-01 13:27

Cloudera Manager 安装 Kafka 并简单使用

Kafka简介kafka是一款分布式消息发布和订阅的系统，具有高性能和高吞吐率。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理，也是为了通过集群机来提供实时的消费。核心概念：BrokerKafka集群包含一个或多个服务器，这种服务器被称为brokerTopic每条发布到Kaf
大数据AI·2024-02-01 13:25

大数据-Hadoop概论

2、Hadoop发展史3、Hadoop三大发行版本1、ApacheHadoop2、ClouderaHadoop3、HortonworksHadoo
Mr.史·2024-01-31 06:21

Impala如何将Iceberg上的查询编译性能提升12倍

Impala如何将Iceberg上的查询编译性能提升12倍原文作者：RizaSuminto原文链接：https://blog.cloudera.com/12-times-faster-query-planning-with-iceberg-manifest-caching-in-impala
stiga-huang·2024-01-28 12:07

20190824 课堂笔记

20190824课堂笔记设置快捷键设置编译创建项目选择quickstartGAV设置项目设置修改添加hadoop-version,repositoryUTF-81.81.82.6.4clouderahttps
赛尔木·2024-01-27 23:37

Cloudera5 安装 CDH 卡住 报 Failure due to stall on seeded torrent

安装啊parcel时候卡在这边，报Failureduetostallonseededtorrent屏幕快照2017-12-1021.47.53.png可以用curl-vhttp://localhost:7180/cmf/parcel/download/CDH-5.13.1-1.cdh5.13.1.p0.2-el7.parcel>/dev/null会发现先尝试了ipv6地址image.png解决：关
TreviD·2024-01-27 06:21

Hbase集群安装部署

安装好对应版本的hadoop集群，并启动安装好对应版本的zookeeper集群，并启动HBase集群安装部署下载安装包并上传到node01服务器安装包下载地址：http://archive.cloudera.com
我还不够强·2024-01-25 12:02

Impala：基于内存的MPP查询引擎

Impala查询引擎1、Impala概述1.1、Impala简介1.2、Impala的特点1.3、Impala与Hive1、Impala概述1.1、Impala简介Impala是Cloudera公司主导研发的高性能
对许·2024-01-22 17:26

【大数据】HBase集群安装部署

配置好网络环境安装好对应版本的hadoop集群，并启动安装好对应版本的zookeeper集群，并启动1.HBase集群安装部署1.1准备安装包下载安装包并上传到node01服务器安装包下载地址：http://archive.cloudera.com
橙子园·2024-01-19 00:51

shell spark-submit提交之后获取appid，并在程序中扫描状态

首先看一下提交脚本#/sbin/bash/opt/cloudera/parcels/SPARK2/bin/spark2-submit\exportJAVA_HOME=/opt/jdk1.8.0_31TASK_TYPE
南修子·2024-01-18 22:16

[CDH5] Oozie web console is disabled 问题解决

CDH5安装完成以后OozieWebUI点开显示Ooziewebconsoleisdisabled.问题解决：下载ExtJS2.2:下载地址：http://archive.cloudera.com/gplextras
尼小摩·2024-01-17 19:12

flume

第1章Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，灵活简单。
添柴少年yyds·2024-01-17 00:55

Flume用法总结

Flume用法总结一、Flume是什么Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。可以实时读取服务器的日志写入HDFS。
天选之子123·2024-01-16 10:53

日志采集传输框架之 Flume，将监听端口数据发送至Kafka

1、简介Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，主要有以下几个部分组成。
知其_所以然·2024-01-16 03:03

大数据开发之Flume

第1章：Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输系统。
Key-Key·2024-01-15 12:35

Cloudera公司的CDH与HDP均无法下载问题（403 Forbidden (varnish) the provided credentials were incorrect）

Cloudera公司的CDH与HDP均无法下载问题1.问题描述2.解决方法1.问题描述最近想下载CDH的相关安装包，发现需要输入用户名和密码然而输入cloudera账号之后，会出现如下提示也就是说cloudera
小宇0926·2024-01-15 07:41

项目实战-知行教育大数据分析平台-01

目录一、业务流程二、项目架构流程三、clouderamanager（CM）基本介绍四、项目环境搭建五、维度分析六、数仓建模1、维度建模2、什么是事实表与维度表3、事实表与维度表的分类4、维度建模的三种模型
吆喝的翅膀·2024-01-15 04:22

【大数据进阶第三阶段之Hue学习笔记】Hue简介和架构介绍

1、Hue简介Hue是一个开源的ApacheHadoopUI系统，由ClouderaDesktop演化而来，最后Cloudera公司将其贡献给Apache基金会的Hadoop社区，它是基于PythonWeb
Allen_lixl·2024-01-15 00:56

大数据调度框架Oozie，这个学习网站让你事半功倍！

Oozie是一个基于工作流引擎的开源框架，由Cloudera公司贡献给Apache。
知识分享小能手·2024-01-14 01:59

centos7删除虚拟网卡

背景clouderamanager页面多台机器提示网络接口速度告警，具体提示为：“存在隐患:以下网络接口似乎未以全速运行：virbr0-nic。6主机网络接口似乎以全速运行。
qingzhongli·2024-01-13 21:58

大数据系列 | CDH6.3.2（Cloudera Distribution Hadoop）部署、原理和使用介绍

大数据系列|CDH6.3.2（ClouderaDistributionHadoop）部署、原理和使用介绍1.大数据技术生态中Hadoop、Hive、Spark的关系介绍2.CDN（ClouderaDistributionHadoop
降世神童·2024-01-13 10:50
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他