chukwa

大数据采集与预处理技术

1.1大数据的概念1.2大数据的关键技术1.3大数据采集与数据预处理技术1.3.1大数据采集技术1.3.2数据预处理技术第二章数据采集基础2.1传统数据采集技术2.2大数据采集基础第三章大数据采集架构1.Chukwa
Sparky*·2024-01-06 14:10

在大数据相关技术中，HBase是个分布的、面向列的开源数据库，是一个适合于非结构化数据存储的数据库。

Chukwa，是一个开源的用于监控大型分布式系统的数据收集系统。
晨晨渝奇·2023-10-05 09:18

linux————ELK（日志收集系统集群）

目前比较有名成熟的有，Splunk(商业)、FaceBook的Scribe、Apache的ChukwaClou
丗卅·2023-08-31 07:59

六大主流大数据采集平台架构分析

今天为大家介绍几款数据采集平台：ApacheFlumeFluentdLogstashChukwaScribeSplunkForwarder大数据平台与数据采集任
带着希望活下去·2023-04-19 06:27

Hadoop家族学习路线图

article/details/14899905要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
凯睿看世界·2023-04-13 14:06

大数据采集主流平台架构对比分析汇总

今天为大家介绍几款数据采集平台：ApacheFlumeFluentdLogstashChukwaScribeSplunkForwarder大数据平台与数据采集任何完整的大数据平台，一般包括以下的几个过程
乐投网·2023-03-31 08:24

Hadoop项目/生态

HadoopCommonHadoopDistributedFileSystem(HDFS™)HadoopYARNHadoopMapReduceOtherHadoop-relatedprojectsatApacheinclude:Ambari™Avro™Cassandra™Chukwa
心無旁騖丶·2023-02-19 01:09

大数据相关开源项目及组件汇总

调度与管理服务文件系统数据搜集消息系统内存技术数据处理查询引擎分析和报告工具机器学习开发平台目录图：类别开源项目调度与管理服务Azkaban、YARN、Mesos、Ambari、ZooKeeper、Thrift、Chukwa
奥卡姆的剃刀·2022-10-10 14:51

利用Flume采集日志数据到HDFS

数据采集的产品很多，facebook的scribe、apache的chukwa、淘宝的TimeTunnel以及cloudera的flume等。
paul250670·2022-09-21 11:42

Hadoop生态圈-flume日志收集工具完全分布式部署

目前主流的Hadoop日志收集工具能够跟Hadoop进行交接的有三个工具，即flume，scribe和chukwa。本篇博客的主角
weixin_34221276·2022-07-18 13:13

大数据辅助工具--Flume 数据采集组件

大数据辅助工具--Flume数据采集组件1、数据收集工具系统产生背景2、专业的数据收集工具2.1、Chukwa2.2、Scribe2.3、Fluentd2.4、Logstash2.5、ApacheFlume3
.道不虚行·2022-07-02 09:22

[转]理解MapReduce

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
dechuan·2022-02-20 23:20

适合低学历的大数据学习方法：大数据采集，大数据分析，大数据存储就该这样学！

Chukwa提供了一个对大数据量日志类数据采集、
yoku酱·2022-02-05 09:53

Flume的优化

现在Hadoop用于日志ETL的工具主要有Facebook的Scribe，Apache的Chukwa和Cloudera的Flume等等。从容错性、负载均
yydcj·2020-09-13 20:12

六大主流大数据采集平台架构分析

今天为大家介绍几款数据采集平台：ApacheFlumeFluentdLogstashChukwaScribeSplunkForwarder大数据平台与数据采集任
weixin_34000916·2020-09-13 20:03

用MapReduce实现矩阵乘法

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
Fens·2020-09-11 01:16

用Hadoop构建电影推荐系统

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
Fens·2020-08-24 14:17

Hadoop生物圈

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
hmxgg·2020-08-22 12:21

Hadoop生态圈中存在的Apache顶级项目

2008年1月，Hadoop成为Apache顶级项目2009年7月，Avro和Chukwa成为Hadoop新的子项目2010年5月，Avro脱离Hadoop项目，成为Apache顶级项目2010年5月，
cdf861015·2020-08-21 13:04

Hadoop的体系结构之HDFS的体系结构

PigChukwaHiveHBaseMapReduceHDFSZookeeperCoreAvro1、HDFS的设计目标2、HDFS的结
weixin_34050519·2020-08-16 21:31

用Mahout构建职位推荐引擎

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
Fens·2020-08-11 21:56

从源代码剖析Mahout推荐引擎

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
Fens·2020-08-11 21:56

Mahout学习路线图

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
Fens·2020-08-10 06:22

Flume 数据采集组件

目录1、数据收集工具/系统产生背景2、专业的数据收集工具2.1、Chukwa2.2、Scribe2.3、Fluentd2.4、Logstash2.5、ApacheFlume3、Flume概述3.1、Flume
jiangw-Tony·2020-08-09 23:16

大数据基础知识

YARN:资源管理框架HBase:分布式列存储数据库Hive:数据仓库Mahout:数据分析与挖掘第二章.大数据关键技术2.1大数据采集与预处理技术FlumeScribeKafkaTimeTunnelChukwa2.2
CUG48·2020-08-04 12:54

大数据学习方法：大数据采集，大数据分析，大数据存储就该这样学！

Chukwa提供了一个对大数据量日志类数据采集、
铁拳虎·2020-08-03 18:37

Hadoop的技术堆栈（hadoop technology stack)

DataStorageHBaseCassandra数据序列化DataSerializationAvroThrift数据智能DataIntelligenceDrillMahoutHadoop孵化器HadoopincubatorChukwaAmbariHDTH
名栩·2020-08-01 13:45

Hadoop家族包含的子项目及其主要功能

ChukwaChukwa是基于Hadoop的大集群监控
今晚打酱油8·2020-08-01 10:43

宝付大数据分析解析

Chukwa提供了一个对大数据量日志类数据采集、存储、分析和展示的全套解决方案和框架，可以用于监控大规模Hadoop集群的整体运
congl3110·2020-07-29 17:18

数据摄取

AmazonKinesis：大规模数据流的实时处理;ApacheChukwa：数据采集系统;ApacheFlume：管理大量日志数据的服务;ApacheKafka：分布式发布-订阅消息系统;ApacheSqoop
chikailiao6191·2020-07-27 20:44

HAdoop基本原理1

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
jukuistar·2020-07-27 13:43

MapReduce原理

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
panda爱学习·2020-07-27 11:57

Hadoop简介--MapReduce

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
xiaoliucool1314·2020-07-27 11:08

chukwa 0.5.0 + hbase 0.94.8 + hadoop 1.1.4 + pig 0.11.1单机伪分布配置

背景：所用的版本都是最新的稳定版，本文主要围绕chukwa进行配置，至于hadoop、hbase、pig的安装只要遵照官方网站的指导就能配置出来本文对chukwa的安装也是在官方网站http://incubator.apache.org
winnerX·2020-07-15 09:41

hbase、mongodb、redis、lucene、 solr研究

Chukwa是基于Hadoop集群中监控系统，简单来说就是一个“看门狗”(WatchDog)Hive是DataWareHouse和MapReduce交集，适用于ETL方面的工作。
火龙果研究院·2020-07-15 01:39

个人hadoop学习总结：Hadoop集群+HBase集群+Zookeeper集群+chukwa监控（包括单机、伪分布、完全分布安装操作）

环境介绍：虚拟机四个：hadoop-marsterhadoop-salve1hadoop-salve2hadoop-salve3===========================1.Hadoop===========================================================================================Linux下创建伪分
阳小良·2020-07-14 01:11

Hadoop家族学习路线图

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
追寻北极·2020-07-13 06:07

开源日志采集系统比较：scribe、chukwa、kafka、flume

1.背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；（3）具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。本文从设计架构，负载均衡，可扩展性和
zhmgzhmg·2020-07-12 19:51

大数据：数据采集平台之Apache Chukwa

大数据：数据采集平台之ApacheChukwaApacheFlume详情请看文章：《大数据：数据采集平台之ApacheFlume》Fluentd详情请看文章：《大数据：数据采集平台之Fluentd》Logstash
王晓(Java)·2020-07-11 16:56

Chukwa搭建、安装、部署、应用

hadoop培训课程：Chukwa搭建、安装、部署、应用1、搭建环境部署节点操作系统为CentOS，防火墙和SElinux禁用，创建了一个shiyanlou用户并在系统根目录下创建/app目录，用于存放
oraclestudyroad·2020-07-11 14:08

scribe、chukwa、kafka、flume日志系统对比

1.背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；（3）具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。本文从设计架构，负载均衡，可扩展性和
追寻北极·2020-07-11 09:20

开源日志系统比较：scribe、chukwa、kafka、flume

1.背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；（3）具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。本文从设计架构，负载均衡，可扩展性和
ronon77·2020-07-10 18:44

海量Web日志分析 用Hadoop提取KPI统计指标

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
Fens·2020-07-10 16:24

Hadoop家族学习路线图

hadoop-family-roadmap/Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
qq361301276·2020-07-05 02:49

Hadoop实战(全面讲解Hadoop以及Hive、HBase、Mahout、Pig、ZooKeeper、Avro、Chukwa等相关技术)...

Hadoop实战(全面讲解Hadoop以及Hive、HBase、Mahout、Pig、ZooKeeper、Avro、Chukwa等相关技术)基本信息作者：陆嘉恒[作译者介绍]出版社：机械工业出版社ISBN
iteye_11539·2020-07-04 18:04

六大数据采集平台的架构对比分析

今天为大家介绍几款数据采集平台：ApacheFlume、Fluentd、Logstash、Chukwa、Scribe、SplunkForwarder。
丨程序之道丨·2020-07-01 05:46

六大主流大数据采集平台架构分析

今天为大家介绍几款数据采集平台：ApacheFlumeFluentdLogstashChukwaScribeSplunkForwarder大数据平台与数据采集任
湘西刀疤客·2020-06-30 00:41

大数据采集架构

所以这个中间系统（数据采集系统）就是将应用程序发送过来的信息转发到分布式的后台服务器集群上，ChuKwaChuKwa是一个开源的用于监控大
凌晨的地铁·2020-06-29 09:11

Hadoop家族系列文章

series-hadoop-family/Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
葡萄喃喃呓语·2020-06-29 08:45

Mahout推荐引擎

Mahout项目Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
lxr-bzd·2020-06-29 06:15
上一页 1 2 3 4 5 6 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他