chukwa

chukwa安装配置hadoop集群监控

chukwa安装配置集群监控tar-zxvfchukwa-0.6.0.tar.gz-C/opt/modules/设置/etc/profile参数vi/etc/profileexportCHUKWA_HOME
q383700092·2016-03-31 09:00

Netflix详述Keystone Data Pipeline的演进过程

目前几乎所有的Netflix程序主要使用三个版本的pipeline，这三个版本的pipeline可以概括如下：从Chukwa到S3，基于ElasticMapreduce（EMR）后续处理的数据获取。
Dylan Raithel·2016-03-31 00:00

开源日志系统比较：Facebook-scribe、Hadoop-chukwa、kafka、Cloudera-flume

1.背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；（3）具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。本文从设计架构，负载均衡，可扩展性和
coolit_zhm·2016-03-29 14:11

Mahout推荐算法API详解

推荐算法API详解Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
·2016-03-26 00:00

用通俗易懂的大白话讲解Map/Reduce原理

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
uestclr·2016-02-25 23:00

从 Chukwa 到 Keystone ：Netflix 的数据流水线演进

2015年12月，Netflix新的数据流水线Keystone上线。本文将介绍近年来Netflix数据流水线的演进。这是介绍新的Keystone数据流水线系列文章的第一篇。Netflix是一家数据驱动的公司，很多业务和产品决策均基于数据分析作出。数据流水线的作用是在云上收集、聚合、处理和移动数据。Netflix的几乎每一款应用都会用到该数据流水线。先来看Netflix数据流水线的一些数据：每天50
臧秀涛·2016-02-19 00:00

Hadoop家族学习路线图(干货系列)

主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog
J7A4V5A2W2E8B9e4e6·2016-02-05 10:00

hadoop学习路径（知乎）

推荐一些Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
doers123·2016-02-04 18:13

hadoop(1-了解篇)

Hadoop家族PigChukwaHiveHBaseMapReduceHDFSZooKeeperCoreAvro.Core:即Common Hadoop核心.Avro:数据序列化系统.MapReduce
郭晰·2016-01-31 15:00

六款大数据采集平台的架构分析

今天为大家介绍几款数据采集平台：ApacheFlumeFluentdLogstashChukwaScribeSplunkForwarder大数据平台与数据采集任何完整的大数据平台，一般包括以下的几个过程
u010299467·2016-01-25 10:00

Hadoop 的发展史和版本

5）、采用Java或任何的流/管道语言构建MapReduce框架用于编码并进行分析6）、如何获取Web日志，点击流，Apache日志，服务器日志等非结构化数据——fuse,webdav,chukwa,flume
hsl_1990_08_15·2016-01-13 16:00

hadoop日志系统中的日志收集模块

  hadoop日志系统中的日志收集模块，在如今比较流行的以及开源具有代表性的有facebook的scribe，apache的chukwa，linkedin的kafka，以及非常优秀的cloudrea的
weitao1026·2016-01-01 20:00

开源日志系统比较：scribe,chukwa,kafka,flume

百度文库上看到一篇文章，虽然有些老，有参考意义，记录在此：http://wenku.baidu.com/link?url=6HsDfHmWgFLjbfzjVKL5Sb_TezU_eDGeP5o1jIOAfbiv2Axw9V1Bw2LDrauxF1dFWC5rg9epmFKll6nu8BGg4kDdPqT1VLOh8O_2ldE_XT7
师弟文·2015-12-19 12:00

零基础学习 Hadoop 该如何下手？

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa
·2015-11-13 13:26

Mahout推荐算法API详解

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa
·2015-11-13 12:24

用Mahout构建职位推荐引擎

构建职位推荐引擎Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
czp11210·2015-11-13 10:00

从源代码剖析Mahout推荐引擎

Mahout推荐引擎Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
czp11210·2015-11-13 10:00

chukwa 介绍

针对这个问题， Apache 同样提出了相应的解决方案，那就是 chukwa。 概述 chukwa 的官方网站是这样描述自己的：
·2015-11-13 09:01

ChukWa入门1

Chukwa 是什么？  在印度神话中Chukwa是一只最古老的龟。它支撑着世界。在它的背上还支撑着一种叫做Maha-Pudma的大象，在大象的背上顶着这个地球。呵呵，大象？Hadoop？
·2015-11-13 09:59

hadoop部署、启动全套过程

Hadoop项目中包括一个分布式的文件系统ＨＤＦＳ，一个分布式的并行编程框架mapreduce，以及包括hive,hbase,mahout,pig,zookeeper,avro,chukwa在内的诸多子项目
·2015-11-13 07:39

Hadoop家族学习路线图

主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括
·2015-11-13 06:31

Hadoop家族学习路线图

主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括
·2015-11-12 17:52

海量WEB日志分析

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa
·2015-11-11 06:34

hadoop 视频教程2

Hadoop大数据零基础实战培训教程 一，教程内容： 1，Hadoop2.0YARN深入浅出系列 2，Avro数据序列化系统 3，Chukwa集群监控系统 4，Flume日志收集系统 5，Greenplum
·2015-11-08 10:27

scribe、chukwa、kafka、flume日志系统对比 -摘自网络

1. 背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1） 构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2） 支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；（3） 具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。   本文从设
·2015-11-02 09:34

Chukwa

baidutech.blog.51cto.com/4114344/748261/ http://blog.csdn.net/cnbird2008/article/details/14517589 http://chukwa.apache.org
·2015-10-31 16:44

Hadoop下各技术应用场景

对于日志文件的采集，现在最常用的仍然是flume或chukwa，但是我们要看到如果对于日志文件数
·2015-10-31 15:58

Hadoop入门进阶课程13--Chukwa介绍与安装部署

本文版权归作者和博客园共有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出原文连接，博主为石山园，博客地址为 http://www.cnblogs.com/shishanyuan  。该系列课程是应邀实验楼整理编写的，这里需要赞一下实验楼提供了学习的新方式，可以边看博客边上机实验，课程地址为 https://www.shiyanlou.com/courses/237
·2015-10-30 10:57

开源日志系统比较：scribe、chukwa、kafka、flume

1. 背景介绍 许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征： （1） 构建应用系统和分析系统的桥梁，并将它们之间的关联解耦； （2） 支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统； （3） 具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。 本文从设
·2015-10-28 09:34

Mahout学习路线图

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括
kexinmei·2015-10-13 18:00

开源日志系统比较

   scribe主页：https://github.com/facebook/scribechukwa主页：http://incubator.apache.org/chukwa/kafka主页：http
zouliuyun·2015-10-13 11:32

开源日志系统比较

   scribe主页：https://github.com/facebook/scribechukwa主页：http://incubator.apache.org/chukwa/kafka主页：http
zouliuyun·2015-10-13 11:32

Hadoop入门进阶课程13--Chukwa介绍与安装部署

1搭建环境部署节点操作系统为CentOS，防火墙和SElinux禁用，创建了一个shiyanlou用户并在系统根目录下创建/app目录，用于存放Hadoop等组件运行包。因为该目录用于安装hadoop等组件程序，用户对shiyanlou必须赋予rwx权限（一般做法是root用户在根目录下创建/app目录，并修改该目录拥有者为shiyanlou(chown–Rshiyanlou:shiyanlou/
yirenboy·2015-08-04 10:00

scribe、chukwa、kafka、flume日志系统对比

1.背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；（3）具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。 本文从设计架构，负载均衡，可扩展性
m635674608·2015-06-24 10:00

hadoop介绍

hadoop子项目：Hbase       Pig     Hive    ChukwaMapReduce      HDFScore           avrohadoop架构：还有SecondaryNamenode
rc123·2015-06-12 20:00

scribe、chukwa、kafka、flume日志系统对比

scribe、chukwa、kafka、flume日志系统对比http://www.ttlsa.com/log-system/scribe-chukwa-kafka-flume-log-system-contrast
vikenxu·2015-06-01 23:53

Hadoop云计算实战

全面介绍了云计算的基本概念、Google（谷歌）云计算的关键技术，以及Hadoop云计算的相关配套项目及其实战，包括Hadoop的HDFS、MapReduce、HBase、Hive、Pig、Cassandra、Chukwa
李航421·2015-05-29 16:00

Hadoop家族学习路线图

Hadoop家族学习路线图Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
michael_roshen·2015-05-18 18:00

开源日志系统比较：scribe、chukwa、kafka、flume

1.背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；（3）具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。本文从设计架构，负载均衡，可扩展性和
ronin47·2015-05-07 17:00

四种开源日志收集系统对比【flume、kafka、chukwa、scribe】

资料来源论坛：http://f.dataguru.cn/thread-46663-1-1.htmlnginx是web服务器，不是收集日志的系统，擅长在做web服务，或者写日志，每小时切断是为了日志轮换而已。上面说的只是将不同地方日志收拢接受过来进行而已，不负责写日志，也不负责日志解析
buster2014·2015-05-02 18:00

Hadoop 2.2.0和HBase 0.98.11伪分布式

前期准备Hadoop系列软件软件功用HBase数据库Hive数据仓库Mahout机器学习算法、数据挖掘Pig数据分析Avro数据序列化Chukwa日志处理、监控系统Zookeeper协调服务Hadoopversionsupportmatrix
liuyuan185442111·2015-04-21 16:00

大数据学习笔记1--hadoop简介和入门

组件：common：公共组件hdfs：分布式文件系统yarn：运行环境mapreduce：mr计算模型生态系统：Ambari:操作界面avro：通用的序列化机制、与语言无关cassandra:数据库chukwa
程序小小望·2015-04-05 11:58

大数据学习笔记1--hadoop简介和入门

组件：common：公共组件hdfs：分布式文件系统yarn：运行环境mapreduce：mr计算模型生态系统：Ambari:操作界面avro：通用的序列化机制、与语言无关cassandra:数据库chukwa
jinyingone·2015-04-05 11:00

Hadoop常用组件学习

现在Hadoop已经发展为众多项目的集合，包括Common、Arvo、MapReduce、HDFS、Hive、Chukwa、HBase、Zookeeper等项目。
dutsoft·2015-02-28 21:06

什么是mapreduce

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
xt992899·2015-02-26 09:09

什么是mapreduce

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
xt992899·2015-02-26 09:09

Hadoop生态系统学习路线

主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog
longxibendi·2015-02-07 14:00

什么是Map/Reduce

就是一个实现了Google云计算系统的开源系统，包括并行计算模型Map/Reduce，分布式文件系统HDFS，以及分布式数据库Hbase，同时Hadoop的相关项目也很丰富，包括ZooKeeper，Pig，Chukwa
砚浅·2015-02-03 15:22

海量Web日志分析

提取KPI统计指标Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa
KISSING_hu·2014-12-19 17:17

[转]开源日志系统比较：scribe、chukwa、kafka、flume

1.背景介绍许多公司的平台每天会产生大量的日志（一般为流式数据，如，搜索引擎的pv，查询等），处理这些日志需要特定的日志系统，一般而言，这些系统需要具有以下特征：（1）构建应用系统和分析系统的桥梁，并将它们之间的关联解耦；（2）支持近实时的在线分析系统和类似于Hadoop之类的离线分析系统；（3）具有高可扩展性。即：当数据量增加时，可以通过增加节点进行水平扩展。本文从设计架构，负载均衡，可扩展性和
heiyeshuwu·2014-11-27 21:00
上一页 1 2 3 4 5 6 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他