E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
bolt
storm-topology
spout和
bolt
都可以产生数据流,但是grouping可以决定如何选择下一个处理stream。 Shufle Grouping &n
wind35
·
2014-09-11 09:00
storm
Storm[TOPN -排序] - RollingCountBolt
package com.cc.storm.
bolt
; import java.util.HashMap; import java.util.HashSet; import java.util.Map;
止静
·
2014-09-03 18:00
Storm实践2-【storm实时排序TopN】 - TOP10
使用的场景 2您需要了解当前的TOPN处理,和定时区间处理的区别 看代码说话 package com.cc.storm; import com.cc.storm.
bolt
.MergeBolt
止静
·
2014-09-03 15:00
Storm实践
APP来统计PV,UV,错误码,响应时间等进程模型:Spout:读取日志,解析日志,根据配置的规则对日志过滤和分类,同时对记录打上分钟为单位的标签$TIME=>根据$PATH Hash,emit日志对象
Bolt
_Class1
anghlq
·
2014-08-30 10:00
strom中worker、task、spout/
bolt
、executor、component的关系
storm学习网站:http://chenlx.blog.51cto.com/4096635/d-1/p-1整理一下网上有关worker、task、spout/
bolt
、executor、component
forever_ai
·
2014-08-27 11:11
storm
strom中worker、task、spout/
bolt
、executor、component的关系
storm学习网站:http://chenlx.blog.51cto.com/4096635/d-1/p-1整理一下网上有关worker、task、spout/
bolt
、executor、component
An342647823
·
2014-08-27 11:00
storm
strom中worker、task、spout/
bolt
、executor、component的关系
整理一下网上有关worker、task、spout/
bolt
、executor、component之间的关系。
fzhmoive
·
2014-08-22 11:00
storm
Storm【实践系列-如何写一个爬虫4】 - IndexBolt
package com.digitalpebble.storm.crawler.
bolt
.indexing; import java.util.Map; import org.slf4j.LoggerFactory
止静
·
2014-08-21 16:00
Storm 简介
Executor:运行spout/
bolt
的线程Task:worker中每一个spout/
bolt
的线程称为一个task.Topology:storm中运行的实时应用程序,消
hwssg
·
2014-08-20 10:00
storm
Storm【实践系列-如何写一个爬虫3】 - IPResolutionBolt
package com.digitalpebble.storm.crawler.
bolt
; import java.net.InetAddress; import java.net.MalformedURLException
止静
·
2014-08-18 10:00
[置顶] storm - 可靠机制
完全处理的意思是该MessageId绑定的源Tuple以及由该源Tuple衍生的所有Tuple都经过了Topology中每一个应该到达的
Bolt
的处理。
Crazy__Programmer
·
2014-08-10 21:00
storm
基于storm的在线关联规则
在storm里面
bolt
也是可以声明数据流的。)关联规则挖掘数据项的时候,有事务的概念,这里的事务的定义为:给定时间窗口内用户看过的视频集。所以,我们需要这样一个bol
huilixiang
·
2014-08-09 01:00
storm
在线
关联规则
基于storm的在线关联规则
在storm里面
bolt
也是可以声明数据流的。) 关联规则挖掘数据项的时候,有事务的概念,这里的事务的定义为:给定时间窗口内用户看过的视频集。所以,我们需
huilixiang
·
2014-08-08 17:00
storm
在线
storm 学习
一个topology拓扑图包含多个spout和多个
bolt
spout用来读取数据
bolt
用来处理数据 --------------------------------------
Tristan_S
·
2014-08-06 17:00
storm
kafka+storm初探
一、storm简介 Storm的术语包括Stream、Spout、
Bolt
、Task、Worker、StreamGrouping和Topology。Stream是被处理的数据。
GoldenRoc
·
2014-08-06 11:00
storm
kafka
Storm 中 Clojure 的 Prepare
Bolt
实现
[原文地址:http://xcoder.in/2014/08/04/storm-clojure-prepare-
bolt
/]起因Storm中的
Bolt
都是通过Nimbus这个服务将序列化好的
Bolt
断章取义地发到各个
死月
·
2014-08-05 00:00
clojure
storm
Storm详解一、Storm 概述
在Storm集群中处理输入流的是Spout组件,而Spout又把读取的数据传递给叫
Bolt
的组件。
Bolt
组件会对收到的数据元组进行处理,也有可能传递给下一个
Bolt
。
suifeng3051
·
2014-08-04 10:00
入门
storm
介绍
概述
storm环境下重写
bolt
实现读写hdfs
packagestorm.starter.
bolt
;importjava.io.IOException;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop
CZengze
·
2014-08-01 16:11
storm笔记 spout和
bolt
水龙头的部分是数据产生器(spout),中间流经的各个节点(
bolt
)对数据进行分阶段处理。这个模型有点类似以前接触过的过滤器(filt
yaochitc
·
2014-07-26 20:00
storm学习三 drpc学习
DRPC方式调用.可以理解为Storm是一个集群,DRPC提供了集群中处理功能的访问接口.其实即使不通过DRPC,而是通过在Topoloye中的spout中建立一个TCP/HTTP监听来接收数据,在最后一个
Bolt
hao707822882
·
2014-07-23 20:00
storm
Storm数据流模型的分析及讨论
Storm基本概念Storm是一个开源的实时计算系统,它提供了一系列的基本元素用于进行计算:Topology、Stream、Spout、
Bolt
等等。
wbj0110
·
2014-07-01 09:00
storm
Storm数据流模型的分析及讨论
Storm基本概念Storm是一个开源的实时计算系统,它提供了一系列的基本元素用于进行计算:Topology、Stream、Spout、
Bolt
等等。
wbj0110
·
2014-07-01 09:00
storm
Storm数据流模型的分析及讨论
Storm基本概念Storm是一个开源的实时计算系统,它提供了一系列的基本元素用于进行计算:Topology、Stream、Spout、
Bolt
等等。
wbj0110
·
2014-07-01 09:00
storm
Storm应用系列之——Spout、
Bolt
API
前言: 昨天有朋友聊天说,我写的前面三篇太简单了,没有太多深入的东西。好吧,这说明我的目的达到了。我写这个系列的原因就是为了面向应用,进一步细化为两点: 1.以例子说话,由简入深,一步步了解如何在Storm上开发应用,不会读起来吃力; 2.对于一些原理性的东西,不去过于深究,只要记住Storm是这样实现的,开发的时候加以利用或规避。在明白了这些基础的东西以后,如果对于原理性的东西
wbj0110
·
2014-06-28 13:00
storm
Storm应用系列之——Spout、
Bolt
API
前言: 昨天有朋友聊天说,我写的前面三篇太简单了,没有太多深入的东西。好吧,这说明我的目的达到了。我写这个系列的原因就是为了面向应用,进一步细化为两点: 1.以例子说话,由简入深,一步步了解如何在Storm上开发应用,不会读起来吃力; 2.对于一些原理性的东西,不去过于深究,只要记住Storm是这样实现的,开发的时候加以利用或规避。在明白了这些基础的东西以后,如果对于原理性的东西
wbj0110
·
2014-06-28 13:00
storm
Storm应用系列之——Spout、
Bolt
API
前言: 昨天有朋友聊天说,我写的前面三篇太简单了,没有太多深入的东西。好吧,这说明我的目的达到了。我写这个系列的原因就是为了面向应用,进一步细化为两点: 1.以例子说话,由简入深,一步步了解如何在Storm上开发应用,不会读起来吃力; 2.对于一些原理性的东西,不去过于深究,只要记住Storm是这样实现的,开发的时候加以利用或规避。在明白了这些基础的东西以后,如果对于原理性的东西
wbj0110
·
2014-06-28 13:00
storm
Spout 【API 解析】 -spout-
bolt
-
Component在Storm之中,Spout和
Bolt
都是其Compnent,所以在Storm之中定义了一个名叫IComponent的总接口Spout在前面的基本例子中,我们实现了一个RandomSout
止静
·
2014-06-25 15:00
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Storm[技术博客] Storm数据流模型的分析以及讨论
Storm是一个开源的实时计算系统,它提供了一系列的基本元素用于进行计算:1Topology 2Stream3spout4
bolt
在我们提交我们的topology的时候,一旦你提交了你的topology
止静
·
2014-06-24 17:00
Storm ack和fail机制再论
在
bolt
emit的时候,要加上第二个参数anchor tuple,以保持tracker链路 流程, 1. 当tupl
·
2014-06-24 16:00
storm
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-24 16:00
概念
stom
Storm【技术文档】 - Storm的Acker机制
每一个data的去向和结果,Storm是如何做到的-》那就是我们接下来要说的Acker机制,先概括下Acker所参与的工作流程1Spout创建一个新的Tuple时候,会发射一个消息通知acker去跟踪;2
Bolt
止静
·
2014-06-23 09:00
storm 简介
同样,Storm也对数据的实时计算提供了简单Spout和
Bolt
原语。Storm
badboy_1990
·
2014-06-09 10:00
storm
Bolt
界面引擎QuickStart: SDK,教程和开发环境
Bolt
界面引擎QuickStart:SDK,教程和开发环境作者:TsukasaBoltQuickStart一.安装BoltSDK这里我们会先介绍如何安装
Bolt
界面引擎的SDK,然后按照业界悠久的传统
GAMELOFT9
·
2014-05-29 15:59
storm的
bolt
实现阶段统计
有时候我们的
bolt
处理统计逻辑时,需要阶段统计一下,再把统计结果emit到后面的汇总统计
bolt
处理,因此需要在本地作一个定时阶段的统计,时间满后再后端的boltemit数据。
dmcpxy
·
2014-05-28 10:00
mapreduce
hadoop
storm
bolt
storm的
bolt
实现阶段统计
有时候我们的
bolt
处理统计逻辑时,需要阶段统计一下,再把统计结果emit到后面的汇总统计
bolt
处理,因此需要在本地作一个定时阶段的统计,时间满后再后端的boltemit数据。
海力布
·
2014-05-28 10:00
自己创建DRPC服务
这个topology然后计算结果,在topology的最后一个叫做ReturnResults的
bolt
会连接到DRPC
liyonghui160com
·
2014-05-27 10:00
storm
创建DRPC服务
storm数据流组
自定义数据流组你可以通过实现backtype.storm.grouping.CustormStreamGrouping接口创建自定义数据流组,让你自己决定哪些
bolt
接收哪些元组。
liyonghui160com
·
2014-05-23 15:00
storm
Twitter Storm源代码分析之Tuple是如何发送的
xumingming.sinaapp.com/727/twitter-storm-code-analysis-tuple-send-proc/这篇文章里面我们来看一下Storm里面的tuple到底是如何从一个tuple是怎么从一个
bolt
来自原野
·
2014-05-21 22:00
twitter storm 源码走读之5 -- worker进程内部消息传递处理和数据结构分析
Topology到Worker的映射关系Topology由Spout,
Bolt
组成,其逻辑关系大体如下图所示。无论是Spo
chris.hsu
·
2014-05-13 13:00
twitter
上一页
10
11
12
13
14
15
16
17
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他