E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
BOLT
strom中worker、task、spout/
bolt
、executor、component的关系
storm学习网站:http://chenlx.blog.51cto.com/4096635/d-1/p-1整理一下网上有关worker、task、spout/
bolt
、executor、component
forever_ai
·
2014-08-27 11:11
storm
strom中worker、task、spout/
bolt
、executor、component的关系
storm学习网站:http://chenlx.blog.51cto.com/4096635/d-1/p-1整理一下网上有关worker、task、spout/
bolt
、executor、component
An342647823
·
2014-08-27 11:00
storm
strom中worker、task、spout/
bolt
、executor、component的关系
整理一下网上有关worker、task、spout/
bolt
、executor、component之间的关系。
fzhmoive
·
2014-08-22 11:00
storm
Storm【实践系列-如何写一个爬虫4】 - IndexBolt
package com.digitalpebble.storm.crawler.
bolt
.indexing; import java.util.Map; import org.slf4j.LoggerFactory
止静
·
2014-08-21 16:00
Storm 简介
Executor:运行spout/
bolt
的线程Task:worker中每一个spout/
bolt
的线程称为一个task.Topology:storm中运行的实时应用程序,消
hwssg
·
2014-08-20 10:00
storm
Storm【实践系列-如何写一个爬虫3】 - IPResolutionBolt
package com.digitalpebble.storm.crawler.
bolt
; import java.net.InetAddress; import java.net.MalformedURLException
止静
·
2014-08-18 10:00
[置顶] storm - 可靠机制
完全处理的意思是该MessageId绑定的源Tuple以及由该源Tuple衍生的所有Tuple都经过了Topology中每一个应该到达的
Bolt
的处理。
Crazy__Programmer
·
2014-08-10 21:00
storm
基于storm的在线关联规则
在storm里面
bolt
也是可以声明数据流的。)关联规则挖掘数据项的时候,有事务的概念,这里的事务的定义为:给定时间窗口内用户看过的视频集。所以,我们需要这样一个bol
huilixiang
·
2014-08-09 01:00
storm
在线
关联规则
基于storm的在线关联规则
在storm里面
bolt
也是可以声明数据流的。) 关联规则挖掘数据项的时候,有事务的概念,这里的事务的定义为:给定时间窗口内用户看过的视频集。所以,我们需
huilixiang
·
2014-08-08 17:00
storm
在线
storm 学习
一个topology拓扑图包含多个spout和多个
bolt
spout用来读取数据
bolt
用来处理数据 --------------------------------------
Tristan_S
·
2014-08-06 17:00
storm
kafka+storm初探
一、storm简介 Storm的术语包括Stream、Spout、
Bolt
、Task、Worker、StreamGrouping和Topology。Stream是被处理的数据。
GoldenRoc
·
2014-08-06 11:00
storm
kafka
Storm 中 Clojure 的 Prepare
Bolt
实现
[原文地址:http://xcoder.in/2014/08/04/storm-clojure-prepare-
bolt
/]起因Storm中的
Bolt
都是通过Nimbus这个服务将序列化好的
Bolt
断章取义地发到各个
死月
·
2014-08-05 00:00
clojure
storm
Storm详解一、Storm 概述
在Storm集群中处理输入流的是Spout组件,而Spout又把读取的数据传递给叫
Bolt
的组件。
Bolt
组件会对收到的数据元组进行处理,也有可能传递给下一个
Bolt
。
suifeng3051
·
2014-08-04 10:00
入门
storm
介绍
概述
storm环境下重写
bolt
实现读写hdfs
packagestorm.starter.
bolt
;importjava.io.IOException;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop
CZengze
·
2014-08-01 16:11
storm笔记 spout和
bolt
水龙头的部分是数据产生器(spout),中间流经的各个节点(
bolt
)对数据进行分阶段处理。这个模型有点类似以前接触过的过滤器(filt
yaochitc
·
2014-07-26 20:00
storm学习三 drpc学习
DRPC方式调用.可以理解为Storm是一个集群,DRPC提供了集群中处理功能的访问接口.其实即使不通过DRPC,而是通过在Topoloye中的spout中建立一个TCP/HTTP监听来接收数据,在最后一个
Bolt
hao707822882
·
2014-07-23 20:00
storm
Storm数据流模型的分析及讨论
Storm基本概念Storm是一个开源的实时计算系统,它提供了一系列的基本元素用于进行计算:Topology、Stream、Spout、
Bolt
等等。
wbj0110
·
2014-07-01 09:00
storm
Storm数据流模型的分析及讨论
Storm基本概念Storm是一个开源的实时计算系统,它提供了一系列的基本元素用于进行计算:Topology、Stream、Spout、
Bolt
等等。
wbj0110
·
2014-07-01 09:00
storm
Storm数据流模型的分析及讨论
Storm基本概念Storm是一个开源的实时计算系统,它提供了一系列的基本元素用于进行计算:Topology、Stream、Spout、
Bolt
等等。
wbj0110
·
2014-07-01 09:00
storm
Storm应用系列之——Spout、
Bolt
API
前言: 昨天有朋友聊天说,我写的前面三篇太简单了,没有太多深入的东西。好吧,这说明我的目的达到了。我写这个系列的原因就是为了面向应用,进一步细化为两点: 1.以例子说话,由简入深,一步步了解如何在Storm上开发应用,不会读起来吃力; 2.对于一些原理性的东西,不去过于深究,只要记住Storm是这样实现的,开发的时候加以利用或规避。在明白了这些基础的东西以后,如果对于原理性的东西
wbj0110
·
2014-06-28 13:00
storm
Storm应用系列之——Spout、
Bolt
API
前言: 昨天有朋友聊天说,我写的前面三篇太简单了,没有太多深入的东西。好吧,这说明我的目的达到了。我写这个系列的原因就是为了面向应用,进一步细化为两点: 1.以例子说话,由简入深,一步步了解如何在Storm上开发应用,不会读起来吃力; 2.对于一些原理性的东西,不去过于深究,只要记住Storm是这样实现的,开发的时候加以利用或规避。在明白了这些基础的东西以后,如果对于原理性的东西
wbj0110
·
2014-06-28 13:00
storm
Storm应用系列之——Spout、
Bolt
API
前言: 昨天有朋友聊天说,我写的前面三篇太简单了,没有太多深入的东西。好吧,这说明我的目的达到了。我写这个系列的原因就是为了面向应用,进一步细化为两点: 1.以例子说话,由简入深,一步步了解如何在Storm上开发应用,不会读起来吃力; 2.对于一些原理性的东西,不去过于深究,只要记住Storm是这样实现的,开发的时候加以利用或规避。在明白了这些基础的东西以后,如果对于原理性的东西
wbj0110
·
2014-06-28 13:00
storm
Spout 【API 解析】 -spout-
bolt
-
Component在Storm之中,Spout和
Bolt
都是其Compnent,所以在Storm之中定义了一个名叫IComponent的总接口Spout在前面的基本例子中,我们实现了一个RandomSout
止静
·
2014-06-25 15:00
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-25 00:00
T
Storm[技术博客] Storm数据流模型的分析以及讨论
Storm是一个开源的实时计算系统,它提供了一系列的基本元素用于进行计算:1Topology 2Stream3spout4
bolt
在我们提交我们的topology的时候,一旦你提交了你的topology
止静
·
2014-06-24 17:00
Storm ack和fail机制再论
在
bolt
emit的时候,要加上第二个参数anchor tuple,以保持tracker链路 流程, 1. 当tupl
·
2014-06-24 16:00
storm
Stom概念
自己实现一个实时计算系统要考虑哪些问题1.低延迟、高性能、分布式(单机已无法满足要求)、可扩展、容错2.容易在上面开发应用程序,消息不丢失败、消息严格有序 Storm优势1.简单的编程模型类似于MapReduce的Spout/
Bolt
2
elf8848
·
2014-06-24 16:00
概念
stom
Storm【技术文档】 - Storm的Acker机制
每一个data的去向和结果,Storm是如何做到的-》那就是我们接下来要说的Acker机制,先概括下Acker所参与的工作流程1Spout创建一个新的Tuple时候,会发射一个消息通知acker去跟踪;2
Bolt
止静
·
2014-06-23 09:00
storm 简介
同样,Storm也对数据的实时计算提供了简单Spout和
Bolt
原语。Storm
badboy_1990
·
2014-06-09 10:00
storm
Bolt
界面引擎QuickStart: SDK,教程和开发环境
Bolt
界面引擎QuickStart:SDK,教程和开发环境作者:TsukasaBoltQuickStart一.安装BoltSDK这里我们会先介绍如何安装
Bolt
界面引擎的SDK,然后按照业界悠久的传统
GAMELOFT9
·
2014-05-29 15:59
storm的
bolt
实现阶段统计
有时候我们的
bolt
处理统计逻辑时,需要阶段统计一下,再把统计结果emit到后面的汇总统计
bolt
处理,因此需要在本地作一个定时阶段的统计,时间满后再后端的boltemit数据。
dmcpxy
·
2014-05-28 10:00
mapreduce
hadoop
storm
bolt
storm的
bolt
实现阶段统计
有时候我们的
bolt
处理统计逻辑时,需要阶段统计一下,再把统计结果emit到后面的汇总统计
bolt
处理,因此需要在本地作一个定时阶段的统计,时间满后再后端的boltemit数据。
海力布
·
2014-05-28 10:00
自己创建DRPC服务
这个topology然后计算结果,在topology的最后一个叫做ReturnResults的
bolt
会连接到DRPC
liyonghui160com
·
2014-05-27 10:00
storm
创建DRPC服务
storm数据流组
自定义数据流组你可以通过实现backtype.storm.grouping.CustormStreamGrouping接口创建自定义数据流组,让你自己决定哪些
bolt
接收哪些元组。
liyonghui160com
·
2014-05-23 15:00
storm
Twitter Storm源代码分析之Tuple是如何发送的
xumingming.sinaapp.com/727/twitter-storm-code-analysis-tuple-send-proc/这篇文章里面我们来看一下Storm里面的tuple到底是如何从一个tuple是怎么从一个
bolt
来自原野
·
2014-05-21 22:00
twitter storm 源码走读之5 -- worker进程内部消息传递处理和数据结构分析
Topology到Worker的映射关系Topology由Spout,
Bolt
组成,其逻辑关系大体如下图所示。无论是Spo
chris.hsu
·
2014-05-13 13:00
twitter
twitter storm源码走读之2 -- tuple消息发送场景分析
本文尝试分析tuple发送时的具体细节,本博的另一篇文章《
bolt
消息传递路径之源码解读》主要从消息接收方面来阐述问题,两篇文章互为补充。
chris.hsu
·
2014-05-13 12:00
twitter
浅释STORM
定义数据来源组件(SPOUT)定义处理步骤(
BOLT
)组合成一个消
paulwong
·
2014-05-09 22:00
迅雷
bolt
界面库资料记录
抓紧时间,把早上在网上浪荡的收获记录一下一直以来就很想有一个很牛的界面但都是c++的,这不是歧视c#吗1,迅雷
bolt
界面,从迅雷产品关于中点进来的http://
bolt
.xunlei.com/这是一个免费授权的
newmap
·
2014-04-22 10:03
编程心得
迅雷
bolt
界面库资料记录
抓紧时间,把早上在网上浪荡的收获记录一下一直以来就很想有一个很牛的界面但都是c++的,这不是歧视c#吗1,迅雷
bolt
界面,从迅雷产品关于中点进来的http://
bolt
.xunlei.com/这是一个免费授权的
NewMap
·
2014-04-22 10:00
上一页
10
11
12
13
14
15
16
17
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他