BOLT

storm（一） 集群架构

管理节点，用于提交Supervisor：从节点，接受来自于Nimbus节点的任务，管理WorkerWorker：工作进程，具体执行业务的工作进程Executor：工作线程，一个实际的物理线程Spout/Bolt
阿睿93·2018-08-28 23:45

从0到1简易区块链开发手册V0.3-数据持久化与创世区块

Author:brucefengEmail:[email protected]编程语言:Golang1.BoltDB简介Bolt是一个纯粹Key/Value模型的程序。
暗黑魔君·2018-08-20 22:00

storm（五） 消息分组策略

消息分发策略决定了消息在spout和bolt间，bolt和bolt间如何进行传递。
阿睿93·2018-08-16 21:58

Strom的描述和安装

一，Strom的特点1，架构：1.1，Nimbus1.2，Supervisor1.3，Worker2.2，编程模型：2.1，DAG2.2，Spout2.3，Bolt3，数据传输：3.1，ZmqZmq也是开源的消息传递的框架
IT影风·2018-07-23 23:01

storm基础概念2

逻辑概念spout,bolt,topology物理概念task,executor,worker一个task是一个spout或者bolt的实例，stream指的是同一个compoment的多个task之间的流向一个
loinliao·2018-06-25 10:27

利用storm实现简单的单词统计

WordReader类(spout读取txt文档，按行发射给bolt)publicclassWordReaderimplementsIRichSpout{/***序列化*/privatestaticfinallongserialVersionUID
csdn_Hzx·2018-06-13 21:13

利用storm实现简单的单词统计

WordReader类(spout读取txt文档，按行发射给bolt)publicclassWordReaderimplementsIRichSpout{/***序列化*/privatestaticfinallongserialVersionUID
csdn_Hzx·2018-06-13 21:13

锱铢必较：分布式系统小知识——Apche Storm可靠性机制里为什么要采用异或来判断消息得到完整性处理?

这是分布式系统需要考虑异步网络传输模型的原因.acker接收bolt的顺序是不确定的,用来异或的随机数可以认为是一一对应的,就
大神带我来搬砖·2018-05-18 06:33

Spring-Boot +Neo4j+实现节点的创建和关系的添加【玩转neo4j】

我们先来看下neo4j的三种连接方式打开neo4j的配置文件总过有三种连接方式常用的有两种，一种是http的连接方式【端口：7474】，一种是Bolt的连接方式【端口：7687】http的连接方式本篇不再讲了
appleyk·2018-05-12 13:35

大数据学习之（Storm）-原理详解！

topology可以包含多个worker，但一个worker只能属于一个topologyExceutor在Worker中运行的线程，一个Executor可以对应一个或多个Task，每个Task（Spout或Bolt
qq5af153121eb2c·2018-05-08 16:13

虚拟机上搭建storm集群详细教程

同样，Storm也对数据的实时计算提供了简单Spout和Bolt原理。Storm适用的场景：1、流数据处理：Storm可以用来用来处理源源不断
XiaoXiao_Yang77·2018-05-04 15:58

分布式系统小知识：Apche Storm可靠性机制里为什么要采用异或来判断消息得到完整性处理?

这是分布式系统需要考虑异步网络传输模型的原因.acker接收bolt的顺序是不确定的,用来异或的随机数可以认为是一一对应的,就像一把钥匙开一把锁.如果发送的是+1,-1这样的增量,则很容易出现重复,如果
kabike·2018-05-01 20:00

分布式系统小知识：Apche Storm可靠性机制里为什么要采用异或来判断消息得到完整性处理?

这是分布式系统需要考虑异步网络传输模型的原因.acker接收bolt的顺序是不确定的,用来异或的随机数可以认为是一一对应的,就像一把钥匙开一把锁.如果发送的是+1,-1这样的增量,则很容易出现重复,如果
kabike·2018-05-01 20:00

SOFA 源码分析 —— 服务发布过程

前言SOFA包含了RPC框架，底层通信框架是bolt，基于Netty4，今天将通过SOFA—RPC源码中的例子，看看他是如何发布一个服务的。
莫那一鲁道·2018-04-29 16:28

Storm学习笔记

Storm集群的输入流由一个被称作spout的组件管理，spout把数据传递给bolt，bolt要么把数据保存到某种存储器，要么把数据传递给其它的bolt。
JackLeeLive·2018-04-25 15:56

Unity 可视化脚本 Bolt插件 使用评测

最近看了UnityAssetScore排名，无意之中看到了Bolt还是第一名。（现在回想第一次听到它应该是在Unity做ShaderGraph的直播上）。
BennyChao·2018-04-24 14:30

Storm 笔记

由stream、spout、bolt组成。topography维护了一个拓扑结构，其中，spout可以从外部获取数据，随后将数据传给
ALovelyLazyCat·2018-04-22 17:16

Storm 笔记

由stream、spout、bolt组成。topography维护了一个拓扑结构，其中，spout可以从外部获取数据，随后将数据传给
ALovelyLazyCat·2018-04-22 17:16

Apache Storm分布式实时处理数据流系统

Storm集群的输入流由一个被称作spout的组件管理，spout把数据传递给bolt，bolt要么把数据保存到某种存储器，要么把数据传递给其它的bolt。
郭小傲·2018-04-19 09:58

Storm笔记整理（四）：Storm核心概念与验证——并行度与流式分组

1个worker进程会启动1个或多个executor线程来执行1个topology的(spout或bolt)。
xpleaf·2018-04-13 16:02

jstorm storm 入门demo

jstorm和storm比较jstorm是阿里巴巴开源的基于storm采用Java重写的一套分布式实时流计算框架，使用简单，特点如下：1，开发非常迅速:接口简单，容易上手，只要遵守Topology，Spout，Bolt
木号·2018-04-07 10:19

storm中如何使用BaseWindowedBolt的ack机制

最近有个需求，在WindowedBolt中需要对每个tuple进行ack，如果异常则进行fail，如是，我按照普通Bolt的写法，却始终实现不了上面的功能，代码如下：ListtupleList=inputWindow.get
牛奋lch·2018-03-13 09:29

blotDB [译]

由于Bolt是用来作为这样一个低层次的功能，简单是关键。该API将是小的，只专注于获取值和设置值而已。项目状态Blot稳定，API固定，文件格式固定。使用完整的单元测试覆盖率和随
wolf4j·2018-02-24 10:33

Storm入门（六）深入理解可靠性机制

完全处理的意思是该MessageId绑定的源Tuple以及由该源Tuple衍生的所有Tuple都经过了Topology中每一个应该到达的Bolt的处
guicaizhou·2018-02-06 00:00

TPS低，CPU高--记一次storm压测问题排查过程

www.cnblogs.com/SuKiWX/p/8342025.html一、业务背景+系统架构本次场景为kafka+storm+redis+hbase，通过kafka的数据，进入storm的spout组件接收，转由storm的Bolt
a75543332·2018-01-24 15:00

大数据平台规划

大数据技术栈全景：分布式编程分布式文件系统列数据库(HBase、Cassandra、BigTable)柱数据库(Greenplum、BigQuery)键值数据库(Redis、AmazonDynamoDB、Bolt
勤智运维·2018-01-23 09:04

Storm集成HBase、JDBC、Kafka、Hive

**storm集成Kafka、Hive、JDBC、HBase、HDFS*Createdbyskeron17-11-13*kafka集成storm，将数据发到JobBolt做中文分词逻辑；*结果发到不同bolt
Zzreal·2018-01-14 19:46

Storm的并行度详解 Strom Topology执行分析：worker数，Bolt实例数，executor数，task数

supervisor运行的是topology中的spout/bolttasktask是storm中进行计算的最小的运行单位，表示是spout或者bolt的运行实例。
首席撩妹指导官·2017-12-13 21:01

Storm: DRPC简介

DRPC其实不能算是storm本身的一个特性，它是通过组合storm的原语spout，bolt，topology而成的一种模式(pattern)。本来应该把DRPC单独打成一个包的，但是
首席撩妹指导官·2017-12-13 17:52

golang bolt库操作手册

TransactionsRead-writetransactionsRead-OnlytransactionsBatchread-writetransactions手动控制transaction使用buckets使用keyvaluebucket自动递增整数迭代便利keysprefixscans范围搜索ForEach嵌套buckets今天介绍的库bolt
kingeasternsun·2017-11-24 13:10

java调用Neo4j和ES接口的一些使用笔记

org.neo4j.driver.v1.Driverdriver=GraphDatabase.driver("bolt://192.168.2.74:7687",AuthTokens.basic("neo4j
温暖的小柯南·2017-11-23 19:42

最详细的Storm入门教程（二）

Storm入门例子详解-单词计数器概念Storm分布式计算结构称为topology（拓扑），由stream（数据流），spout（数据流的生成者），bolt（运算）组成。
IM魂影·2017-09-15 12:57

界面库

界面库迅雷Bolt界面引擎Bolt界面引擎是迅雷公司从2009年开始研发的第四代界面库，可以帮助使用者快速开发具有下一代交互体验的软件产品。
苦逼的IT男·2017-09-13 09:51

storm教程（四）：storm策略和storm并行度

storm策略storm里面有6种类型的streamgrouping:1.ShuffleGrouping:随机分组，随机派发stream里面的tuple，保证每个bolt接收到的tuple数目相同。
qq_37095882·2017-08-27 22:10

MySQL优化浅析

于是我就会在内存中（也就是某些特定的Bolt中），维护一个HashMap队列，用来存储之前一段时间的日志列表。这个做法在日志量较小，且统计时间较小的情况下是没有任何问题的
captain_hwz·2017-08-23 11:18

Storm实战之WordCount

这个例子很简单，核心组件包括：一个spout，两个bolt，一个Topology。spout从一个路径读取文件，然后readLine，向bolt发射，一个文件处理完毕后，重命名，以不再重复处理。
maolazhu·2017-08-03 21:24

Storm的重要概念

Storm中一些重要的概念：Spout（消息源）Bolt（消息处理者）Streamgrouping（数据的分发方式）Topology（拓扑）Worker（工作进程）Task（执行具体逻辑的任务）Executor
maolazhu·2017-08-03 21:54

Storm数据流模型的分析及讨论

Storm的基本概念Storm是一个开源的实时计算系统，它提供了一系列的基本元素用于进行计算：Topology、Stream、Spout、Bolt等等。
我叫兰小敏·2017-07-10 13:59

流式处理新玩法，Esper和Storm的联合统计分析

TwitterEsperSample.java例子好像不太好用，反正运行着没什么效果自己写一个例子总的来说就是spout模拟发送5次数据，EsperBolt接收后根据规则进行统计输出（这里是每两次计算平均值），然后最后一个bolt
Meyaoo·2017-07-05 16:35

Storm1.1.0

org.apache.stormstorm-core1.1.0org.apache.stormstorm-hdfs1.1.0需求：读取hdfs上的mapreduce日志文件，统计其中的INFO、WARN、DEBUG、Error日志级别的条数思路很简单，Spout端读入文件，然后Bolt
Gpwner·2017-07-02 21:04

Storm的Spout和Bolt中的方法

一、Spout中的方法1.open当一个Task被初始化的时候会调用此open方法。一般都会在此方法中对发送Tuple的对象SpoutOutputCollector和配置对象TopologyContext初始化。2.declareOutputFields此方法用于声明当前Spout的Tuple发送流。Stream流的定义是通过OutputFieldsDeclare.declareStream方法完
u013063153·2017-06-25 19:00

Storm集群中的组件介绍

介绍Storm作为最流行的的实时流计算框架，提供了可容错的分布式计算所要求的基本源语和保障机制Storm的简单的工作机制spout先从外部获取数据，然后简单的封装成一个个的tuple发送到Bolt，Bolt
qq_21050291·2017-06-16 15:00

Storm（六）：数据流的分流与合流

Storm对数据处理时，不同的数据交给不同的bolt来处理，然后处理好的数据传给同个bolt来存储到数据库，这时就需要分流与合流，我们通过一个例子了解分流与合流。
zhengcongyi·2017-06-11 11:18

像风一样的传奇-致敬博尔特

bolt躺在床上，怎么也睡不着于是就看看视频，无意间在《天才1万小时定律》提到博尔特，自己也很喜欢跑步，正好今天没有动力跑步，去看看人家是怎么连续成为三届奥运会的冠军的！
尹泽Rancho·2017-06-09 00:20

golang调度中心kala测试

前言kala是go版本类crontab调度的服务，默认存储bolt，用redis存储时有点问题，密码为空会抛异常，修改了kala\job\storage\redis\redis.go和main.go增加密码判断
飞天神猫·2017-06-08 19:56

Storm容错机制Acker详解和实战案例

我们期望的是，如果某个Tuple被Bolt执行失败了
Cloudy讲师·2017-05-14 16:41

Apache - Storm 集群

Storm集群的输入流由一个被称作spout的组件管理，spout把数据传递给bolt，bolt要么把数据保存到某种存储器，要么把数据传递给其它的bolt。
蓝宫卫·2017-04-22 19:37

Neo4j 3.1支持因果集群并改进了安全

Neo4j数据库还支持新的集群可感知会话，该会话同样是由Bolt驱动管理，有助于为开发人员
wangliang938·2017-04-17 09:35

bolt BaseBasicBolt BaseRichBolt

baseBasicBolt自带ack机制下面是BasicBoltExecutor的一段源码，如果你写的bolt跑出FailedException异常，basicBolt会调用fail,如果处理成功，会调用
CottonDuke·2017-04-16 16:28

storm笔记：storm基本概念

主要的概念包括：topology（拓扑）stream（数据流）spout（水龙头、数据源）bolt（螺栓，数据筛选处理）streamgroup（数据流分组）reliability（可靠性）task（任务
看山灬·2017-04-12 15:32
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他