bolt

Storm集成Kafka的Trident实现

原本打算将结构设置为：最后结构更改为：集成Kafkastorm中已经写好了KafkaSpout用来接收Kafka中间件上的消息，并发射到Bolt中，只需要依赖storm-kafka即可：org.apache.stormstor
clamaa·2017-04-11 10:26

Storm技术内幕与大数据实践

Samza用于实时新闻推送,广告和复杂监控.1号店使用经验.1绪论Nimbus和Supervisor通信通过ZooKeeper完成.storm0.8版本开始executor为具体物理线程.同一个spout/bolt
Jason__Zhou·2017-04-09 00:00

storm笔记：Storm+Kafka简单应用

纠结了两天，终于碰巧找到原因：应该使用BaseBasicBolt作为bolt的父类，而不是Ba
看山灬·2017-04-01 15:53

redis机器物理死机问题分析（OOM）

问题的表现在测试主搜索增量bolt的loader程序的时候，它有一步是将数据加载到redis里。在平时做测试的时候，几次发生做loader导致了redis所在的测试机器死机（物理死机）。
Hansion徐汉彬·2017-03-16 22:28

jstorm本地开发环境搭建

org.apache.stormstorm-core0.9.2-incubating-->com.esotericsoftware.kryokryo2.22com.twitterchill-java0.8.1实例storm是spout获取数据源，bolt
jamal117·2017-01-21 14:53

Neo4j embedded例子

使用neo4j3.1.0社区版1.neo4j-community-3.1.0-unix.tar.gz解压后修改相关配置#Boltconnectordbms.connector.bolt.enabled=
ahau10·2017-01-13 14:59

使用storm trident消费kafka消息

传统的事物型拓扑中存在几种bolt：1.1BasicBolt这是最基本的Bolt,BasicBolt每次只能处理一个tuple,而且必须等前一个tuple成功处理后下一个tuple才能继续处理,显然效率不高
农村外出务工男JAVA·2017-01-05 08:00

使用storm trident消费kafka消息

传统的事物型拓扑中存在几种bolt：1.1BasicBolt这是最基本的Bolt,BasicBolt每次只能处理一个tuple,而且必须等前一个tuple成功处理后下一个tuple才能继续处理,显然效率不高
农村外出务工男JAVA·2017-01-05 08:00

storm kafka hdfs 详细

阅读更多packagecom.curiousby.baoyou.cn.storm;importjava.util.UUID;importorg.apache.storm.hdfs.bolt.HdfsBolt
knight_black_bob·2016-12-29 10:00

Storm HelloWorld

示例简介一个简单的Storm的示例，拓扑结构由一个Spout和一个Bolt组成，Spout负责从Redis中读取经纬度点（Coordinate）的数据，并且在这些点中随机挑选一个放入tuple中发射给Bolt
Counting_S·2016-12-23 09:11

storm 如何编写可靠的spout和bolt

阅读更多一、前言对于不使用trident的人来说，使用基本的stormspout,bolt操作，需要理解storm的ack机制，保证消息的完整性，Storm提供了三种不同层次的消息保证机制，分别是AtMostOnce
农村外出务工男JAVA·2016-12-23 08:00

Storm的Stream分组方式

（1）Shuffle分组：Task中的数据随机分配，可以保证同一级Bolt上的每个Task处理的Tuple数量一致。
烽火戏的那个诸侯·2016-11-24 10:12

关于微信小程序的架构与系统设计的几点观感

本文来自于迅雷首席工程师刘智聪的个人分享，他毕业于南昌大学化学系，加入迅雷后设计开发了多款迅雷核心产品，凭借“大规模网络流媒体服务关键支撑技术”项目获得2015年国家科学技术进步奖二等奖，同时也是第四代UI交互技术BOLT
csdn的移动开发朋友们·2016-10-08 16:22

Storm TickTuple 意外停止

Storm的滑动窗口TickTuple通常用来控制bolt定制执行入库操作，使用过程中遇到了TickTuple“意外停止”的情况。 
woodding2008·2016-10-02 16:00

Storm的wordcount实战示例

本文主要以一个简单的wordcount例子，来了解下storm应用程序的开发，虽然只是一个简单的例子但麻雀虽小，五脏俱全，主要涉及的内容：（1）wordcount的拓扑定义（2）spout的使用（3）bolt
qindongliang1922·2016-09-18 17:00

Storm的wordcount实战示例

本文主要以一个简单的wordcount例子，来了解下storm应用程序的开发，虽然只是一个简单的例子但麻雀虽小，五脏俱全，主要涉及的内容：（1）wordcount的拓扑定义（2）spout的使用（3）bolt
qindongliang1922·2016-09-18 17:00

Storm的wordcount实战示例

本文主要以一个简单的wordcount例子，来了解下storm应用程序的开发，虽然只是一个简单的例子但麻雀虽小，五脏俱全，主要涉及的内容：（1）wordcount的拓扑定义（2）spout的使用（3）bolt
qindongliang1922·2016-09-18 17:00

纯CSS3单页切换导航菜单界面设计的简单实现

使用方法HTML结构该单页切换导航菜单界面的HTML结构如下：XML/HTMLCode复制内容到剪贴板Bolt...TypeRocketDribbbleImreadytoplay,invitemefindme
佚名·2016-08-16 16:39

“拿完金牌快回家生娃！”博尔特妈妈的战斗力很爆表

话说，博尔特这也算是“名字起得好就赢在了起跑线上”的典范，他的姓氏bolt恰好就是闪电的意思。FastasBolt.Fastasabolt.Fastasalightningbolt.Fastasl
沪江英语·2016-08-16 00:00

Storm深入理解

简易版实时智能选股平台一、Storm集群架构Nimbus：Storm集群的Master节点，负责分发用户代码，指派给具体的Supervisor节点上的Worker节点，去运行Topology对应的组件（Spout/Bolt
wosyingjun·2016-08-11 08:00

Storm深入理解

简易版实时智能选股平台一、Storm集群架构Nimbus：Storm集群的Master节点，负责分发用户代码，指派给具体的Supervisor节点上的Worker节点，去运行Topology对应的组件（Spout/Bolt
wosyingjun·2016-08-11 08:00

在线实时大数据平台Storm并行度试验

workerstormlist:1个wokers，4个tasks2）集群模式一个worker内一个spout两个Boltjps:1个workerstormlist:1个wokers，6个tasks不同bolt
fjssharpsword·2016-08-10 11:58

storm的数据流组

一个数据流组指定了每个bolt会消费哪些数据流，以及如何消费它们。NOTE：一个节点能够发布一个以上的数据流，一个数据流组允许我们选择接收哪个。
tanggao1314·2016-07-23 16:00

Storm集成Kafka的Trident实现

原本打算将结构设置为：最后结构更改为：集成Kafkastorm中已经写好了KafkaSpout用来接收Kafka中间件上的消息，并发射到Bolt中，只需要依赖storm-kafka即可：org.apache.storm
brandNewUser·2016-07-08 08:00

Storm入门之第一章

一些术语的字面意义翻译如下，由于这个工具的名字叫Storm，这些术语一律按照气象名词解释spout 龙卷，读取原始数据为bolt提供数据bolt 雷电，从spout或其它bolt接收数据，并处理数据，处理结果可作为其它
youzhouliu·2016-07-06 18:00

storm数据流分组

数据流分组定义了一个数据流中的tuple如何分发给topology中不同bolt的task。
xiaqian0917·2016-07-05 11:00

Topology各种方法生命周期

1、在定义Topology实例过程中，定义好Spout实例和Bolt实例2、在提交Topology实例给Nimbus的过程中，会调用TopologyBuilder实例的createTopology()方法
xiaqian0917·2016-07-05 11:00

Strom数据流分组解析

本文可作为>一书1.5节的读书笔记数据流分组定义了一个数据流中的tuple如何分发给topology中不同bolt的task。
程序员小董·2016-07-02 18:23

Storm并发机制详解

本文可作为>一书1.4节的读书笔记在Storm中,一个task就可以理解为在集群中某个节点上运行的一个spout或者bolt实例。记住一个task是一个实例。
程序员小董·2016-07-02 15:13

storm+kafka：WordCount程序

首先规划需要用到的类：从KafkaSpout接收数据并进行处理的backtype.storm.spout.Scheme子类；数据切分bolt：SplitSentenceBolt；计数bolt：WordCountBolt
choulanlan·2016-06-23 17:21

storm流程——storm

Storm集群的输入流由一个被称作spout的组件管理，spout把数据传递给bolt，bolt要么把数据保存到某种存储器，要么把数据传递给其它的bolt。
Levi_moon·2016-06-12 10:54

java-jstorm

jstorm是阿里巴巴开源的基于storm采用Java重写的一套分布式实时流计算框架，使用简单，特点如下：开发非常迅速:接口简单，容易上手，只要遵守Topology，Spout，Bolt的编程规范即可开发出一个扩展性极好的应用
youdianjinjin·2016-05-31 23:00

关于Storm Tick

1.tick的功能ApacheStorm中内置了一种定时机制——tick，它能够让任何bolt的所有task每隔一段时间（精确到秒级，用户可以自定义）收到一个来自__systemd的__tickstream
Lnho2015·2016-05-25 13:00

storm使用范例

此案例实现从数组中随机读取字符串发送到bolt，bolt将字符串变成大写发送到下一个bolt，bolt将字符串加上时间戳然后写到文件中publicclassRandomWordSpoutextendsBaseRichSpout
llllpppp4444·2016-05-10 08:00

Storm 基础 -- spout与bolt设置多重grouping

Topology的代码如下：TopologyBuilderbuilder=newTopologyBuilder(); //WordReaderSpout会从文件中读取数据，数据用shuffle的方式发送给bolt
eyoulc123·2016-05-09 15:00

Storm的自适应动态流控制算法

这个ETL系统是基于Storm实现的，主要是依靠Spout拉取原始日志，Bolt进行处理再入库，为了提高吞吐量，采用了12个Bolt进行并行处理。
Pun_C·2016-05-07 15:00

关于Storm tick

1.tick的功能ApacheStorm中内置了一种定时机制——tick，它能够让任何bolt的所有task每隔一段时间（精确到秒级，用户可以自定义）收到一个来自__systemd的__tickstream
lujinhong2·2016-04-26 16:00

大数据storm应该怎么学？

项目使用Storm0.9.1+Kafka0.8.1.1+Zookeeper锁+Memcached+mysql架构，从集群搭建到集群连通性测试，从项目分析到数据库设计，从需求到Topology和Bolt的设计
让往事随风·2016-04-19 17:00

Strom优化

并行度worker为storm提供工作进程，程序的并行度可以设置（包括spout和bolt的并行度，如果有acker的话还包括acker的并行度），并行度即为task数目。
Anonymous_cx·2016-04-17 11:00

初识Jstorm 多个bolt应用

阅读更多最近接到任务说要使用jstorm处理业务，之前没接触过，只能硬着头皮来，接下来谈谈我这两天的收获1，怎么了解jstorm，这个答案没什么固定的，但是我个人比较喜欢去看官方的文档，如果官方的文档实在找不到了，再去baidu，baidu不到那就只能google了，如果还是找不到。。没办法，看源代码吧；对于官方文档，我现在能找到的只有：https://github.com/alibaba/jst
fox_mt·2016-04-15 17:00

【Storm入门级JAVA示例演示】

本例子主要演示，storm中的HelloWorld,从Spout不断的随机产生单词，然后在Bolt中进行组装输出。完整代码见附件。
gaojingsong·2016-04-10 21:00

Storm 实时云计算 学习使用 包括基本api 以及 高层次api trident 的基本使用

这里补充一下Spark与Storm的区别，1.Storm可以实现1s以下的实时查询,Spark却做不到，Storm更加自由风格计算是在bolt节点上，Spark是在链上，Sparkstream与storm
zhuyuping·2016-04-06 00:00

情报 | 抢在Model 3之前上市 雪佛兰要用Bolt挑战特斯拉

▎智东西文｜海中天今年年末，雪佛兰Bolt电动汽车就会开始销售，价格只有3万美元（不包括美国政府的补贴），电动汽车充电一次可以行驶200英里（320公里）。
智东西·2016-04-06 00:00

大数据处理的三种框架：Storm，Spark和Samza

一个拓扑中包括spout和bolt
mao0514·2016-04-05 17:00

storm 多spout和bolt

TopologyBuilderbuilder=newTopologyBuilder(); SetFlashPlayerSpoutSet=newHashSet(); String[]PlayPlayerDataSourceAddrList=SysConfig._DATA_SOURCE_ADDR_LIST; for(inti=0;i
wangqiaowqo·2016-03-26 08:16

Storm 使用非JVM的语言

Storm使用非JVM的语言要点：1、创建topology（官方文档说使用其他语言创建很简单，因为topology本身是一个thrift结构，参考stotm.thrift）2、用其他语言实现spout和bolt
noteblo·2016-03-18 16:17

Golden.Software.Grapher.v11.9.913.Win32_64 1CD

641CD Golden.Software.Voxler.v4.1.509.Win32_641CD IAREmbeddedWorkbenchforMSP430v6.40.11DVD Csimsoft.Bolt.v1.0.1
qq1140988741·2016-03-18 09:00

Storm的重要概念

Storm中一些重要的概念：Spout（消息源）Bolt（消息处理者）Streamgrouping（数据的分发方式）Topology（拓扑）Worker（工作进程）Task（执行具体逻辑的任务）Executor
xiaqian0917·2016-03-15 15:00

Storm实战之WordCount

这个例子很简单，核心组件包括：一个spout，两个bolt，一个Topology。spout从一个路径读取文件，然后readLine，向bolt发射，一个文件处理完毕后，重命名，以不再重复处理。
xiaqian0917·2016-03-15 15:00

Storm线程进程分配方法

Topology主要由以下三个组件组成的：Workerprocesses（进程）Executors(threads)（线程）Tasks其中进程数除以机器数可以得到每台机器的进程数，我们以一台机器为例：Spout或者Bolt
rainforc·2016-03-12 19:51
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他