strom

strom架构和构建Topology

1.Hadoop的MapReduce与Storm的topology有什么不一样的地方？2.Nimbus与hadoop的jobtracer作用是否类似？3.Nimbus和Supervisor之间的所有协调工作有谁来完成？4.一个topology由哪两部分组成？5.StormHA模式如果机器意外停止，是如何处理任务的？6.storm如何运行一个topology7.Spout类里面最重要的方法是next
tanggao1314·2016-07-23 15:00

Strom数据流分组解析

本文可作为>一书1.5节的读书笔记数据流分组定义了一个数据流中的tuple如何分发给topology中不同bolt的task。Shufflegrouping（随机分组）：这种方式会随机分发tuple给bolt的各个task，每个bolt实例接收到的相同数量的tuple。Fieldsgrouping（按字段分组）：根据指定字段的值进行分组。比如说，一个数据流根据“word”字段进行分组，所有具有相同“
程序员小董·2016-07-02 18:23

Spark介绍与安装教程（Linux系统）

Spark介绍与安装教程（Linux系统）Spark介绍与安装教程Linux系统Spark的介绍Hadoop与Strom大数据处理Spark特点与应用场景框架RDD依赖懒惰计算DAG调度过程容错Spark
lin360580306·2016-04-24 14:00

Strom优化

并行度worker为storm提供工作进程，程序的并行度可以设置（包括spout和bolt的并行度，如果有acker的话还包括acker的并行度），并行度即为task数目。一般而言worker和task之间的比例,即1个worker包含10~15个左右,当然根据配置和应用需要测试优化。worker(slots)CPU16核，建议配置20个worker。CPU24或32核，30个worker默认情况
Anonymous_cx·2016-04-17 11:00

最火爆的开源流式系统Storm vs 新星Samza

data-flow主要是以数据块为数据源来处理数据，代表有：MR、Spark等，我称作它们为大数据，而streaming主要是处理单位内得到的数据，这种方式，更注重于实时性，主要包括Strom、JStorm
u010419967·2016-03-30 21:00

[置顶] 第9章andriod程序破解

环境配置1、Ubuntu15.10系统IP：192.168.153.1302、Santoku系统IP:192.168.153.1363、抓包工具wireshark 实例破解 1、安装apk包root@strom-virtual-machine
strom2418·2016-03-19 23:00

[置顶] 第8章android动态调试

环境配置1、Ubuntu15.10系统IP:192.168.153.130  1、andriod动态调试支持1)     启动andriod虚拟机2)     使用adb命令查看jdwp线程root@strom-virtual-machine
strom2418·2016-03-18 15:00

[置顶] 第7章 andriod so 环境配置

So逆向环境配置 1、环境Ubuntu15.10IP:192.168.153.1302、工具android-ndk-r10  1、配置andriod-ndk-r101)创建目录root@strom-virtual-machine
strom2418·2016-03-16 20:00

Strom（四）运行流程

storm管理命令    stormjar【jar路径】【拓扑包名.拓扑类名】【拓扑名称】   JAR：stormjartopology_jartopology_class[arguments...]    jar命令是用于提交一个集群拓扑.它运行指定参数的topology_class中的main()方法，上传topology_jar到nimbus，由nimbus发布到集群中。一旦提交，storm
xiongsheng·2016-03-11 15:00

Strom（三）-Strom的特性

一、storm的可靠性storm保证从spout发出的每个tuple都会被完全处理 即可靠性Acker工作流程1Spout创建一个新的Tuple时候，会发射一个消息通知acker去跟踪；    collector.emit(newValues("value1","value2"),msgId);2Bolt在处理Tuple成功或者失败，也会发送一个消息通知Acker    collector.emi
xiongsheng·2016-03-07 10:00

Apache Storm 命令行操作

如果想要了解怎样设置你的Strom客户端和远程集群的交互，请按照配置开发环境一文中的步骤操作。
J7A4V5A2W2E8B9e4e6·2016-03-07 09:00

Strom-（2）核心应用开发

Storm中，Spout和Bolt都是Component。Storm定义了一个名叫IComponent的总接口ØSpout的最顶层抽象是ISpout接口。通常情况下（Shell和事务型的除外），实现一个Spout，可以直接实现接口IRichSpout，如果不想写多余的代码，可以直接继承BaseRichSpout。ØBolt的最顶层抽象是IBolt接口Storm提供了IBasicBolt接口，其目的
xiongsheng·2016-03-04 16:00

Strom-（1）基本结构

一、Strom的优点：    1.容错性。Storm会管理工作进程和节点的故障。    2.快速。系统的设计保证了消息能得到快速的处理，使用ZeroMQ作为其底层消息队列。  3.可靠的消息处理。
xiongsheng·2016-03-04 11:00

[置顶] 第3章Android Dalvik虚拟机 第一节

192.168.153.1302、使用的工具vim、baksmali.jar(DEX反汇编工具)、smail.jar  1、配置baksmali.jar、smail.jar1)     解压smali-2.0.3.ziproot@strom-virtual-machine
strom2418·2016-02-25 16:00

[置顶] 第1章 python 打印输出实战

")2、实战例子：print("我喜欢吃的冰淇淋的名字是和路雪")3、实战例子：print("人生的最大快乐,是自己的劳动得到了成果.")print("谢觉哉")4、实战例子：print("我的名字是strom
strom2418·2016-02-12 15:00

Flume+Kafka+Strom基于伪分布式环境的结合使用

---------------------------------------博文作者：迦壹博客地址：Flume+Kafka+Strom基于伪分布式环境的结合使用转载声明：可以转载,但必须以超链接形式标明文章原始出处和作者信息及版权声明
·2016-01-31 12:40

Hadoop 5、HDFS HA 和 YARN

NameNode压力过大，内存受限，影响系统扩展MapReduce存在问题JobTracker单点故障JobTracker压力过大，影响系统扩展难以支持除MapReduce以外的计算框架如Spark、Strom
拉斐尔[Raphael]·2016-01-29 11:00

storm笔记：storm集群

storm笔记：storm集群Strom集群结构是有一个主节点（nimbus）和多个工作节点（supervisor）组成的主从结构，主节点通过配置静态指定（还有一种主从结构是在运行时动态选举，比如zookeeper
看山·2016-01-25 10:35

[置顶] storm笔记：storm集群

storm笔记：storm集群Strom集群结构是有一个主节点（nimbus）和多个工作节点（supervisor）组成的主从结构，主节点通过配置静态指定（还有一种主从结构是在运行时动态选举，比如zookeeper
conansix·2016-01-25 10:00

storm笔记：storm基本概念

storm笔记：storm基本概念本文主要介绍storm中的基本概念，从基础上了解strom的体系结构，便于后续编程过程中作为基础指导。
看山·2016-01-21 14:37

[置顶] storm笔记：storm基本概念

storm笔记：storm基本概念本文主要介绍storm中的基本概念，从基础上了解strom的体系结构，便于后续编程过程中作为基础指导。
tobacco5648·2016-01-21 14:00

STORM实时处理框架之安装准备

ZeroMQ：Storm0.9.0之前的版本中需要安装ZeroMQ，实现StromWorker之间的通信；Storm0.9.0版本之后采用Netty替代ZeroMQ使Strom部署分布式环境更方便。
yangyangmyself·2016-01-17 00:00

[置顶] 从僵尸网络追踪到入侵检测 第6章 Honeyd日志使用

Honeyd日志使用 1、数据包级日志1）创建日志文件root@strom-virtual-machine:~# touch /var/log/honeyd.log2）给予授权root@strom-virtual-machine
strom2418·2016-01-11 19:00

[置顶] 从僵尸网络追踪到入侵检测 第5章 使用Honeyd创建防御路由模板

10.10.10.1322、扫描系统 windows2008R2 IP 10.10.10.1343、扫描工具 SuperScan 4.0 Honeyd网络拓扑图  步骤1、创建Honeyd路由模板root@strom-virtual-machine
strom2418·2016-01-11 18:00

[置顶] 从僵尸网络追踪到入侵检测 第4章 Honeyd动态模板防御扫描软件攻击二

防御系统RHEL 6.4 IP 10.10.10.1322、攻击系统windows 2008R2 ip 10.10.10.1343、扫描工具：SuperScan 4.0  步骤1、动态模板配置root@strom-virtual-machine
strom2418·2016-01-11 12:00

Strom安装流程

系统版本：CentOS6.5Storm版本：0.9.2稳定版安装Storm前，需要做好以下两个准备工作：有问题可以点击链接进入我之前的文章查看ZooKeeper集群的部署Storm依赖软件的安装一.解压安装包apache-storm-0.9.2-incubating.tar解压apache-storm-0.9.2-incubating.tar安装包二.创建项目目录并将解压目录移入项目目录中mkdi
dzgdp888·2015-12-27 20:31

《Scala程序设计》暨Scala简介

Python；Scala以其直逼C++的语言复杂度而出名，但是该语言的流行是因为高并发（akka）和大数据处理（Spark）；Clojure是JVM上的Lisp重现，是纯粹的函数式编程语言，它在实时计算（Strom
javaadu·2015-11-17 17:02

《Scala程序设计》暨Scala简介

Python；Scala以其直逼C++的语言复杂度而出名，但是该语言的流行是因为高并发（akka）和大数据处理（Spark）；Clojure是JVM上的Lisp重现，是纯粹的函数式编程语言，它在实时计算（Strom
duqi_2009·2015-11-17 17:00

[置顶] Metasploit 实战第1章

MetaSploit安全1、安装ruby工具root@strom-virtual-machine:~#apt-getinstallruby2、下载MetaSploitwgethttp://downloads.metasploit.com
strom2418·2015-11-13 21:00

如何全面、彻底根除“暴风影音”的后台运行进程和令人讨嫌的各类广告链接？

1、彻底根除后台运行进程：控制面板/管理工具/服务：停止并禁用“Contrl center of Strom Media”。
·2015-11-13 06:03

Meet Jeff Jonas, the Latest IBM Fellow With No College Degree

Meet Jeff Jonas, the Latest IBM Fellow With No College Degree By David Strom / April 11, 2012 03:
·2015-11-12 23:34

storm学习之入门篇（二）

Strom的简单实现   Spout的实现 对文件的改变进行分开的监听，并监视目录下有无新日志文件添加。 在数据得到了字段的说明后，将其转换成tuple。
·2015-11-11 01:30

Strom学习笔记一

---恢复内容开始--- Storm 是个实时的、分布式以及具备高容错的计算系统。同Hadoop一样Storm也可以处理大批量的数据，然而Storm在保证高可靠性的前提下还可以让处理进行的更加实时；也就是说，所有的信息都会被处理。 Storm同样还具备容错和分布计算这些特性，这就让Storm可以扩展到不同的机器上进行大批量的数据处理。 Storm 与Hadoop异同 1、Stro
·2015-11-09 14:52

[置顶] Android系统安全之旅 第1章 运行编译过的Android系统

sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games"exportJAVA_HOME=/home/strom
strom2418·2015-11-07 23:00

[置顶] Android系统安全之旅 第1章 编译Android程序的方法

两种编译Android程序的方法1、第1种方法strom@strom-virtual-machine:~/android/Android4.4/development$mkdirhello--在android
strom2418·2015-11-07 23:00

Strom安装

首先系统中得有zookeeper集群，这里就不详细说明如果配置和启动安装ZeroMQzeromqurl:以下url中选择你需要安装的版本http://download.zeromq.org/eg:wgethttp://download.zeromq.org/zeromq-2.2.0.tar.gz执行以下语句安装ZeroMQtar-zxvfzeromq-2.2.0.tar.gzcdzeromq-2.
doegoo·2015-11-06 17:00

安装storm的一些很乱的笔记

storm jar all-my-code.jar com.storm.MyTopology arg1 arg2这个命令会运行主类: com.strom.MyTopology, 参数是arg1, arg2
·2015-10-27 14:27

StreamCQL : 实时计算系统 ( CEP ) 中的持续查询语言 CQL

CQL是基于Strom的SQL查询语言，主要用来针对Strom原始的API太复杂，不易用而提出
accesine960·2015-10-27 13:00

大数据处理之流式计算 storm安装

角色hadoop001192.168.0.1Nimbushadoop002192.168.0.2Supervisorhadoop003192.168.0.2Supervisor3.安装步骤  3.1安装Strom
KIKI王·2015-10-20 11:51

大数据处理之流式计算 storm安装

IP角色hadoop001192.168.0.1Nimbushadoop002192.168.0.2Supervisorhadoop003192.168.0.2Supervisor3.安装步骤3.1安装Strom
KIKI王·2015-10-20 11:51

大数据处理之流式计算 storm安装

角色hadoop001192.168.0.1Nimbushadoop002192.168.0.2Supervisorhadoop003192.168.0.2Supervisor3.安装步骤  3.1安装Strom
KIKI王·2015-10-20 11:51

大数据处理之流式计算简介

简介Strom是一个开源的分布式流式计算系统，用来处理流式的数据，被称作为流式的hadoop，在电信行业，可以用来做大流量预警、终端营销、访问竞争对手产品从而做挽留等业务。
KIKI王·2015-10-20 10:24

大数据处理之流式计算简介

简介Strom是一个开源的分布式流式计算系统，用来处理流式的数据，被称作为流式的hadoop，在电信行业，可以用来做大流量预警、终端营销、访问竞争对手产品从而做挽留等业务。
KIKI王·2015-10-20 10:24

大数据处理之流式计算简介

简介Strom是一个开源的分布式流式计算系统，用来处理流式的数据，被称作为流式的hadoop，在电信行业，可以用来做大流量预警、终端营销、访问竞争对手产品从而做挽留等业务。
KIKI王·2015-10-20 10:24

Storm之Spout、Bolt、Topology组件

1.Spout实现 Strom使用元组作为数据模型，元组就是一组命名的值，元组中的每个字段都可以是任何类型的对象。Storm支持所有基本类型，string和byte数组作为元组字段值。
wdasdaw·2015-10-04 14:00

跟我学习Storm_Storm基本架构

Strom集群有主要有两类节点：主节点和工作节点。主节点上运行一个叫做“Nimbus”的
虾皮·2015-09-21 10:00

storm 基础知识点

STROM基础知识点1、STROM基本概念2、构建TOPOLOGY1）实现目标实现对一个句子里面的单词出现的频率进行统计2）设计TOPOLOGY结构开发STROM项目的第一步3）设计数据流4）代码实现5
sherry20150511·2015-09-16 17:00

storm 基础知识点

                                                         STROM基础知识点1、 STROM基本概念 2、 构建TOPOLOGY1） 实现目标实现对一个句子里面的单词出现的频率进行统计
sherry20150511·2015-09-16 17:00

storm 基础知识点

                                                         STROM基础知识点1、 STROM基本概念 2、 构建TOPOLOGY1） 实现目标实现对一个句子里面的单词出现的频率进行统计
sherry20150511·2015-09-16 17:00

JStorm/Strom配置executors和tasks（线程和实例）

注意：JStorm马上融合到Strom内核了，这意味着以后没有Strom了。
doctor_who2004·2015-08-16 23:00
上一页 1 2 3 4 5 6 7 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他