E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据处理系统
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-10-09 10:00
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
大阳阳
·
2014-10-09 10:00
twitter
[JWFD开源工作流]自动
数据处理系统
如果实现反馈控制会怎么样?
基于JWFD开源工作流系统,我们设计出一个简易的自动数据处理模块,由于我们在流程的每个节点中可以嵌入一组数学方程(并可以在实时编译器的支持下,实现实时编译运行获得计算结果),而在ARC的控制下,我们设计的一个稍微复杂一些的流程图,每运行一次都相当于进行N个解方程的行为,那么在分支和并行模式的支持下,一个比较先进的拓扑计算系统已经现出型来了....
comsci
·
2014-10-09 09:00
工作流
走进企业级批处理框架--Springbatch
Springbatch是一个轻量级的,完全面向Spring的批处理框架,可以应用于企业级大量的
数据处理系统
。
我的编程世界
·
2014-09-12 11:13
【综合问题】
走进企业级批处理框架--Springbatch
Springbatch是一个轻量级的,完全面向Spring的批处理框架,可以应用于企业级大量的
数据处理系统
。
a1314517love
·
2014-09-12 11:00
软考信息技术处理员-模拟试题及答案【第十章】
A.载体B.信宿C.信息D.接收端●信息系统一般包括
数据处理系统
、管理信息系统、决策支持系统和____
51CTO学院
·
2014-08-13 16:56
计算机
在线视频
信息技术
模拟试题
网络管理员
Storm详解一、Storm 概述
一、Storm概述 Storm是一个分布式的、可靠的、零失误的流式
数据处理系统
。它的工作就是委派各种组件分别独立的处理一些简单任务。
suifeng3051
·
2014-08-04 10:00
入门
storm
介绍
概述
数据库视频总结
数据库,一个庞大的
数据处理系统
,它不仅能完善地管理各种数据库对象,具有强大的数据组织、用户管理、安全检查等功能,还可有强大的数据处理功能。
u013067402
·
2014-08-01 16:00
数据库
Hadoop,大数据时代的利剑!——试读《Hadoop基础教程》
在如今这个大数据时代,传统的
数据处理系统
已经很难满足现在爆炸式的计算需求,而Hadoop作为一个有力工具,便成了数据分析人员不可多得的得力助手。拿到试读章节后,便迫不及待的翻开学习。
Moonwolf009
·
2014-07-30 12:00
hadoop
大数据
Spark1.0.1 生态圈
Spark Spark是一个快速的通用大规模
数据处理系统
,和HadoopMapRedeuce相比:更好的容错性和内存计算高速,在内存中运算100倍速度于MapReduce易用
时间在追我
·
2014-07-24 14:00
spark生态圈
大数据技术创新呈现“原创-开源-产品化”的阶梯格局
(一)大数据对传统数据处理技术体系提出挑战大数据来源于互联网、企业系统和物联网等信息系统,经过大
数据处理系统
的分析挖掘,产生新的知识用以支撑决策或业务的自动智能化运转。
chenlmcto
·
2014-05-28 09:27
数据库
互联网
数据源
创新
物联网
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
使用 Twitter Storm 处理实时的大数据
流式处理大数据简介Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解TwitterStorm、它的架构,以及批处理和流式处理解决方案的发展形势。
elf8848
·
2014-05-20 21:00
twitter
管中窥豹:腾讯大数据平台
将
数据处理系统
同数据源解耦,基于“发布-订阅”模型的分布式消
jiezhu2007
·
2014-05-18 08:00
kafka
storm
gaia
yarn
spark
管中窥豹:腾讯大数据平台
将
数据处理系统
同数据源解耦,基于“发布-订阅”模型的分布式消息中间
jiezhu2007
·
2014-05-18 08:00
storm
spark
kafka
yarn
gaia
管中窥豹:腾讯大数据平台
将
数据处理系统
同数据源解耦,基于“发布-订阅”模型的分布式消息中间
jiezhu2007
·
2014-05-18 08:00
storm
spark
kafka
yarn
gaia
管中窥豹:腾讯大数据平台
将
数据处理系统
同数据源解耦,基于“发布-订阅”模型的分布式消
jiezhu2007
·
2014-05-18 08:00
kafka
storm
gaia
yarn
spark
管中窥豹:腾讯大数据平台
将
数据处理系统
同数据源解耦,基于“发布-订阅”模型的分布式消息中间
jiezhu2007
·
2014-05-18 08:00
storm
spark
kafka
yarn
gaia
管中窥豹:腾讯大数据平台
将
数据处理系统
同数据源解耦,基于“发布-订阅”模型的分布式消
jiezhu2007
·
2014-05-18 08:00
kafka
storm
gaia
yarn
spark
[JWFD开源工作流]基于JWFDv0.97自动
数据处理系统
实现图形化计算开发工程的设想
用拖拽的方式,绘制出一个流程图,其中包含分支和汇聚等拓扑结构,然后在每个节点中嵌入一个很基础而简单的公式模块....在目前没有实现反馈运行的情况下,仅仅用一次运行过程实现对一个复杂数学计算工程的运行控制,我觉得完全可行,如果要实现逐次逼近的计算,那么非得要实现流程反馈,在工程上,这种图形化计算的意义非常巨大,如果实现这种图形化的计算方法,加上大规模流程图的数据结构的完善,我们的程序员以后可以摆
comsci
·
2014-04-28 16:00
[自动数据处理]基于JWFD工作流的拓扑
数据处理系统
的演化方向
我在这里就不啰嗦了,希望各位能够看完后能理解我的意思 1:首先是完成拓扑扫描器(搜索引擎搜索相关文档) 2:其次实现对拓扑扫描结果数据的分析模块的设计(请参考COMSCI博客上面的相关文档) 这两个模块合并成一个单元,成为拓扑自动构造器的前置系统 3:利用ARC(JWFD的自动运行控制器)的代码结构构造出一个基础拓扑总线代码架构mBus 4:将前置系统回传的拓扑系统分析数据读取,并构
comsci
·
2014-04-13 18:00
大数据处理点滴笔记
大
数据处理系统
有几点要求:低延迟高性能分布式可扩展(更多的要求是可横向扩展)容错现在用的比较多的就是Hadoop、Storm。
莫海涌
·
2014-04-12 11:00
hadoop
storm
kafka
阿里DataX概述
DataX是一款支持任意异构数据系统离线数据交换的工具、框架、平台,实现了在任意的
数据处理系统
(RDBMS/Hdfs/Localfilesystem)之间的数据交换。
yugouai
·
2014-03-28 20:00
Data
Hadoop之MapReduce
Hadoop比较适合解决大数据问题,很大程度上依赖其大数据存储系统,即HDFS和大
数据处理系统
,即MapRe
wangloveall
·
2014-03-17 20:00
mapreduce
hadoop
海量数据
分布式计算
[JWFD开源工作流]JWFDv0.97自动数据处理的一些关键问题
自动
数据处理系统
演变到非线性计算,需要将嵌入计算模块的流程由线行-串行模式转换为非线性拓扑结构,其中的一些关键技术问题,还需要我在JWFDv0.97的后续版本中陆续解决,所以请广大工作流爱好者不要太急于推出商业化的自动
数据处理系统
comsci
·
2014-03-17 08:00
实时计算,流
数据处理系统
简介与简单分析
实时计算,流
数据处理系统
简介与简单分析一. 实时计算的概念实时计算一般都是针对海量数据进行的,一般要求为秒级。实时计算主要分为两块:数据的实时入库、数据的实时计算。
va_key
·
2014-03-09 01:00
陈皓谈语言现状、技术人转型、个人成长
熟悉高性能,高可用性,分布式,高并发,以及大规模
数据处理系统
。关注底层技术平台和互联网行业应用。技术擅长C/C++/Java和Unix/Linux/Windows。QCon是由InfoQ主办
水羽哲
·
2014-01-17 00:00
陈皓谈语言现状、技术人转型、个人成长
熟悉高性能,高可用性,分布式,高并发,以及大规模
数据处理系统
。关注底层技术平台和互联网行业应用。技术擅长C/C++/Java和Unix/Linux/Windows。QCon是由InfoQ主办
水羽哲
·
2014-01-17 00:00
Twitter开源了其流处理框架Summingbird
Summingbird是一个大规模
数据处理系统
,支持开发者以批处理模式(基于Hadoop/MapReduce)或流处理模式(基于Storm)或混合模式(即组合前两种模式)以统一的方式执行代码。
Michael Hausenblas
·
2014-01-16 00:00
Storm初体验
Storm是一个开源的、大
数据处理系统
,与其他系统不同,它旨在用于分布式实时处理且与语言无关。了解更多请自己google,安装过程也请自己搜索。
liuzhoulong
·
2014-01-09 18:00
大数据技术体系
一个典型的大
数据处理系统
可分为五层:数据采集、存储、处理、分析、应用及展现等,其技术体系如图所示。
如沐春风细雨中
·
2013-12-24 14:24
大数据存储研究
Spring Batch实例详解
SpringBatch是一个轻量级的,完全面向Spring的批处理框架,可以应用于企业级大量的
数据处理系统
。
iteye_10680
·
2013-12-16 18:29
开发框架
Spring Batch实例详解
SpringBatch是一个轻量级的,完全面向Spring的批处理框架,可以应用于企业级大量的
数据处理系统
。
flychao88
·
2013-12-16 18:00
spring
Spring Batch实例详解
SpringBatch是一个轻量级的,完全面向Spring的批处理框架,可以应用于企业级大量的
数据处理系统
。
flychao88
·
2013-12-16 18:00
spring
Storm翻版:开源实时
数据处理系统
Samza
转载自:http://www.kankanews.com/ICkengine/archives/49449.shtmlTwitter的流处理系统Storm最近出现了一个“翻版”——Samza。Samza是近日由LinkedIn开源的一项技术,它是一个分布式流处理框架,专用于实时数据的处理,非常像Twitter的流处理系统Storm。不同的是Samza基于Hadoop,而且使用了LinkedIn自家
jmppok
·
2013-12-11 14:00
storm
Samza
Storm的“翻版”:LinkedIn开源实时
数据处理系统
Samza
发表于2013-09-2215:35| 3435次阅读|来源GigaOM| 5 条评论|作者DerrickHarrisSamzaStormYARNLinkedInHadoop摘要:Samza,是一个分布式流处理框架,专用于实时数据的处理,非常像Twitter的流处理系统Storm,近日LinkedIn开源了这项技术。本文介绍了搭配使用Kafka和YARN的一些特点和优势。近日,LinkedIn开源
xiyf2046
·
2013-10-10 15:00
[开源工作流]自动
数据处理系统
设计的进一步探索
经过前段时间的摸索,我们对使用工作流引擎ARC(自动运行控制器)系统进行自动数据处理的一些基本方法有了更进一步的了解: 1:流程拓扑计算的线性递进方式是单步自动数据处理的基本组成结构(ADP运算的基本单位) 2:反馈模型的出现会让单步自动数据处理的逻辑前进方式变得更加复杂 3:环状轨道计算的多次环形运动与单步自动数据处理的方法的结合会产生强人工智能的一个基本单位运算 最近又摸索了一些新
comsci
·
2013-09-28 16:00
[2010-VLDB] The Performance of MapReduce: An In-depth Study
转自:http://blog.csdn.net/junerf/article/details/6234453一般认为,云
数据处理系统
应该能够提供较高的elasticity,scalability,faulttolerance
cloudeagle_bupt
·
2013-07-08 19:00
Fedora9下Seismic Unix地震
数据处理系统
(SU)安装
一、WindowsXP安装Fedora91、网上下载Fedora-9-i386-DVD:下载其DVD版本,以便在硬盘中安装。http://download.chinaunix.net/download.php?id=25089&ResourceID=123842、下载DOSGRUB。DOSGRUB是一个优秀的多系统引导软件。目的在于开机时可以选择启动LINUX安装以及LINUX启动。http://
xiaokcehui
·
2013-06-26 11:28
SU
Fedora9下Seismic Unix地震
数据处理系统
(SU)安装
一、WindowsXP安装Fedora91、网上下载Fedora-9-i386-DVD:下载其DVD版本,以便在硬盘中安装。http://download.chinaunix.net/download.php?id=25089&ResourceID=123842、下载DOSGRUB。DOSGRUB是一个优秀的多系统引导软件。目的在于开机时可以选择启动LINUX安装以及LINUX启动。http://
u011115875
·
2013-06-26 11:00
大数据时代的热门职业
大
数据处理系统
管理员大
数据处理系统
管理员负责日常Hadoop集群正常运行。例如直接或间接的管理硬件,当需要添加硬件时需保证集群仍能够稳定运行。
海漂一族
·
2013-06-13 10:33
大数据
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他