E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
dataflow
SSIS Script Component 方法的执行顺序
SSIS Script Component 的脚本可基本要以让我们做任何事,如同Asp.net的CodeBehind,基类的虚方法有相应的执行顺序 在
DataFlow
中添加一个Script Componet
·
2015-11-07 14:13
component
TPL
DataFlow
初探(一)
属性TPL
Dataflow
是微软面向高并发应用而推出的一个类库。借助于异步消息传递与管道,它可以提供比线程池更好的控制,也比手工线程方式具备更好的性能。
·
2015-11-02 13:47
Data
TPL
DataFlow
初探(二)
上一篇简单的介绍了TDF提供的一些Block,通过对这些Block配置和组合,可以满足很多的数据处理的场景。这一篇将继续介绍与这些Block配置的相关类,和挖掘一些高级功能。 在一些Block的构造函数中,我们常常可以看见需要你输入DataflowBlockOptions 类型或者它的两个派生类型ExecutionDataflowBlockOptions 和 GroupingDa
·
2015-11-02 09:48
Data
统计大文件里单词
转载 统计大文件里,频数最高的10个单词,(C# TPL
DataFlow
版) 最近公司搞了一个写程序的比赛,要求从2G的文件里统计出出现频率最高的10个单词。
·
2015-11-01 11:13
大文件
Hadoop下各技术应用场景
数据采集和
DataFlow
对于数据采集主要分为三类,即结构化数据库采集,日志和文件采集,网页采集。对于结构化数据库,采用Sqoop是合适的,可以实现结构化数据库中数据并行批量入库到hdfs存储。
·
2015-10-31 15:58
hadoop
MEF 2 发布调试符号集 ——TPL
DataFlow
随后推出
MEF 2和TPL
Dataflow
RTM已经和.NET Framework 4.5一起发布——而开发团队现在宣布NuGet中已经发布了MEF的调试符号集(Symbol Package)。
·
2015-10-31 10:25
Data
SSIS计算行号
1 在datafolow task中添加一个派生列rowcode,表示行号2 在
dataflow
task中添加一个 script component,在脚本里加入代码。
·
2015-10-31 09:35
SSI
tpl demo
System.Collections.Concurrent ; using System.Threading ; using System.Threading.Tasks ; using System.Threading.Tasks.
Dataflow
·
2015-10-30 13:24
demo
SSIS
Dataflow
使用存储过程不能检索列名
在项目中遇到一个问题,需要在
Dataflow
中调用一个存储过程,然后把结果生成一个csv文件。 然而在
dataflow
调用存储过程中遇到了问题,SP不能正确的返回列名。
·
2015-10-30 10:12
存储过程
为SSIS编写自定义数据流组件(
DataFlow
Component)之进阶篇:自定义编辑器
我们之前几篇讨论过自定义数据流组件的一些技术,分别如下 入门篇 http://www.cnblogs.com/chenxizhang/archive/2009/06/20/1507467.html 数据流组件 http://www.cnblogs.com/chenxizhang/archive/2009/06/21/1507631.html 如何在自定义数据源组件中限制用户的更改&
·
2015-10-28 08:57
component
Utilizing LabVIEW Polymorphic VIs to Access Variables Directly by Name
polymorphic VIs is a method within the graphical programming language that incorporates benefits of
dataflow
·
2015-10-28 08:29
variable
微软BI 之SSIS 系列 - 理解Data Flow Task 中的同步与异步, 阻塞,半阻塞和全阻塞以及Buffer 缓存概念
开篇介绍 在 SSIS
Dataflow
数据流中的组件可以分为 Synchronous 同步和 Asynchronous 异步这两种类型。
·
2015-10-27 11:51
buffer
TPL
Dataflow
库的几个扩展函数
TPL
Dataflow
是微软面向高并发应用而推出的新程序库。借助于异步消息传递与管道,它可以提供比线程池更好的控制。
·
2015-10-23 08:17
Data
一个企业系统,到底有多少可以形成框架?
查询订单 【系统】系统自动根据我的状态,过滤出我能够看的订单(workflow) [用户]我进入订单明细,填写确认数量、备注等信息,确认/拒绝 【系统】系统获得我的数据,然后 【系统】进行数据处理(
dataflow
·
2015-10-23 08:13
框架
Hortonworks进军物联网,发布基于Apache NiFi项目的
DataFlow
产品
Hortonworks已经在不知不觉中完成了他们的
DataFlow
平台,这个平台基于ApacheNiFi项目并准备去解决物联网(IoAT)中的数据处理需求。
Abel Avram
·
2015-10-08 00:00
Hortonworks进军物联网,发布基于Apache NiFi项目的
DataFlow
产品
Hortonworks已经在不知不觉中完成了他们的
DataFlow
平台,这个平台基于ApacheNiFi项目并准备去解决物联网(IoAT)中的数据处理需求。
Abel Avram
·
2015-10-08 00:00
Google抛弃MapReduce使用Cloud
Dataflow
http://www.infoq.com/cn/news/2014/06/google-cloud-
dataflow
/ http://cloud.51cto.com/art/201501/463386.
oywl2008
·
2015-08-17 02:00
软件架构的控制流总结
这里先对typicalsoftwarearchitecturecontrolflow进行summarize,后续的文章将继续对
dataflow
进行梳理和总结。
LG1259156776
·
2015-07-07 12:00
架构
软件
structure
Guice Webapp Insight
guice web
dataflow
: Basic Design Concept: 1) HttpRequest/HttpResponse will always
DavyJones2010
·
2015-07-01 19:00
Guice
webapp
数据流处理数据
usingSystem.Data.SqlClient; usingSystem.Linq; usingSystem.Text; usingSystem.Threading.Tasks; usingSystem.Threading.Tasks.
Dataflow
·
2015-04-29 15:00
数据
Thinking in ReactJS and Flux
itthenusesthesecallbackstopropagatethatdatatoallofthestores换句话说,所以异步的事情,例如向服务器获取数据,应该是在Dispatch之前完成的,当
dataflow
Finley.Hamilton
·
2015-04-29 11:00
微软BI(2)
在
DataFlow
数据流 Excel Source的地方,可以在预览页面看到你
18289753290
·
2015-04-04 17:00
ssis wei微软BI
谷歌开源Cloud
Dataflow
Java SDK
Dataflow
是一项云服务,使用了由FlumeJava和MillWheel演变而来的技术,前者是一个用于创建数据并行管道的Java库,后者是一个用于构建容错流处理应用的框架,
Abel Avram
·
2014-12-21 00:00
谷歌开源Cloud
Dataflow
Java SDK
Dataflow
是一项云服务,使用了由FlumeJava和MillWheel演变而来的技术,前者是一个用于创建数据并行管道的Java库,后者是一个用于构建容错流处理应用的框架,
Abel Avram
·
2014-12-21 00:00
flume介绍及原理总结
上图的Flume的Architecture,在Flume中,最重要的抽象是
dataflow
(
wulantian
·
2014-11-20 08:00
一篇不错的SSIS性能很慢的分析
http://stackoverflow.com/questions/16181921/
dataflow
-task-in-ssis-is-very-slow-as-compared-to-writing-the-sql-query-in-execu
onlyqi
·
2014-08-06 14:49
SQL
Server数据库
十分钟了解分布式计算:Google
Dataflow
Dataflow
当前的API还只有Java版本(其实Flume本身是提供Java/C++/Python多种接口的,MillWheel也提供Java/C++的API)。
小唯THU
·
2014-07-13 12:00
Cloud
Dataflow
:云计算时代的新计算模式
伴随移动设备和流式数据的爆发式增长,开发者构建多种并发数据流水线来应对海量和异构以及实时数据的挑战,其中最流行的是Google的MapReduce,MapReduce一直是服务器集群上做并行分布式计算的一个非常受欢迎的基础架构和编程模型。然而MapReduce在流水线构建和维护方面成本都比较高,日渐成为困扰全世界开发者的问题。在今年的年度开发者大会上,Google发布了其云计算方面的一系列全新尝试
张天雷
·
2014-07-05 00:00
Google抛弃MapReduce使用Cloud
Dataflow
2004年Google发表了一篇非常具有影响力的论文向全世界介绍了MapReduce框架,该框架可以把一个应用程序分解为许多并行计算指令,跨大量的计算节点运行非常巨大的数据集。时至今日,MapReduce已经成为并行分布式计算领域的一个高度流行的基础设施和编程模型,它是ApacheHadoop的基础,被很多知名厂商所使用为其客户提供优质的数据服务。但是从最近在SanFrancisco召开的Goog
孙镜涛
·
2014-06-28 00:00
2014谷歌I/O上的Google Cloud Platform和Cloud
Dataflow
凌晨的2014谷歌I/O大会的直播,铺满了今天的新闻客户端。全面内容可见《 2014谷歌I/O综述:AndroidL、AndroidWear和AndroidAuto》。CSDN云计算频道比较聚焦,详细了解了会上传达出的谷歌云计算平台GoogleCloudPlatform和数据分析新品CloudDataflow的信息。GoogleDocs,SaaS一只黑马?!SaaS服务方面,值得关注的是Googl
dodohui
·
2014-06-27 15:00
Google停用MapReduce,高调发布Cloud
Dataflow
Google已经停用自己研发的,部署在服务器上,用以分析数据的MapReduce,转而支持一个新的超大规模云分析系统CloudDataflow。 MapReduce一直是服务器集群上做并行分布式计算的一个非常受欢迎的基础架构和编程模型。它是被广泛部署并已经成为很多公司商业产品的大数据基础架构平台Hadoop的基础。 但是近日,这项技术已经不能处理谷歌想要分析的大量数据。技术基础设施部高级副总裁Ur
dodohui
·
2014-06-27 15:00
谈Hadoop下各技术应用场景
标签: hadoop hbase hive 流处理 it分类: 随笔文章数据采集和
DataFlow
对于数据采集主要分为三类,即结构化数据库采集,日志和文件采集,网页采集。
u010282707
·
2014-04-21 10:00
UVa 10594 Data Flow(无向图的费用流)
题目链接:UVa10594
DataFlow
无向图的费用流。无向图,则必须使用邻接表,这样才能解决反向边的问题。
fobdddf
·
2014-04-02 23:00
UVa 10594 - Data Flow(无向图的最小费用最大流问题)
题目链接:UVa10594-
DataFlow
这道题是无向图的最小费用最大流问题,看清楚是无向图的。这么说无向图和有向图的费用流问题有什么区别呢?主要是反向边的问题。
fobdddf
·
2014-02-21 13:00
KNIME系统简介
和YALE不同点的是,KNIME采用的是类似数据流(
dataflow
)的方式来建立分析挖掘流程。挖掘流程由一系列功能节点(node)组成,每个节点有
chenhu_tass
·
2014-02-03 22:52
数据挖掘
神经网络
KNIME
使用TPL
Dataflow
处理生产者/消费者问题
在最简单的情况下,生产者/消费者场景很容易处理。生产者向一个线程安全的队列中推送消息,消费者从该队列中取消息。每一端可以有一个专用线程,这就行了。至少在并发症状出现之前是行得通的。并发症状是多方面的。你可能需要向多个消费者分发或广播消息,而不是只有一个消费者。因为性能原因,在执行某些操作之前,可能需要批量提交一些请求。也可能有多个步骤,而如果每个步骤用一个专用线程的话,负载会很繁重。或者是随着消息
Jonathan Allen
·
2014-01-28 00:00
使用TPL
DataFlow
在C#中轻松创建Actor
对于某些设计问题,Actor可以让一切变得不同。Actor是一种可以响应和发送消息的独立实体。某种程度上,它就像是在另一个进程中运行属于它自己的小程序。但对于没有原生支持Actor的语言来说,构建Actor可能会非常困难。出现的最主要的问题是线程管理。我们通常并不想拦截消息发送者的线程,因为那会给人一种方法调用的语义。且为每个Actor分配一个单独的线程并不会使程序比以前扩展多少,而在上下文切换时
Jonathan Allen
·
2013-11-25 00:00
使用TPL
DataFlow
在C#中轻松创建Actor
对于某些设计问题,Actor可以让一切变得不同。Actor是一种可以响应和发送消息的独立实体。某种程度上,它就像是在另一个进程中运行属于它自己的小程序。但对于没有原生支持Actor的语言来说,构建Actor可能会非常困难。出现的最主要的问题是线程管理。我们通常并不想拦截消息发送者的线程,因为那会给人一种方法调用的语义。且为每个Actor分配一个单独的线程并不会使程序比以前扩展多少,而在上下文切换时
Jonathan Allen
·
2013-11-25 00:00
uva 10594 - Data Flow(费用流)
题目链接:uva10594-
DataFlow
题目大意:给出一张图,然后给出K和D,D表示每条路的容量,然后由点1到点n运送数据,流量为K时的最小费用。
u011328934
·
2013-11-23 16:00
谈Hadoop下各技术应用场景
数据采集和
DataFlow
对于数据采集主要分为三类,即结构化数据库采集,日志和文件采集,网页采集。对于结构化数据库,采用Sqoop是合适的,可以实现结构化数据库中数据并行批量入库到hdfs存储。
人月神话
·
2013-10-30 11:00
随笔文章
Dataflow
Anomaly Analysis
【原因分析】 原因分为三种: UR 已定义的变量未初始化(赋值)就使用,例如: String name; System.out.println(na
samjavaeye
·
2013-05-08 17:00
Data
在.net 4.0程序中使用TPL
Dataflow
今天写了一个小程序,用到了TPL
Dataflow
,结果在部署的时候发现了一个问题:客户的服务器中有win2003的机器,2003是不支持.net 4.5的,但TPL
Dataflow
却只能在.net
·
2013-04-26 19:00
.net
MEF 2 发布调试符号集 ——TPL
DataFlow
随后推出
MEF2和TPLDataflowRTM已经和.NETFramework4.5一起发布——而开发团队现在宣布NuGet中已经发布了MEF的调试符号集(SymbolPackage)。TPLDataFlow的调试符号集也即将推出。早些时候,我们已经注意到这些库将做为NuGet包的一部分发布,而不再是漫长.NET发布周期的一部分。现在开发团队已经发布了MEF调试符号集,使得VisualStudio可以查找
Roopesh Shenoy
·
2012-09-24 00:00
MEF 2 发布调试符号集 ——TPL
DataFlow
随后推出
MEF2和TPLDataflowRTM已经和.NETFramework4.5一起发布——而开发团队现在宣布NuGet中已经发布了MEF的调试符号集(SymbolPackage)。TPLDataFlow的调试符号集也即将推出。早些时候,我们已经注意到这些库将做为NuGet包的一部分发布,而不再是漫长.NET发布周期的一部分。现在开发团队已经发布了MEF调试符号集,使得VisualStudio可以查找
Roopesh Shenoy
·
2012-09-24 00:00
Flume 学习笔记(2) 基本概念
dataflow
:
dataflow
描述了数据从产生,传输、处理并最终写入目标的一条路径。多个数据流被组合成logicalnode用来传输或聚合他们收到的数据。
eryk86
·
2012-04-23 10:00
hadoop
存储
web服务
Cloudera Flume介绍
上图的Flume的Architecture,在Flume中,最重要的抽象是
dataflow
(数据流),
dataflow
描述了数据从产生,传输、
rzhzhz
·
2012-04-11 11:00
java
unix
tcp
扩展
磁盘
Scalability
分布式日志收集系统- Cloudera Flume 介绍
对海量日志采集、聚合和传输,Flume支持在日志系统中定制各类数据发送方,同时,Flume提供对数据进行简单处理,并写到各种数据接受方的能力.Flume部署结构flume架构简单,可靠,灵活,数据流(
dataflow
yyj0531
·
2012-03-27 19:50
职场
休闲
实时
hadoop
分布式日志收集系统- Cloudera Flume 介绍
Flume部署结构 flume架构简单,可靠,灵活,数据流(
dataflow
)是flume中最主要的抽象,
dataflow
描述了数据从产生,传输、处理并最终写入目
yyj0531
·
2012-03-27 19:50
Flume
职场
实时
休闲
日志收集
Cloudera Flume简介
上图的Flume的Architecture,在Flume中,最重要的抽象是
dataflow
(数据流),
dataflow
描述了数据从产生,传输、
Javafans
·
2012-03-12 16:00
kernel 3.0.8 audio
dataflow
kernel2.6.32for(;;){ if(signal_pending(current)){ err=-ERESTARTSYS; break; } set_current_state(TASK_INTERRUPTIBLE); snd_pcm_stream_unlock_irq(substream); tout=schedule_timeout(msecs_to_jiffies(
xujianqun
·
2011-11-10 00:00
linux
工作
Stream
audio
Signal
playback
上一页
1
2
3
4
5
6
7
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他