FlowFile

Apache NiFi Expression Language

概览NiFi主要的功能是数据处理和数据分发，在NiFi中数据均抽象为FlowFile。FlowFile有两个部分组成：内容(Content)和属性(attribute)。
一个老冯·2024-01-29 13:35

部署NiFi Poc环境

在NiFi中数据流程图中的节点被称为Processor，流程图中的边称为connection，边是有方向的，在流程图中流动的数据称为FlowFile。FlowFile被数
一个老冯·2024-01-19 05:42

【大数据】NiFi 中的重要术语

NiFi中的重要术语1.FlowController2.Processor3.Connection4.ControllerService5.ProcessGroup6.FlowFile那些一个个黑匣子称为
G皮T·2023-11-06 08:33

NIFI集群_队列Queue中数据无法清空_清除队列数据报错_无法删除queue_解决_集群中机器交替重启删除---大数据之Nifi工作笔记0061

队列上面,因为别的队列都可以通过,右键,emptyqueue清空,就是这个队列不行,这个队列无法被删除,至于为什么导致这样的,猜测是因为之前,流程设计好以后,队列没有设置背压,也没有设置队列中的内容大小和flowfile
脑瓜凉·2023-09-25 13:11

NiFi 单机和集群安装与使用

架构核心概念NiFi术语描述FlowFile表示在系统中移动的每个对象，对于每个FlowFile，NIFI都会记录它一个属性键值对和0个或多个字节内容（有attribute和content）。
shpunishment·2023-09-04 07:43

Nifi + Kafka + mysql构建实时数仓

标题Nifi+Kafka+mysql构建实时数仓Nifi安装Nifi安装Kafka安装kafka安装一Nifi简介Nifi最重要的就是Processor（数据处理单元）和FlowFlie（数据流）FlowFile
weixin_41734687·2023-07-20 18:27

apache nifi 的深入学习

术语DataFlowManagernifi用户具有添加修改删除权限FlowFile代表nifi中的单个数据，一个是attribute另一是content公共属性uuidfilenamepathProcessor
fhg1225·2023-07-14 07:10

NiFi数据流实践：Mysql CDC To HDFS/Hive

NiFi版本：1.22.0Flowfile、Processor、ControllerService、Record等概念说明，详见NiFi官方文档：ApacheNiFiDocumentation。
邢为栋·2023-07-14 07:35

NIFI大数据进阶_连接与关系_设置数据流负载均衡_设置背压_设置展现弯曲_介绍以及实际操作---大数据之Nifi工作笔记0027

然后我们来看连接与关系部分然后右键一个关系可以看他的配置注意这个,如果添加多个关系,这里flowfile就会自动clone然后可以看到连接的配置中有,flowfile过期时间配置,有backpressure
脑瓜凉·2023-04-14 01:03

NIFI大数据进阶_使用NIFI表达式语言_来获取自定义属性中的数据_NIFI表达式使用体验---大数据之Nifi工作笔记0024

打开以后如果显示上面的一行,是表示支持nifi表达式,如果显示notsupported的时候,就是不支持nifi表达式然后我们再来看看nifi表达式的结构可以看到这里使用${filename}就可以获取flowfile
脑瓜凉·2023-04-08 17:32

Nifi Processor | PutHiveQL

传入的FlowFile的内容应该是要执行的HiveQL命令。HiveQL命令可能会使用？逃避参数。
野狼e族·2020-09-16 03:50

Nifi Processor | EvaluateJsonPath

解析json中的属性值，并更新到flowfile属性中。
野狼e族·2020-09-16 03:50

Nifi Processor | RouteText 与 RouteOnContent

传入的FlowFile中的每一行都与用户定义的Properties指定的值进行比较。将文本与这些用户定义的属性进行比较的机制由“匹配策略”定义。
野狼e族·2020-09-16 03:50

nifi-集群搭建，新增用户

NIFI简介1、NIFI的概念1.1起源：NIFI是为了自动化的处理和管理系统之间的数据流而产生的，基本设计概念与基于流的编程[fbp]的主要思想密切相关1.2nifi核心概念FlowFile：FlowFile
风中追风风·2020-08-17 03:45

【NiFi csv to mysql系列】一 csv to json

涉及到的处理器以及功能GetFile:从指定的路径中读取文件UpdateAttribute：对flowfile的属性进行更新，添加
JokerRun·2020-07-31 21:38

NiFi Processors之EvaluateJsonPath

处理器可以访问给定FlowFile的属性及其内容流。处理器可以在给定的工作单元中对零个或多个FlowFile进行操作，并提交该工作或回滚。本文介绍NiFi处理器之一：EvaluateJsonPath。
邢为栋·2020-06-30 04:21

Apache NIFI EvaluateJsonPath

这些表达式的结果被写入到FlowFile属性，或者写入到FlowFile本身的内容中，这取决于处理器的配置。
酷酷的诚(公众号:Panda诚)·2020-06-28 19:18

用Nifi合并二个API、计算并生成新的API

1.全景图2.合并根据attribute合并flowfile:合并json,并增加code，message等：3.计算方差：在ExecuteScript里只能用纯python,很多第三方包都不能用；并把计算的值插入到
oldbalck·2020-06-28 17:52

nifi入门(2)-nifi的简单使用示例

我们将在此重点介绍两个最重要的术语:FlowFile:每条“用户数据”（即，用户通过NiFi获取或者是生成的，需要进行处理和分发的数据）均被称为FlowFile。
wangqingming1989·2020-06-27 13:41

Apache Nifi

上面的图中表示Processor将/user/sample.txt文件的内容输出到FlowFile的内容中。GetFTPGetFTP处理器单元从FTP服务器文件内容输出到FlowFile中，并可以
Todd-liu·2020-06-27 13:59

nifi-搭建

NIFI简介1、NIFI的概念1.1起源：NIFI是为了自动化的处理和管理系统之间的数据流而产生的，基本设计概念与基于流的编程[fbp]的主要思想密切相关1.2nifi核心概念FlowFile：FlowFile
灿cc·2020-06-26 11:01

nifi探索之ExecuteScript处理器（2）

Abstract接上一篇，本节主要叙述flowfile相关的IO操作以及一些相对比较高级的处理方法IO部分flowfile的读取session.read(flowfile,InputStreamCallback
快乐的小画家·2020-06-24 22:38

nifi探索之ExecuteScript处理器

Abstract本文的主要内容是介绍ExecuteScript这个功能强大的处理器，用户可以根据自己的需求提供脚本代码，然后ExecuteScript就可以根据脚本来处理flowfile。
快乐的小画家·2020-06-24 22:38

nifi学习笔记--存储

FlowFileRepository：存储了flowfile的metadataContentRepository：存放了flowfile的内容ProvenanceRepository：存放了flowfile
tinyMonkey·2020-04-04 13:16

NIFI 系统属性 System Properties之FlowFile存储库和内容库

FlowFile存储库PropertyDescriptionnifi.flowfile.repository.implementationFlowFile存储库实现。
我的小南瓜·2020-03-30 10:35

NIFI术语

FlowFile：FlowFile代表NiFi中的一个单一数据。FlowFile由两个组件组成：FlowFile属性和FlowFile内容。内容是由FlowFile表示的数据。
我的小南瓜·2020-02-21 00:57

NiFi 读取Processor中的FlowFile

阅读更多在Processor的onTrigger方法中，可以从ProcessSession参数中获取FlowFile中的内容，参考网上的一些写法，如session.read(flowFile,newInputStreamCallback
ouanui·2017-02-23 12:00

NiFi 常见错误提示

transferrelationshipnotspecified当在Processor的onTrigger中添加好业务代码后，需要指定Relationship，及数据将从哪个Relationship流动，代码如下session.transfer(flowFile
ouanui·2017-02-23 09:00

在Nifi 里 把 HDFS Json 为csv 格式

*defflowFile=session.get()flowFile=session.write(flowFile,{inputStream,outStream->defjs=IOU
疯吻IT·2016-11-14 10:00

用Nifi 从web api 取数据到HDFS

1.全景图 2.用ExecuteScript生成动态日期参数 为了只生成一个flowfile：   Groovy代码：importorg.apache.commons.io.IOUtilsimportjava.nio.charset
疯吻IT·2016-06-15 23:00

nifi更改属性的方法——UpdateAttribute

nifi-docs/components/org.apache.nifi.processors.attributes.UpdateAttribute/additionalDetails.html在nifi中FlowFile
u010022051·2016-04-28 18:00
上一页 1 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他