SINK

Debezium的三种部署方式

kafkaconnect来部署debezium，kafkaconnect是一个框架和运行时：sourceconnectors：像debezium这样将记录发送到kafka的sourceconnectorsinkconnectors
Bai_Yin·2023-09-03 18:12

Android 开发技术周报 Issue#273

AirDrop的附近文件分享功能谷歌发布CameraGo：即使入门机也能有出色肖像模式Android高级防护功能已限制非Play商店的应用安装教程/TutorialUsingScopedFunctionsinKotlin-let
脉脉不得语·2023-09-03 11:59

Flink Table API& SQL编程指南(Source Connector【FileSystem、HBase、Kafka、JDBC、Hive】)

TableSink会将计算的结果输出给外部存储系统。这些取决于Source和Sink的类型，他们支持很多种数据类型，例如：CSV、Parquet、ORC等。接下来
麦田里的守望者··2023-09-03 07:30

用seatunnel替代logstash，把数据从kafka抽取到ES

seatunnel(2.1.3)调用spark-sql(2.4)、flink-sql(1.14)对结构化数据进行处理；能够通过配置，在一个任务里调度多个source和sink文章目录一、为sparkstructuredstreaming
百战天王·2023-09-02 19:07

JAVA-每日一面 2022-01-09

c.Feign，声明式服务调用，本质上就是Ribbon+Hystrixd.Stream，消息驱动，有Sink、Source、Processor三种通道，特性有订阅发布、消费组、消息分区。e.Bus
YangEvol·2023-09-02 11:29

[BitSail] Connector开发详解系列四：Sink、Writer

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群SinkConnectorBitSailSinkConnector交互流程介绍Sink：数据写入组件的生命周期管理，主要负责和框架的交互
字节数据平台·2023-09-01 15:35

Connector开发详解系列四：Sink、Writer

更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群SinkConnectorBitSailSinkConnector交互流程介绍Sink：数据写入组件的生命周期管理，主要负责和框架的交互
·2023-09-01 11:43

Apache Hudi初探(五)(与spark的结合)

classDefaultSourceextendsRelationProviderwithSchemaRelationProviderwithCreatableRelationProviderwithDataSourceRegisterwithStreamSink
鸿乃江边鸟·2023-09-01 09:34

gstreamer协商

fakesink最顶上的是videotestsrc插件的gst_base_src_loop线程，这个线程负责采集数
山西茄子·2023-09-01 02:53

42、Flink 的table api与sql之Hive Catalog

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-09-01 01:33

41、Flink之Hive 方言介绍及详细示例

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-09-01 01:33

33、Flink之hive介绍与简单示例

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-09-01 01:32

UsbHostManager 监测USB总线

我的一个疑惑是：当用USB反向充电时，有一种情况是：一侧是source,device组合，另外一侧是sink,host组合，此时mtp,仅充电、ptp等选项界面会在sink,host组合侧出现（基本的规律是
yangzex·2023-08-31 21:56

数据流水线的成本自适应算子

数据流水线一般至少包含一个Source组件和一个Sink组件，有时在Source和Sink中间还有一或多个依次执行的中间计算组件（Flume称之为Channel，Flink称之为Tra
·2023-08-31 18:38

Flume跨服务器监控日志数据

架构分析：第一步：数据采集从图中可以看出，我们分别再web服务器和slave1上部署Flume，再web服务器上agent的Source来源于nginx日志，经过channel传输到Sink，Sink将数据输出到
炸鸡叔老白·2023-08-31 12:14

Haddoop大数据教程笔记_11_Hadoop辅助工具——Flume&Sqoop

Flume日志采集框架1.1Flume介绍1.1.1概述1.1.2运行机制1.1.4Flume采集系统结构图1.2Flume实战案例1.2.1Flume的安装部署1.2.2采集案例1.3更多source和sink
Snowing_inhope·2023-08-31 08:06

【WebRTC---源码篇】（二:二）视频源VideoSourceBase

VideoSourceInterface模板类，并且可以处理webrtc::VideoFrameclassVideoSourceBase:publicVideoSourceInterface重要成员变量structSinkPair
༄yi笑奈何·2023-08-31 05:16

【WebRTC---源码篇】（二:三）视频消费者VideoSinkInterfacee

作用：这是一个视频消费的基类，所有需要使用视频帧数据的类都需要继承它namespacertc{//VideoSinkInterface是WebRTC中用于接收和处理视频帧数据的接口类。
༄yi笑奈何·2023-08-31 05:16

CDL基础原理

CDL服务能够从各种OLTP数据库中捕获数据库的DataChange事件，并推送到kafka，再由sinkconnector推送到大数据生态系统中。
Hello.Reader·2023-08-31 03:16

大数据笔试真题集锦---第五章:Hive面试题

ASTTree遍历ASTTree，抽出基本的查询单元QueryBlock遍历QueryBlock，翻译为执行操作树OperatorTree逻辑层优化器进行OperatorTree变换，合并不必要的ReduceSinkOperator
Ricky的技术小站·2023-08-30 08:01

16、Flink 的table api与sql之连接外部系统: 读写外部系统的连接器和格式以及Apache Hive示例（6）

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-08-30 08:49

大数据之flume source、interceptor、sink自定义

依赖:org.apache.flumeflume-ng-core1.9.0一、interceptor自定义publicclassMyInterceptorimplementsInterceptor{publicvoidinitialize(){}publicEventintercept(Eventevent){byte[]body=event.getBody();if((body[0]>='A'&
枫叶无言_1997·2023-08-29 18:21

Kafka3.3.1最新版安装教程（无需zookeeper）

######################ServerBasics##############################Theroleofthisserver.SettingthisputsusinKRaftmo
捏塔·2023-08-29 13:42

Apache SeaTunnel 2.3.3 版本发布，CDC 支持 Schema Evolution！

此次发布的2.3.3版本在功能和性能上均有较大优化改进，其中大家期待已久的CDCSchemaevolution（DDL变更同步）、主键Split拆分、JDBCSink自动建表功能、SeaTunnelZeta
SeaTunnel·2023-08-29 13:39

flume系列之：Error while trying to hflushOrSync，查看hdfs生成的文件发现文件损坏

flume完整报错如下所示二、追查报错原因三、问题产生原因总结四、报错解决方法一、flume完整报错如下所示flume日志一直报如下错误：13Mar202210:45:30,319ERROR[hdfs-sink1
最笨的羊羊·2023-08-29 08:20

flume系列之：学会flume开发调试，查看flume event数据格式，并根据flume event数据格式开发拦截器

flume系列之：学会flume开发调试，查看flumeevent数据格式，并根据flumeevent数据格式开发拦截器一、声明source、channel、sink二、配置source三、配置source
最笨的羊羊·2023-08-29 08:20

flume系列之：flume消费数据量较大kafka Topic的source、channel、sink等参数通用设置

flume系列之：flume消费数据量较大kafkaTopic的source、channel、sink等参数通用设置1、sources.source1.batchSize2、sources.source1
最笨的羊羊·2023-08-29 08:20

flume系列之：flume消费kafka数据到HDFS生产参数配置

flume系列之：flume消费kafka数据到HDFS生产参数配置一、声明source、channel、sink二、通过channel关联source、sink三、source配置四、interceptor
最笨的羊羊·2023-08-29 08:19

flume系列之：记录一次消费大量Debezium数据，数据包含dml语句比较大，造成数据堆积在channel的解决方法

flume消费了大量的KafkaTopic数据，数据堆积在了channel中，造成数据sink到HDFS的时间比
最笨的羊羊·2023-08-29 08:48

flume同时使用KafkaSource、KafkaSink导致的问题

KafkaSource配置topic：topic1KafkaSink配置topic：topic2从topic1拉取数据，经过简单处理后发到topic2但是你会发现flume一直在循环读写topic1原因就是
赵荆州·2023-08-28 16:37

Sinkhorn算法

Sinkhorn算法介绍示例代码介绍Sinkhorn算法是一种用于解决最优传输问题的迭代算法。
lqjun0827·2023-08-28 07:46

16、Flink 的table api与sql之连接外部系统: 读写外部系统的连接器和格式以及Elasticsearch示例（2）

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-08-26 09:42

Flink流批一体计算（18）：PyFlink DataStream API之计算和Sink

目录1.在上节数据流上执行转换操作，或者使用sink将数据写入外部系统。
victory0508·2023-08-25 21:08

Flink流批一体计算（15）：PyFlink Tabel API之SQL写入Sink

目录举个例子写入Sink的各种情况1.将结果数据收集到客户端2.将结果数据转换为PandasDataFrame，并收集到客户端3.将结果写入到一张Sink表中4.将结果写入多张Sink表中举个例子将计算结果写入给
victory0508·2023-08-24 21:26

16、Flink 的table api与sql之连接外部系统: 读写外部系统的连接器和格式以及JDBC示例（4）

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-08-24 16:54

Flink-Basic API Concepts-overview

结果会返回给sink，sink可能代表着写入文件或者标准输出。Flink程序可以在各种上下文中运行，如standalone,内置在其他程序中。程序执行可以发生
耳边的火·2023-08-24 12:50

C# 手写识别方案整理

书写识别存在的2个问题：直接拿官网的案例（将WindowsInk笔划识别为文本和形状-Windowsapps|MicrosoftLearn），会发现输出准确度不高。
qw_6918966011·2023-08-24 11:31

Feng Yu Inkstone

FengYuinkstoneisproductedbyFengYuTownship,Eryuancountry.It'sanationalhandicraftandalsoacollectionofWorldExpo.It'soneofthefourfamousinkstone
Coloredstone·2023-08-24 10:52

Flume、Logstash、Filebeat对比

特点：提供了丰富的Source、Channel和Sink，可以适应各种数据源和目标。支持事务性传输和持久化通道，保证数据
贾斯汀玛尔斯·2023-08-24 08:25

Apache Flink——输出算子（Sink）

前言Flink作为数据处理框架，最终还是要把计算处理的结果写入外部存储，为外部应用提供支持。我们已经了解了Flink程序如何对数据进行读取、转换等操作，最后一步当然就应该将结果数据保存或输出到外部系统了。连接到外部系统在Flink中，如果我们希望将数据写入外部系统，其实并不是一件难事。我们知道所有算子都可以通过实现函数类来自定义处理逻辑，所以只要有读写客户端，与外部系统的交互在任何一个处理算子中都
小波同学·2023-08-23 13:19

flink exactly-once系列之两阶段提交概述

flinkexactly-once系列目录：一、两阶段提交概述二、TwoPhaseCommitSinkFunction与FlinkKafkaProducer源码分析三、StreamingFileSink
Flink实战剖析·2023-08-23 07:37

Flink Table API/SQL 多分支sink

背景在某个场景中，需要从Kafka中获取数据，经过转换处理后，需要同时sink到多个输出源中(kafka、mysql、hologres)等。
desmond_assis·2023-08-23 05:50

flink-sql所有表连接器-1.14

表sink向外部存储系统发送数据。根据source和sink的类型，它们支持不同的格式，如
第一片心意·2023-08-22 22:03

流批一体计算引擎-8-[Flink]的Table API连接器

sink表将table发送到外部存储系统。根据source和sink的类型，它们支持不同的格式，如CSV、Avro、Parquet或ORC。本页介绍如
皮皮冰燃·2023-08-22 22:31

16、Flink 的table api与sql之连接外部系统: 读写外部系统的连接器和格式以及Apache Kafka示例（3）

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-08-22 22:28

支持dolby vision的盒子接支持dolby vision的电视，在adaptive hdr时，播放非dv的hdr视频，输出sdr

想要搞清楚这个问题，首先需要理解dolbyvision有两种模式：1）Sink-led（又名：display-led/dvstandard/标准模式）当前模式是tv主导，p
Xiao_peng117·2023-08-22 17:06

15、Flink 的table api与sql之流式概念-详解的介绍了动态表、时间属性配置（如何处理更新结果）、时态表、流上的join、流上的确定性以及查询配置

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-08-22 08:37

20、Flink SQL之SQL Client: 不用编写代码就可以尝试 Flink SQL，可以直接提交 SQL 任务到集群上

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-08-22 08:37

5、Flink的source、transformations、sink的详细示例（三）-sink示例

Flink系列文章1、Flink1.12.7或1.13.5详细介绍及本地安装部署、验证2、Flink1.13.5二种部署方式(Standalone、StandaloneHA)、四种提交任务方式（前两种及session和per-job）验证详细步骤3、flink重要概念（api分层、角色、执行流程、执行图和编程模型）及dataset、datastream详细示例入门和提交任务至onyarn运行4、介
一瓢一瓢的饮 alanchan·2023-08-22 08:36

5、Flink的source、transformations、sink的详细示例（二）-source和transformation示例

Flink系列文章1、Flink1.12.7或1.13.5详细介绍及本地安装部署、验证2、Flink1.13.5二种部署方式(Standalone、StandaloneHA)、四种提交任务方式（前两种及session和per-job）验证详细步骤3、flink重要概念（api分层、角色、执行流程、执行图和编程模型）及dataset、datastream详细示例入门和提交任务至onyarn运行4、介
一瓢一瓢的饮 alanchan·2023-08-22 08:06
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他