sink

Datafactory出现Type=System.ArgumentException,Message=An item with the same key has already been的错误

System.ArgumentException,Message=Anitemwiththesamekeyhasalreadybeenadded.,Source=mscorlib,'的错误，如图所示copydata的source和sink
Oceanside_yh·2023-12-16 13:23

datafactory出现‘Microsoft.SqlServer.DataWarehouse.Tds.PdwManagedToNativeInteropException‘ was thrown.

Microsoft.SqlServer.DataWarehouse.Tds.PdwManagedToNativeInteropException‘wasthrown.,'的错误，如图所示遇到这个错误的时候我看字面的意思以为是我建的sink
Oceanside_yh·2023-12-16 13:23

Pulsar Functions Worker 的选举机制

摘要在Pulsar中，Function、Source和Sink都是运行在FunctionWorker上的，关于Function的内容可以参考一篇文章了解PulsarFunctions，关于Source和
StreamNative·2023-12-16 01:56

sparkStreaming+kafka简单例子

flume采集（安装flume，这块就不多做赘述了,安装也只是测试，没用，提供一个下载链接）首先自定义source[sink->kafka->sparkstreaming]#启动kafka服务后台永久启动
小曹男孩·2023-12-15 22:03

【flink番外篇】4、flink的sink（内置、mysql、kafka、redis、clickhouse、分布式缓存、广播变量）介绍及示例（3） - redis

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分，比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan·2023-12-15 21:52

【flink番外篇】4、flink的sink（内置、mysql、kafka、redis、clickhouse、分布式缓存、广播变量）介绍及示例（2） - jdbc/mysql

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分，比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan·2023-12-15 21:22

【flink番外篇】4、flink的sink（内置、mysql、kafka、redis、clickhouse、分布式缓存、广播变量）介绍及示例（1） - File、Socket、console

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分，比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan·2023-12-15 21:21

12、Flink source和sink 的 clickhouse 详细示例

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分，比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan·2023-12-15 21:15

5、Flink 的 source、transformations、sink的详细示例（一）

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分，比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan·2023-12-15 21:43

10、Flink的source、transformations、sink的详细示例（二）-source和transformation示例【补充示例】

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。2、Flink基础系列本部分介绍Flink的基础部分，比如术语、架构、编程模型、编程指南、基本的datastreamapi用法、四大基石等内容。3、FlikTableAPI和SQL基础系列本部分介绍FlinkTableApi和SQL的基
一瓢一瓢的饮 alanchan·2023-12-15 21:13

【网络安全】Suspicious DNS Query（可疑的DNS查询）

文章目录名词解释可能原因分析Actionsinkhole在防火墙里面查询SuspiciousDNSQuery预防SuspiciousDNS查询带来的风险推荐阅读名词解释“SuspiciousDNSQuery
Par@ish·2023-12-15 19:59

Keras文档自动编码器Autoencoder训练不收敛的问题。

在尝试BuildingAutoencodersinKeras这一自动编码器文档代码的时候，发现直接复制手册中的代码，最简编码器模型、深度编码器的损失无法收敛，尝试后发现是因为代码中的优化器为‘adadelta
041c14885cdd·2023-12-15 19:05

【早安心语】

【2021-11-24】早安春夏秋冬Land,thereisnoloss,Cheng,andthedefeat,thefloatingsinkissuddenlyseen;thelifeisascenery
壹典心理咨询·2023-12-15 16:29

Flink之JDBCSink连接MySQL

输出到MySQL添加依赖org.apache.flinkflink-connector-jdbc3.1.0-1.17com.mysqlmysql-connector-j8.0.32启动MySQL,在test库下建表clicksCREATETABLE`clicks`(`user`VARCHAR(100)NOTNULL,`url`VARCHAR(100)DEFAULTNULL,`ts`BIGINTDE
十七✧ᐦ̤·2023-12-15 15:43

07用户行为日志数据采集

此处选择KafkaSource、FileChannel、HDFSSink。关键配置如下：日志消费
kk_io·2023-12-15 06:22

FFmpeg之AVFilterGraph

没看之前以为里面大概是个有向无环图什么的来描述，进去一看，居然只是用链表来描述结构体先看结构体，主要关注里面的两个成员变量AVFilterContext**filters;unsignednb_filters;AVFilterLink**sink_links
泰勒朗斯·2023-12-14 22:06

Spark Structured Streaming使用教程

文章目录1、输入数据源2、输出模式3、sink输出结果4、时间窗口4.1、时间窗口4.2、时间水印（Watermarking）5、使用例子StructuredStreaming是一个基于SparkSQL
penngo·2023-12-14 19:17

【自定义Source、Sink】Flink自定义Source、Sink对ClickHouse进行读和批量写操作

ClickHouse官网文档Flink读取ClickHouse数据两种驱动ClickHouse官方提供ClickhouseJDBC.【建议使用】第3方提供的ClickhouseJDBC.ru.yandex.clickhouse.ClickHouseDriverru.yandex.clickhouse.ClickHouseDriver.现在是没有维护ClickHouse官方提供ClickhouseJ
不进大厂不改名二号·2023-12-14 16:03

二百一十五、Flume——Flume拓扑结构之复制和多路复用的开发案例（亲测，附截图）

（二）结构特征这种模式可以将相同数据复制到多个channel中，或者将不同数据分发到不同的channel中，sink可以选择传送到不同的目的地三、需求案例（一）案例需求使用Flume-1监控文件变动，Flume
天地风雷水火山泽·2023-12-14 12:09

二百一十六、Flume——Flume拓扑结构之负载均衡和故障转移的开发案例（亲测，附截图）

一、目的对于Flume的负载均衡和故障转移拓扑结构，进行一个开发测试二、负载均衡和故障转移（一）结构含义Flume支持使用将多个sink逻辑上分到一个sink组（二）结构特征sink组配合不同的SinkProcessor
天地风雷水火山泽·2023-12-14 12:09

已解决：java.net.ConnectException: Call From XXXXX to XXXXX :8020 failed on connection Exception: 拒绝连接；

咱也不敢问，咱也不敢问、整个业务集群呢是在阿里云上搭建的，十几台服务器，在跑flume脚本的时候，发现了一个很奇怪的现象，正常的跑flume的测试脚本，采用loggersink呢，是OK的，但是使用HDFSsink
想做CTO的任同学...·2023-12-14 12:04

解决Hbase报错:ERROR: Can‘t get master address from ZooKeeper； znode data == null

文章目录问题描述解决方案问题描述报错了：这啥公司啊，怎么给的文档怎么错这么多，起一服务，集群里总有几个组件报错继上次Flume脚本，使用hdfssink报错了以后，hbase又报错了，报错提示如下：hbase
想做CTO的任同学...·2023-12-14 12:30

（二）回测框架之策略Mocker

Mocker组成classHftMocker:publicIDataSink,pub
阿树______·2023-12-06 22:39

DeepStream系列之rtmpsink功能

点击查看系列文章目录0背景在用deepstream开发过程中，会遇到需要输出rtmp视频流的需求，实现在网页端播放，截止到6.1版本，sdk还不支持rtmp输出，需要我们对源码进行一些修改。本文对实现方法做一个介绍。1rtmpserver首先需要搭建一个本地的rtmpserver，用来接收以及播放我们推的码流。在《opencv读取rtsp图像处理后推流rtmp》中我们介绍过使用Nginx进行服务搭
宗而研之·2023-12-06 12:41

二百一十三、Flume——Flume拓扑结构介绍

目的最近在看尚硅谷的Flume资料，看到拓扑结构这一块，觉得蛮有意思，于是整理一下Flume的4种拓扑结构二、拓扑结构（一）简单串联1、结构含义这种模式是将多个flume顺序连接起来了，从最初的source开始到最终sink
天地风雷水火山泽·2023-12-06 12:40

Flume采集数据到Hive&HBase

文章目录Flume汇入数据到Hive方法一：汇入到Hive指定的HDFS路径中：方法二：利用HiveSink汇入数据Flume汇入数据到HBase一、Flume的HBaseSinks详细介绍1.1、HBaseSink1.2
哈了个Doop·2023-12-06 12:08

DeepStream系列之rtmpsink功能，rtsp转rtmp，opencv读取rtsp图像处理后推流rtmp

了解到一个更好的流媒体开源项目，是中国人写的，项目地址https://github.com/ossrs/srs，有兴趣的可以尝试下，实时性更快DeepStream系列之rtmpsink功能实时性没要求，
鼾声鼾语·2023-12-06 12:06

Flink 读写Doris

FlinkDorisConnectorSink的内部实现是通过Streamload服务向Doris写入数据,同时也支持Streamload请求参数的配置设定。版本兼容如下：ConnectorFlink
shangjg3·2023-12-06 08:49

Flink流批一体计算（23）：Flink SQL之多流kafka写入多个mysql sink

目录1.准备工作生成数据创建数据表2.创建数据表创建数据源表创建数据目标表3.计算WITH子句1.准备工作生成数据sourcekafkajson数据格式：topiccase_kafka_mysql：{"ts":"20201011","id":8,"price_amt":211}topicflink_test_2：{"id":8,"coupon_price_amt":100}注意：针对双流中的每条记
victory0508·2023-12-06 07:55

flink入门基础知识整理（持续更新）

2.2DataStream体系2.3数据读取（Source）2.3.1内存读取2.3.2文件读取2.3.3SOCKET接入2.3.4自定义读取2.4数据转换处理（Transformation）2.5数据输出（Sink
大胡在进步·2023-12-05 21:02

OT1：Sinkhorn Distances: Lightspeed Computation of Optimal Transport

前言为学习最优传输问题（OptimalTransport），拜读了博客《最优运输（OptimalTransfort）：从理论到填补的应用》，博文里简要介绍了三篇经典论文：SinkhornDistances
SATAN 先生·2023-12-05 08:19

48、Flink DataStream API 编程指南（2）- DataStream的source、transformation、sink、调试

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-12-05 06:55

49、Flink的Java Lambda 表达式写法示例

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-12-05 06:24

flink sink多个topic

flinkstream数据动态写入多个topicflink1.15之前importorg.apache.flink.streaming.api.scala._importorg.apache.flink.streaming.connectors.kafka.{FlinkKafkaProducer,KafkaSerializationSchema}importorg.apache.kafka.cli
Thomas2143·2023-12-04 19:56

Flink 自定义Avro序列化(Source/Sink)到kafka中

前言环境所依赖的pom文件                     org.apache.avro            avro            1.8.2                            org.apache.flink            flink-scala_2.12            1.10.1                            
大数据老哥·2023-12-04 16:47

04数据平台Flume

Agent由3个部分组成，Source、Channel、Sink。Source：Sour
kk_io·2023-12-04 04:20

Flume

Flume的核心是把数据从数据源(source)收集过来，再将收集到的数据送到指定的目的地(sink)。
felix521·2023-12-04 01:41

C++ 日志库 boost::log 以及 glog 的对比

设计boost::log的设计主要有日志器（Logger）、日志核心（Loggingcore）、Sink前后端（frontend,backend）组成。
码农code之路·2023-12-03 16:31

flink自定义source与自定义sink

flink自定义source与自定义sinkflink的source和sink即数据源和数据接收器。
k_wzzc·2023-12-03 08:21

PD QC快充协议诱骗取电sink受电芯片大全_测试报告

随着Type-C接口的充电器普及，市面上的PD充电器越来越多，小家电产品可不配充电器，使用Type-C接口，然后加入一颗PD协议取电协议芯片XSP08即可让充电器/充电宝/车充等电源输出9V/12V/15V/20V电压给产品供电。快充取电芯片应用场景：如LED照明、智能穿戴产品、筋膜枪，智能家居、小风扇，台灯产品、扫地机器人、无人机、蓝牙音和电动工具等，都可以使用带快充的充电器/充电宝供电，产品无
无线充舒工·2023-12-03 01:45

hbase thrift2 jar包冲突导致启动失败问题排查记录

.yingzi.com.out异常日志：Exceptioninthread"main"java.lang.AbstractMethodError:org.apache.hadoop.metrics2.sink.timeline
Java小田·2023-12-02 12:53

图 | 通用汇点 Universal Sink

半小时畅游田家炳楼～本篇内容是从此还是怕天明的初代憨批拿出的一道题～原题CLRS22.1-6：图的通用汇点（UniversalSink）如果我们用邻接矩阵来存储图，那么绝大多数图算法的运行时间都是Ω(|
电车上那个cll呀·2023-12-01 13:58

flink中读取kafka消息写进es中消费进度过慢问题

esSinkBuilder.setBulkFlushMaxActions(1);后面修改为e
如果丶可以坑·2023-11-30 22:59

链表K个节点的组内逆序调整问题

链表K个节点的组内逆序调整问题作者：Grey原文地址：博客园：链表K个节点的组内逆序调整问题CSDN：链表K个节点的组内逆序调整问题题目描述LeetCode25.ReverseNodesink-Group
GreyZeng·2023-11-30 19:30

.NET 6 使用SeriLog日志类

先引入Nuget包如下五个：1、Serilog2、Serilog.Sinks.Async3、Serilog.Sinks.Console4、Serilog.Sinks.EventLog5、Serilog.Sinks.File
是千羽吖·2023-11-30 18:28

Asp.Net WebApi 集成日志类库 - Serilog

Serilog通过NuGet分发，项目包括一个Seirlog核心项目Seirlog和很多接收器sinks(超过100个)，这些接收是通过插件的方式来实现将日志写入到各种终端，文件,邮件,数据库或日志服务器
灬倪先森_·2023-11-30 18:25

Serilog .net下的新兴的日志框架

Serilog的一个关键特性是其能够使用不同的“sinks”（日志事件的目标位置）。这些“sinks”可以
葬歌倾城·2023-11-30 18:23

45、Flink 的指标体系介绍及验证（3）- 完整版

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-11-30 11:56

48、Flink DataStream API 编程指南（1）- DataStream 入门示例

Flink系列文章1、Flink部署、概念介绍、source、transformation、sink使用示例、四大基石介绍和示例等系列综合文章链接13、Flink的tableapi与sql的基本概念、通用
一瓢一瓢的饮 alanchan·2023-11-30 11:25

Windows 11的新功能不适用于所有人，但对将要使用的人来说非常酷

WindowsInk向前迈出了一大步，在Windows11中，更多的人可以直接在一些文本框中书写。换句话说，例如，你可以直接在框
行走的电脑·2023-11-29 23:38
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他