-----Streaming

org.apache.flink.table.api.TableException: Sink does not exists

旧城里的阳光的博客-CSDN博客参考这篇文章，写了kafka到mysql的代码例子，因为自己改了表结构，运行下面代码：packageorg.test.flink;importorg.apache.flink.streaming.api
恬毅·2023-09-16 06:23

【RPC】Grpc的Streaming

文章目录一、前言二、gRPC服务端流三、grpc客户端流四、gRPC双向流五、StreamObserver转换为反应式框架流六、总结一、前言grpc是一个由google推出的、高性能、开源、通用的rpc框架。它是基于HTTP2协议标准设计开发，默认采用ProtocolBuffers数据序列化协议，支持多种开发语言。一般业务场景下，我们都是使用grpc的simple-rpc模式，也就是每次客户端发起
LP_bin·2023-09-16 01:09

【openscreen 】FrameId

chromium\src\media\cast\common\frame_id.h属于第三方库：openscreenE:\chromium\src\third_party\openscreen\src\cast\streaming
等风来不如迎风去·2023-09-15 17:57

spark core

fastdisk10xmemory100xeasycodeinteractiveshellunifiedstackbatchstreamingmlibdeploymentlocalstandaloneyarnk8s
大数据修行·2023-09-15 07:31

flink连接kafka报：org.apache.kafka.common.errors.TimeoutException

packageorg.test.flink;importorg.apache.flink.api.common.serialization.SimpleStringSchema;importorg.apache.flink.streaming.api.datastream.DataStream
恬毅·2023-09-15 05:02

MS SQL Server问题汇总

debezium-sqlserverconnector-sqlserver_transaction_log_source-change-event-source-coordinator]WARNi.d.connector.sqlserver.SqlServerStreamingChangeEventSource-Nomaxi
KeepSayingNo·2023-09-15 03:23

【Flink】:ClassNotFoundException: org.apache.flink.streaming.api.functions.source.SourceFunction

idea中导入依赖后，明明自己的pom包已经导入了，但是运行程序后会出现找不到核心类这种情况，出现如下问题java.lang.NoClassDefFoundError:org/apache/flink/streaming
一杯咖啡半杯糖·2023-09-15 03:34

flink 多种类型窗口聚合理解

Flink认为Batch是Streaming的一个特例，所以Flink底层引擎是一个流式引擎，在上面实现了流处理和批处理。而窗口（window）就是从Streaming到Batch的一个桥梁。
zb313982521·2023-09-14 14:20

Flink基础系列7-通过Web UI执行jar文件

一.准备代码1.1maven准备配置Flink的依赖org.apache.flinkflink-java1.9.0providedorg.apache.flinkflink-streaming-java
只是甲·2023-09-14 13:38

使用ffmpeg转码MP4至m3u8格式并切片，以及自动检测切片m3u8脚本编写

1，HLS简介HLS，HttpLiveStreaming是由Apple公司定义的用于实时流传输的协议，HLS基于HTTP协议实现，传输内容包括两部分，一是M3U8描述文件，二是TS媒体文件。
the丶only·2023-09-14 12:58

FFmpeg入门详解之108：m3u8整理3--关于HLS之m3u8小结

HLS，HttpLiveStreaming是由Apple公司定义的用于实时流传输的协议，HLS基于HTTP协议实现，传输内容包括两部分，一是M3U8描述文件，二是TS媒体文件。
福优学苑@音视频+流媒体·2023-09-14 12:26

数据库顶会 VLDB 2023 论文解读：字节跳动如何解决超大规模流式任务运维难题

本文解读了新加坡国立大学马天白教授团队、字节跳动基础架构-计算-流式计算团队联合发表在国际数据库与数据管理顶级会议VLDB2023上的论文“StreamOps:Cloud-NativeRuntimeManagementforStreamingServicesinByteDance
字节跳动云原生计算·2023-09-14 06:39

python3.7.2安装与配置_python3.7.2下载及安装（windows为例）

3、安装完成...05021相关推荐2019-12-1117:05−一、SparkStreaming设计SparkStreaming可整合多种输入数据源，如Kafka、Flume、HDFS，甚至是普通的
weixin_39686230·2023-09-14 04:44

SparkStreaming+Kafka 实现基于缓存的实时wordcount程序

我的原创地址：https://dongkelun.com/2018/06/14/updateStateBykeyWordCount/前言本文利用SparkStreaming和Kafka实现基于缓存的实时
董可伦·2023-09-13 21:39

大数据课程L9——网站流量项目的实时业务处理代码

文章作者邮箱：[email protected]地址：广东惠州▲本章节目的⚪掌握网站流量项目的SparkStreaming代码；⚪掌握网站流量项目的HBaseUtil代码；⚪掌握网站流量项目的MysqlUtil
伟雄·2023-09-13 15:44

大数据课程L8——网站流量项目的SparkStreaming整合代码

文章作者邮箱：[email protected]地址：广东惠州▲本章节目的⚪掌握网站流量项目的工程Pom配置文件代码；⚪掌握网站流量项目的SparkStreaming整合Kafka代码；⚪掌握网站流量项目的
伟雄·2023-09-13 15:14

大数据期末考试题库

文章目录Spark选择题章鱼学院（Spark）大数据期末题目汇总选择题填空题判断题简答题Spark选择题Spark的四大组件下面哪个不是(D)A.SparkStreamingBMlibCGraphxDSparkR
萌萌哒の瑞萌萌·2023-09-13 07:42

小结-Spark-Spark Streaming入门

定义及工作原理SparkStreaming定义，官网翻译如下SparkStreaming是核心SparkAPI的扩展，可实现实时数据流的可扩展，高吞吐量，容错流处理。
Andrew0000·2023-09-12 23:22

基于 Flink CDC 高效构建入湖通道

本文整理自阿里云Flink数据通道负责人、FlinkCDC开源社区负责人，ApacheFlinkPMCMember&Committer徐榜江（雪尽），在StreamingLakehouseMeetup的分享
Apache Flink·2023-09-12 09:02

A Particle or So

Picturebyauthor,reservedAllaloneAwashofnightDesolvingFlippingStarsStreamingalongAnoceanoftimeAsingleboatMixedandshatteredHardromanceYouarethesailoraboardAparticleoftimeOrsotospeakTheentireworldahead
Stevieboy·2023-09-12 09:43

大数据课程L6——网站流量项目的SparkStreaming

文章作者邮箱：[email protected]地址：广东惠州▲本章节目的⚪了解网站流量项目的SparkStreaming概述；⚪掌握网站流量项目的SparkStreaming实现Wordcount
伟雄·2023-09-12 07:12

基于 Flink CDC 高效构建入湖通道

本文整理自阿里云Flink数据通道负责人、FlinkCDC开源社区负责人，ApacheFlinkPMCMember&Committer徐榜江（雪尽），在StreamingLakehouseMeetup的分享
·2023-09-11 11:51

Kafka/Spark-01消费topic到写出到topic

1Kafka的工具类1.1从kafka消费数据的方法消费者代码defgetKafkaDStream(ssc:StreamingContext,topic:String,groupId:String)={
:Concerto·2023-09-11 06:50

PostgreSQL 流复制搭建

备份恢复2.2创建复制用户2.3参数修改2.4启动并检查2.5同步流复制2.6同步复制级别3.流复制监控3.1角色判断3.2主库查看流复制3.3延迟监控3.4备库查询复制信息前言PostgreSQL流复制（StreamingReplication
Bing@DBA·2023-09-10 18:38

基于flink实时数据仓库-第二讲flinkcdc

flinkcdc1.FlinkCDC1.CDC是什么2.CDC的种类3.Flink-CDC3.1flink-cdcstreaming3.2flinkcdcflinksql1.FlinkCDC1.CDC是什么
大数据学习爱好者·2023-09-10 15:35

Spark+Kafka构建实时分析Dashboard

实验系统和软件要求2、系统和软件的安装（1）安装Spark（2）安装Kafka（3）安装Python（4）安装Python依赖库（5）安装PyCharm三、数据处理和Python操作Kafka四、StructuredStreaming
昵称只能一个月修改一次呀·2023-09-10 15:28

CC00007.flink——|Hadoop&Flink.V07|——|Flink.v07|快速应用|单词统计案例|流数据|Scala版|

二、编程代码实现###---代码实现importorg.apache.flink.streaming.api.scala._objectWordCountScalaStream{d
yanqi_vip·2023-09-10 13:42

一、Flink简述

Flink可以做什么2.1、数据处理架构有哪些2.1.1、联机事务处理（OLTP）2.1.2、联机分析处理（OLAP）3、Flink的特点（为什么使用）3.1、flink特点3.2、flink与SparkStreaming
末名赶上·2023-09-10 13:41

1. Flink简述

Flink与SparkStreaming对比数据模型和处理模型Spark的数据模型是RDD，很多时候RDD可以实现为分布式共享内存或者完全虚拟化（即有的中间结果RDD当下游处理完全在本地时可以直接优化省略掉
爱做梦的鱼·2023-09-10 13:54

【Hive】Hive数据倾斜以及解决方案

例如以下情况：用Hive算数据的时候reduce阶段卡在99.99%用SparkStreaming做实时算法时候，一直会有executor出现OOM的错误，但是其余的executor内存使用率却很低。
yabi亚比·2023-09-10 06:47

使用 JSON Views 技术，让 Controller 返回 JSON 串

目录简介第一步，准备工作，引入json-view插件第二步，在controller中指定要渲染的model对象第三步，创建一个JSONView视图文件使用GSONView模板补充信息respond方法StreamingJsonBuilder
微风好飞行·2023-09-09 16:15

介绍 Apache Spark 的基本概念和在大数据分析中的应用。

Spark由多个组件组成，包括SparkCore、SparkSQL、SparkStreaming、MLlib和GraphX等。
kkkliaoo·2023-09-09 05:36

Paimon+StarRocks 湖仓一体数据分析方案

本文整理自阿里云高级开发工程师曾庆栋（曦乐）在StreamingLakehouseMeetup分享的内容，深入探讨了传统数据仓库分析、Paimon+StarRocks湖仓一体数据分析、StarRocks
·2023-09-08 19:10

unity 安卓端读取Excel文件(xslx文件转为csv文件)

Application.dataPath（只读）：该路径指向咱们Unity编辑器的Asset文件夹Application.persistentDataPath（可读可写）：该路径指向iOS和Android的沙盒路径Application.streamingAssetsPath
面向对象的对象·2023-09-08 16:15

三菱PLC通讯RS485模块数据采集与C#开发监控软件到Excel

usingActUtlTypeLib;usingNPOI.HSSF.UserModel;usingNPOI.SS.UserModel;usingNPOI.XSSF.Streaming;usingNPOI.XSSF.UserModel
luck 饭·2023-09-07 17:06

Spark Streaming核心概念与编程（二）

SparkStreaming核心核心概念StreamingContextDStream对DStream操作算子，比如map/flatMap，其实底层会被翻译为对DStream中的每个RDD都做相同因为一个
lunsheng·2023-09-07 16:03

Flink定时器的触发时间

_importorg.apache.flink.streaming.api.scala.StreamExecutionEnvironmentimportorg.learn.function.
Jorvi·2023-09-07 12:19

spark streaming org.apache.spark.SparkException: ArrayBuffer(java.nio.channels.ClosedChannelExcep...

背景：一个古老的项目运行了好多年，突然报错了sparkversion1.6.3异常如下21/10/2113:28:30ERRORApplicationMaster:Userclassthrewexception:org.apache.spark.SparkException:ArrayBuffer(java.nio.channels.ClosedChannelException)org.apach
邵红晓·2023-09-07 07:40

android HLS 初始化过程

记录android上httplivestreaming初始化过程，学习之用只拣最关键部分记录，其余的未作详细记录1HttpLiveSource.cpp::prepareAsync()-->这个是比较通用的媒体初始化过程
CuTea·2023-09-06 23:19

tf和pytorch每轮epoch显示输出的auc是如何计算的

tensorflowAUC&streaming_auc_我爱写报告的博客-CSDN博客Tf2通过黎曼和进行计算的。
小小白2333·2023-09-06 20:38

Unity插件-音频参数优化

需求:需要对音频做出修改,压缩音频质量,检测是否设置为Mono与Normalize,超过10秒LoadType设为Streaming.思路:遍历所有的音频文件,拿到所有的音频文件对象，针对不同平台的音频文件做修改
东方小白·2023-09-06 20:28

Flink+Flink CDC版本升级的依赖问题总结

1、flink1.15前后jar包名称不一样flink-streaming-java、flink-clients、flink-table-api-java-bridge这几个在flink1.15之前，后缀区分
苡~·2023-09-06 17:19

虚幻引擎集成web前端＜一＞：win环境UE4.27导出像素流并集成到vue2环境（附案例）

本案例附件：https://download.csdn.net/download/rexfow/88303544第一部分：虚幻引擎导出像素流windows包第1步：软件设置-AudioMixer-PixelStreamingIP
web搅拌机·2023-09-06 13:09

基于 Flink CDC 构建 MySQL 和 Postgres 的 Streaming ETL

官方网址：https://ververica.github.io/flink-cdc-connectors/release-2.3/content/%E5%BF%AB%E9%80%9F%E4%B8%8A%E6%89%8B/mysql-postgres-tutorial-zh.html官方教程有些坑，经过自己实测，记录个笔记。服务器环境：VM虚拟机：CentOS7.9docker版本：Dockerv
沐雪架构师·2023-09-06 09:32

Spark提交任务

SNAPSHOTorg.apache.sparkspark-core_2.112.2.0providedorg.apache.sparkspark-sql_2.112.2.0providedorg.apache.sparkspark-streaming
Jorvi·2023-09-06 03:44

RTSP协议学习

文章目录RTSP协议学习单播，组播，广播单播（Unicast）和组播（Multicast）广播（Broadcast）学习思维导图一览RTSP协议学习##工作原理RTSP（Real-TimeStreamingProtocol
泷fyk·2023-09-05 16:39

论文《Spell：大型非结构化系统日志的在线流式解析》翻译

论文《Spell:OnlineStreamingParsingofLargeUnstructuredSystemLogs》翻译Spell:OnlineStreamingParsingofLargeUnstructuredSystemLogs
Programmer Monkey·2023-09-05 09:41

秒懂SpringBoot如何集成Redis

Redis简述官方介绍Theopensource,in-memorydatastoreusedbymillionsofdevelopersasadatabase,cache,streamingen
ShuSheng007·2023-09-05 07:59

Unix Network Programming Episode 73

SCTPOne-to-Many-StyleStreamingEchoServer:‘main’Function#include"unp.h"intmain(intargc,char**argv){intsock_fd
duxingzhe103·2023-09-05 07:29

大数据-玩转数据-Flink状态编程（上）

SparkStreaming在状态管理这块做的不好,很多时候需要借助于外部存储(例如Redis)来手动管理状态,增加了编程的难度。Flink的状态管理是它的优势之一。
人猿宇宙·2023-09-04 22:44
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他