Flink流式

面试题：从 MySQL 读取 100w 数据进行处理，应该怎么做？

文章目录背景常规查询流式查询MyBatis流式查询接口为什么要用流式查询？
xuxu1116·2023-12-29 19:57

Flink实时电商数仓之DWS层

org.apache.dorisflink-doris-connector-1.17com.janeluoikanalyzer测试代码如下：publicclassIkUtil{publicsta
十七✧ᐦ̤·2023-12-29 17:19

【flink番外篇】9、Flink Table API 支持的操作示例（5）- 表的列操作

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:18

【flink番外篇】9、Flink Table API 支持的操作示例（4）- Table API 对表的查询、过滤操作

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:17

【flink番外篇】9、Flink Table API 支持的操作示例（1）-通过Table API和SQL创建表

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:47

【flink番外篇】9、Flink Table API 支持的操作示例（3）- 通过API查询表和使用窗口函数的查询

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:47

【flink番外篇】9、Flink Table API 支持的操作示例（2）- 通过Table API 和 SQL 创建视图

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:15

架构设计内容分享(四十四)：日流量200亿，携程网关的架构设计？

目录一、概述二、高性能网关核心设计2.1.异步流程设计2.2.流式转发&单线程2.3其他优化三、网关业务形态四、网关治理4.1多协议兼容4.2路由模块4.3模块编排五、总结一、概述类似于许多企业的做法，
之乎者也··2023-12-29 16:13

API 网关 Apache APISIX 助力雪球双活架构演进

其中实时行情服务对接了多种上游数据源，通过数据流式计算、存储与分发，为投资者提供稳定的数据服务。所以实时行情一直是雪球业务系统中的资源消耗大户，持续在高水位运行。
API7.ai 技术团队·2023-12-29 16:40

Java Stream流轻松遍历树形结构

为了降低数据库的查询压力，我们可以使用Java8中的Stream流一次性把数据查出来，然后通过流式处理。话不多说，直接上Demo。首先，创建一个Menu菜单的实体类@Data@Bu
zuihongyan518·2023-12-29 15:27

Kafka 初识

、支持分区的、多副本的，基于zookeeper协调的分布式消息系统，它的最大特点就是可以实时的处理大量数据以满足各种需求场景：比如基于Hadoop的批处理系统、低延迟的实时系统、storm/spark流式处理引擎
Advancer-lbh·2023-12-29 14:56

Flink Forward Asia 2023 主会场精彩回顾

2023年12月8日-9日，FlinkForwardAsia（FFA）峰会成功举行。FlinkForwardAsia是由Apache软件基金会官方授权、由阿里云承办的技术峰会。
Apache Flink·2023-12-29 12:05

基于Freeswitch对接免费的ASR语音识别引擎

免费又好用的语音识别引擎----Voskvosk是一个离线开源语音识别工具，它可以识别16种语言，包括中文，而且总体效果还是不错的，因为我们要对接到呼叫中心，因此我们需要实时的流式传输语音数据，目前主流的解决方案是采用
shanghaimoon·2023-12-29 12:10

flink的三个state backend的选择

flink的三个状态MemoryStateBackend默认，小状态，本地调试使用FsStateBackend大状态，长窗口，高可用场景RocksDBStateBackend超大状态，长窗口，高可用场景
gegeyanxin·2023-12-29 09:12

Flink消费pubsub问题

我看网上flink消费pubsub的资料并不多，最近跑通了，大家有问题的可以给我留言。
gegeyanxin·2023-12-29 09:41

ElasticSearch 实现分词全文检索 - SpringBoot 完整实现 Demo

suggest)分词全文搜索所用的技术如下：ElasticSearchKibana管理界面IKAnalysis分词器SpringBoot实现流程可以通过Canal对MySQLbinlog进行数据同步，或者flink
手把手教你学Java·2023-12-29 08:18

为什么ChatGPT采用SSE协议而不是Websocket？

在探索ChatGPT的使用过程中，我们发现GPT采用了流式数据返回的方式。理论上，这种情况可以通过全双工通信协议实现持久化连接，或者依赖于基于EventStream的事件流。
程序新视界·2023-12-29 08:42

Kafka优异的性能是如何实现的？

它被广泛用于构建实时数据管道和流式应用程序。
KevinAha·2023-12-29 07:49

Java 8 中的 Stream 轻松遍历树形结构

在平时的需求开发中，我们经常会遍历一些树形结构，数据库中使用父id来关联，为了降低数据库的查询压力，我们可以使用java8中的Stream流一次性把数据查出来，然后通过流式处理。
＊King＊·2023-12-29 07:23

SparkStreaming与Kafka整合

1.3SparkStreaming与Kafka整合1.3.1整合简述kafka是做消息的缓存，数据和业务隔离操作的消息队列，而sparkstreaming是一款准实时流式计算框架，所以二者的整合，是大势所趋
Guff_hys·2023-12-29 06:55

FlinkSQL窗口实例分析

WindowingTVFsWindowingtable-valuedfunctions(WindowingTVFs)，即窗口表值函数注意：窗口函数不可以单独使用，需要聚合函数，按照window_start、window_end分区，即存在：groupbywindow_start,window_endTUMBLE函数采用三个必需参数，一个可选参数：TUMBLE(TABLEdata,DESCRIPTO
PONY LEE·2023-12-29 06:42

Flink项目系列1-项目介绍

一.电商的用户行为  电商平台中的用户行为频繁且较复杂，系统上线运行一段时间后，可以收集到大量的用户行为数据，进而利用大数据技术进行深入挖掘和分析，得到感兴趣的商业指标并增强对风险的控制。  电商用户行为数据多样，整体可以分为用户行为习惯数据和业务行为数据两大类。用户的行为习惯数据包括了用户的登录方式、上线的时间点及时长、点击和浏览页面、页面停留时间以及页面跳转等等，我们可以从中进行流量统计和热门
只是甲·2023-12-29 05:37

别再写一堆的 for 循环了！Java 8 中的 Stream 轻松遍历树形结构，是真的牛逼！

可能平常会遇到一些需求，比如构建菜单，构建树形结构，数据库一般就使用父id来表示，为了降低数据库的查询压力，我们可以使用Java8中的Stream流一次性把数据查出来，然后通过流式处理。
caoyanzhi·2023-12-29 05:38

gRPC-Go基础（3）基础gRPC服务

文章目录1.服务定义1.1一元RPC1.2服务端流式RPC1.3客户端流式RPC1.4双向流式RPC2.生成GRPC代码3.构建逻辑代码3.1Server端3.2Client端3.3一元RPC3.4服务端流式
ldxxxxll·2023-12-29 04:28

2021 Web Worker 现状

Web是流式的，当
前端瓶子君·2023-12-29 02:00

Hbase - 自定义Rowkey规则

>在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制`TableInputFormat`来实现我们的需求了，我们还可以采用Flink的`DataSet
kikiki5·2023-12-29 01:49

文件api

1、文件基本操作1.1、文件操作的步骤引入头文件（stdio.h）打开文件使用文件指针关闭文件1.2、文件相关的概念按文件的逻辑结构：记录文件、流式文件按存储介质：普通文件、设备文件按数据的组织形式：文本文件
哦豁灬·2023-12-29 01:33

TCP与UDP是流式传输协议吗?

它们不是流式传输协议，而是提供了不同的数据传输特性：1.TCP（传输控制协议）：-TCP是一种面向连接的、可靠的、基于字节流的传输层通信协议。
Angel·2023-12-28 22:44

新一代网络请求库：python-httpx库

文章目录httpx库一、概述1、简介2、命令行模式3、快速开始3.1get请求3.2post请求3.2.1表单3.2.2文件3.2.3JSON3.2.4二进制3.3响应处理3.4流式响应3.5cookie3.6
SteveKenny·2023-12-28 20:15

【大数据】Hudi HMS Catalog 完全使用指南

HudiHMSCatalog完全使用指南1.HudiHMSCatalog基本介绍2.在Flink中写入数据3.在FlinkSQL中查看数据4.在Spark中查看数据5.在Hive中查看数据1.HudiHMSCatalog
G皮T·2023-12-28 18:24

gh-ost详解

详细内容请看github二、工作原理1.ghost迁移：在服务器上创建ghost表，与要执行的DDL表结构一致在ghost表上进行DDL变更连接MySQL伪装为replica,流式传输binarylogev
与数据交流的路上·2023-12-28 18:14

限流式保护器在酒店电气防火安全中的应用——安科瑞 顾烊宇

摘要】近年来，随着我国社会经济的快速发展，各个城市酒店（宾馆）服务行业也迎来了高速发展期，然而酒店（宾馆）在日常经营和消防安全管理方面也暴露出一些问题，存在着诸多火灾隐患，稍有不慎即可引发重大人员伤亡火灾事故，严重影响着人民群众的生命及财产安全。为此，该文结合工作实际，针对酒店（宾馆）存在的火灾隐患进行了详细分析，在此基础上提出了进一步加强酒店（宾馆）防火对策。【关键词】酒店（宾馆）；火灾隐患；消
Acrelguyangyu·2023-12-28 17:02

Next Station of Flink CDC

摘要：本文整理自阿里云智能FlinkSQL、FlinkCDC负责人伍翀（花名：云邪），在FlinkForwardAsia2023主会场的分享。
Apache Flink·2023-12-28 17:30

Actor模型与Akka Actor体系基础总结

前言最近用业余时间把Flink的RPC基础设施翻了个底朝天，又与之前分析过的SparkRPC机制做了一些对比，越发觉得Actor模型甚为精妙，值得简单记录一下，顺便也可作为日后解析FlinkRPC机制的基础入门
LittleMagic·2023-12-28 17:51

Flink项目实战篇 基于Flink的城市交通监控平台（下）

系列文章目录Flink项目实战篇基于Flink的城市交通监控平台（上）Flink项目实战篇基于Flink的城市交通监控平台（下）文章目录系列文章目录4.智能实时报警4.1实时套牌分析4.2实时危险驾驶分析
阿moments·2023-12-28 17:28

Flink1.17实战教程（第五篇：状态管理）

系列文章目录Flink1.17实战教程（第一篇：概念、部署、架构）Flink1.17实战教程（第二篇：DataStreamAPI）Flink1.17实战教程（第三篇：时间和窗口）Flink1.17实战教程
阿moments·2023-12-28 17:27

Flink1.17实战教程（第六篇：容错机制）

系列文章目录Flink1.17实战教程（第一篇：概念、部署、架构）Flink1.17实战教程（第二篇：DataStreamAPI）Flink1.17实战教程（第三篇：时间和窗口）Flink1.17实战教程
阿moments·2023-12-28 17:27

Flink1.17实战教程（第三篇：时间和窗口）

系列文章目录Flink1.17实战教程（第一篇：概念、部署、架构）Flink1.17实战教程（第二篇：DataStreamAPI）Flink1.17实战教程（第三篇：时间和窗口）Flink1.17实战教程
阿moments·2023-12-28 17:57

Flink1.17实战教程（第四篇：处理函数）

系列文章目录Flink1.17实战教程（第一篇：概念、部署、架构）Flink1.17实战教程（第二篇：DataStreamAPI）Flink1.17实战教程（第三篇：时间和窗口）Flink1.17实战教程
阿moments·2023-12-28 17:57

Flink项目实战篇 基于Flink的城市交通监控平台（上）

系列文章目录Flink项目实战篇基于Flink的城市交通监控平台（上）Flink项目实战篇基于Flink的城市交通监控平台（下）文章目录系列文章目录1.项目整体介绍1.1项目架构1.2项目数据流1.3项目主要模块
阿moments·2023-12-28 17:21

Dbeaver，Hudi，Hive，Spark，Presto应用问题及解决措施梳理

近期频繁在mysql源端数据通过底层位Flink的平台进行数据接入至Hudi，过程中出现了一些问题，也通过了其他办法进行解决，现将整个过程的思路进行总结，以供大家共同学习进步。
p1i2n3g4·2023-12-28 17:31

Flink导入StarRocks

1、pom依赖881.13.62.12org.apache.flinkflink-java${flink.version}org.apache.flinkflink-streaming-java_${scala.binary.version
docsz·2023-12-28 16:29

TCP与UDP是流式传输协议吗?

它们不是流式传输协议，而是提供了不同的数据传输特性：1.TCP（传输控制协议）：-TCP是一种面向连接的、可靠的、基于字节流的传输层通信协议。
Angel·2023-12-28 16:13

DolphinDB 即时编译（JIT）详解

DolphinDB是基于高性能时序数据库，支持复杂分析与流式处理的实时计算平台，内置了丰富的计算功能和强大多范式编程语言。
DolphinDB智臾科技·2023-12-28 15:39

Flink 在有赞实时计算的实践

其次是在调研阶段我们为什么选择了Flink。在这个部分，主要是Flink与Spark的structuredstreaming的一些对比和选择Flink的原因。
有赞技术团队·2023-12-28 15:11

flink-1.11 native k8s 测试

flinkonk8s目前有两种模式：Kubernetes：用户通过定义flink的k8s资源描述文件，由kubectl命令启动，最终以standalonesessioncluster或standalonejobcluster
yuchuanchen·2023-12-28 15:35

集度汽车 Flink on native k8s 的应用与实践

摘要：本文整理自集度汽车数据部门实时方向负责人、ApacheFlinkContributor周磊&集度汽车数据开发专家顾云，在FFA2022行业案例专场的分享。
Apache Flink·2023-12-28 15:05

flink k8s 安装 问题合集

Flinkkubernetessession部署方案参照flink官方文档https://nightlies.apache.org/flink/flink-docs-release-1.14/docs/
岁月不止·2023-12-28 15:05

flink-1.10 native-k8s (Beta)

注意：flink-1.10版本的native-k8s还是实验版本，相关配置或客户端可能在未来变更。
yuchuanchen·2023-12-28 15:05

Flink开发利器StreamX

背景Hadoop体系虽然在目前应用非常广泛，但架构繁琐、运维复杂度过高、版本升级困难，且由于部门原因，数据中台需求排期较长，我们急需探索敏捷性开发的数据平台模式。在目前云原生架构的普及和湖仓一体化的大背景下，我们已经确定了将Doris作为离线数据仓库，将TiDB(目前已经应用于生产)作为实时数据平台，同时因为Doris具有onMySQL的odbc能力，所以又可以对外部数据库资源进行整合，统一对外输
Apache StreamPark·2023-12-28 15:34
上一页 26 27 28 29 30 31 32 33 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他