制胜Flink

文举论金：黄金原油全面走势分析策略指导。

市场没有绝对，涨跌没有定势，所以，对市场行情的涨跌平衡判断就是你的制胜法宝。欲望！有句意大利谚语：让金钱成为我们忠心耿耿的仆人，否则，它就会成为一个专横跋扈的主人。空头，多头都能赚钱，唯有贪心不能赚。
m0_73819082·2023-09-18 23:40

排查 Flink 日志输出文件不正确

Flink默认日志框架从flink官网直接下载二进制Flinktar包，解压缩之后，查看conf目录和lib目录结构。
data4·2023-09-18 23:15

华杉版资治通鉴【1629】办案产业链。2022-07-24

他的才干能否治理国家，只靠一篇考试答卷；他的武略能否克敌制胜，只看他骑马射箭。
华杉2009·2023-09-18 23:18

Flink源码阅读之基于Flink1.10的任务提交流程

Flink在1.10版本对整个作业提交流程有了较大改动，详情请见FLIP-73。本文基于1.10对作业提交的关键流程进行分析，不深究。
〇白衣卿相〇·2023-09-18 21:28

SmartNews 基于 Flink 的 Iceberg 实时数据湖实践

摘要：本文整理自SmartNews数据平台架构师ApacheIcebergContributor戢清雨，在FlinkForwardAsia2022实时湖仓专场的分享。
·2023-09-18 18:37

Flink State 和 Fault Tolerance（二）

CheckpointFlink中的State在上一篇中介绍过，Flink中的每个方法或算子都能够是有状态的，为了使State容错，需要为State创建checkpoint（状态检查点）。
Alex90·2023-09-18 18:00

幸福里基于 Flink & Paimon 的流式数仓实践

本次分享主要介绍幸福里业务基于Flink&Paimon构建流式数仓的实践经验，从业务背景、流批一体数仓架构、实践中遇到的问题和解决方案，借助Paimon最终能拿到的收益，以及未来规划方面进行介绍。
·2023-09-18 17:57

flink1.15.0消费kafka 报错 The coordinator is not available.

org.apache.kafka.common.errors.CoordinatorNotAvailableException:Thecoordinatorisnotavailable.但是任务还在正常跑.开源bug[FLINK
Thomas2143·2023-09-18 16:57

Flink与Spark的区别

三、Flink与Spark的区别3.1设计理念1、Spark的技术理念是使用微批来模拟流的计算,基于Micro-batch,数据流以时间为单位被切分为一个个批次,通过分布式数据集RDD进行批量处理,是一种伪实时
Coding路人王·2023-09-18 16:48

Flink Sink Kafka 和 Flink 端到端一致性建议

FlinkSinkKafka和Flink端到端一致性建议大家好，好久不见，我是大圣！今天，我们来聊一聊ApacheFlink在与Kafka对接时的两个常见问题。
·2023-09-18 16:42

议题征集｜Flink Forward Asia 2023 正式启动

点击投递议题作为最受ApacheFlink社区开发者期盼的年度峰会之一，FlinkForwardAsia2023已正式启动！
·2023-09-18 15:12

如何写好文章的开头

俗话说，好的开始是成功的一半，对于一篇文章而言，一个精彩的开头就是制胜的法宝了。毕竟在现在新媒体充斥的时代，就需要通过开头的三五句话，紧紧吸引住读者的注意力。
美茗的美文·2023-09-18 15:47

单细胞36计之4以逸待劳---Integrating stimulated vs. control PBMC datasets to learn cell-type specific respo...

困敌可用积极防御，逐渐消耗敌人的有生力量，使之由强变弱，而我因势利导又可使自己变被动为主动，不一定要用直接进攻的方法，同样可以制胜。
Seurat_Satija·2023-09-18 15:55

摩天之星【投资哲学】企业家必看！5位金融大鳄的投资哲学！

道术并济，方可制胜。当然，简单复制旁人的投资哲学毫无意义，必须学会在提取精华的基础上，用心血和时间来钻研和发展。什么是正确的投资观？交易世界中，时常强调投资观的独有性。因为每个人所处环境不
商业圈圈·2023-09-18 14:54

大数据之-kafka学习笔记

Kafka可以用作Flink应用程序的数据源。Flink可以轻松地从一个或多个Kafka主题中消费数据流。这意味着您可以使用Kafka来捕获和传输实时数据，并将其发送到Flink进行进一步处理。
躺着听Jay·2023-09-18 10:50

Flink的Table API 与SQL的流处理

1流处理与SQL的区别  TableAPI和SQL，本质上还是基于关系型表的操作方式；而关系型表、SQL本身，一般是有界的，更适合批处理的场景。所以在流处理的过程中，有一些特殊概念。SQL流处理处理对象字段元组的有界集合字段元组的无限序列查询对数据的访问可以访问完整的数据输入无法访问所有数据，必须持续等待流式输入查询终止条件生成固定大小的结果集后终止永不停止，根据持续收到的数据不断更新查询结果  
Quinto0·2023-09-18 10:38

FlinkSQL 时间语义、窗口和聚合

目录一、时间语义1.1事件时间1.1.1在创建表的DDL中定义1.1.2在数据流转换为表时定义1.2处理时间1.2.1在创建表的DDL中定义二、窗口2.1分组窗口(老版本,已经弃用,未来的版本中可能会删除)2.2窗口表值函数(WindowingTVFs,新版本,从1.13起)2.2.1滚动窗口(TUMBLE)2.2.2滑动窗口(HOP)2.2.3累积窗口(ACCUMULATE)三、聚合3.1分组聚
开普勒524c·2023-09-18 10:38

Flink SQL:Getting Started

GettingStartedFlinkSQLmakesitsimpletodevelopstreamingapplicationsusingstandardSQL.ItiseasytolearnFlinkifyouhaveeverworkedwithadatabaseorSQLlikesystembyremainingANSI-SQL2011compliant.Thistutorialwillhe
曹木青芸·2023-09-18 10:38

7、Flink Table API & SQL - SQL （DDL/DML）

阅读本章，基于已经阅读了FlinkTableAPI&SQL-概念和通用API这是Flink中支持的数据定义语言(DDL)和数据操作语言(DML)构造的完整列表。
張萠飛·2023-09-18 10:38

Flink TableAPI和SQL（十三）开窗（Over）聚合

文章目录PARTITIONBY（可选）ORDERBY开窗范围范围间隔行间隔在标准SQL中还有另外一类比较特殊的聚合方式，可以针对每一行计算一个聚合值。比如说，我们可以以每一行数据为基准，计算它之前1小时内所有数据的平均值；也可以计算它之前10个数的平均值。就好像是在每一行上打开了一扇窗户、收集数据进行统计一样，这就是所谓的“开窗函数”。开窗函数的聚合与之前两种聚合有本质的不同：分组聚合、窗口TVF
Alienware^·2023-09-18 10:07

Flink中Table API和SQL 完整使用上 (第十一章)

Flink中TableAPI和SQL完整使用一、介绍Flink中TableAPI和SQL二、快速上手1、需要引入的依赖2、简单示例三、基本API1、程序架构2、创建表环境3、创建表1.连接器表（ConnectorTables
小坏讲微服务·2023-09-18 10:37

Flink中Table API和SQL 完整使用中 (第十一章)

Flink中TableAPI和SQL完整使用下一、联结（Join）查询1、常规联结查询1.等值内联结（INNEREqui-JOIN）2.等值外联结（OUTEREqui-JOIN）2、间隔联结查询●两表的联结
小坏讲微服务·2023-09-18 10:06

大数据之flink教程-TableAPI和SQL

TableAPI和FlinkSQL第一章整体介绍1.1什么是TableAPI和FlinkSQLFlink本身是批流统一的处理框架，所以TableAPI和SQL，就是批流统一的上层处理API。
okbin1991·2023-09-18 10:05

Flink中Table API和SQL（五）

目录11.8SQL客户端11.9连接到外部系统11.9.1Kafka11.9.3JDBC11.9.4Elasticsearch11.9.5HBase11.9.6Hive11.8SQL客户端有了TableAPI和SQL，我们就可以使用熟悉的SQL来编写查询语句进行流处理了。不过，这种方式还是将SQL语句嵌入到Java/Scala代码中进行的；另外，写完的代码后想要提交作业还需要使用工具进行打包。这都
大数据阿嘉·2023-09-18 10:05

【Flink SQL】基本概念

目录一、时间属性EventTimeProcessingTime二、水印作用定义watermark策略三、窗口函数作用分类Window聚合滚动窗口（TUMBLE）定义语法标识函数使用EventTime统计每个用户每分钟在指定网站的单击数示例测试数据测试语句测试结果使用ProcessingTime统计每个用户每分钟在指定网站的单击数示例测试数据测试语句滑动窗口（HOP）定义函数语法标识函数示例测试语句
语音不识别·2023-09-18 10:35

大数据-玩转数据-Flink恶意登录监控

一、恶意登录对于网站而言，用户登录并不是频繁的业务操作。如果一个用户短时间内频繁登录失败，就有可能是出现了程序的恶意攻击，比如密码暴力破解。因此我们考虑，应该对用户的登录失败动作进行统计，具体来说，如果同一用户（可以是不同IP）在2秒之内连续两次登录失败，就认为存在恶意登录的风险，输出相关的信息进行报警提示。这是电商网站、也是几乎所有网站风控的基本一环。二、数据源格式937166,1715,bei
人猿宇宙·2023-09-18 07:57

flink的main方法和execute方法的关系

背景：执行flink时，我们几种执行模式，比如在IDE本地执行模式以及远程YARN执行的模式等，你是否有疑问，为什么他们可以共用相同的代码呢？
lixia0417mul2·2023-09-18 07:53

Linux环境下安装FLink1.10.0并启动SQL-client读取Hive1.2.1的数据

Linux环境下安装FLink1.10.0并启动SQL-client读取Hive数据首先去官网下载Flink1.10.0的tgz的包，教程如上篇文章上半部分流程一样，然后配置一下FLINK_HOME/conf
嘿嘿hhahaah·2023-09-18 03:28

Flink 状态管理详解（超全收藏）

1、前言Flink状态管理详解2.状态是什么东西？有了状态能做什么？你在看完这一小节后，需要明白：状态不仅仅只限于Flink的状态。状态其实是一个普遍存在的东西。
000X000·2023-09-18 03:31

Flink JDBC 维表关联java.lang.ClassCastException: java.math.BigInteger cannot be cast to java.lang.Long

背景：最近业务方使用FlinkSQL编写任务时用Mysql作维表关联时报这个错误FAILEDwithfailurecause:java.lang.RuntimeException:java.lang.ClassCastException
CodeCooker17·2023-09-18 02:11

兵势第五

大军能克敌制胜，靠的是奇正变化。攻击敌人能一举成功，靠的是虚实相应。出奇制胜，善用奇正的人，通过奇正的当下把握其战法无穷无尽。无恒法，无定法，有定数。
jhchjhgg·2023-09-18 01:13

calcite适配器

calcite是一个动态数据管理框架，它提供了SQL解析与校验，SQL优化，jdbc接口等能力，并且能够支持对不同数据源的适配以及对SQL语法的扩展等，目前被广泛用于Spark,Flink等大数据引擎中
无醉_1866·2023-09-18 01:15

CDH整合Flink（CDH6.3.2+Flink1.12.0）

一、准备工作安装jdk1.8及maven，jdk使用CDH安装包中自带的jdk的rpm包即可安装完成后添加环境变量[root@linux201~]vim/etc/profile.d/custom.sh添加如下内容#JAVA_HOMEJAVA_HOME=/usr/java/jdk1.8.0_181-clouderaPATH=$PATH:$JAVA_HOME/bin#MAVEN_HOMEMAVEN_H
mp9105·2023-09-18 00:06

flink-cdc初体验

flink-cdc初体验产品介绍flink-cdc是一款专用于数据库增量数据监控的插件。基于flink计算引擎提供的高性能，高可用性，高扩展性的数据监控功能。
高怪兽爱健身·2023-09-17 22:33

【毕业设计】flink大数据淘宝用户行为数据实时分析与可视化

文章目录0前言1、环境准备1.1flink下载相关jar包1.2生成kafka数据1.3开发前的三个小tip2、flink-sql客户端编写运行sql2.1创建kafka数据源表2.2指标统计：每小时成交量
DanCheng-studio·2023-09-17 19:02

云帆公社+云霰水吉+读书打卡《从优秀教师到卓越老师》第3天

如选取一些具有代表性的回答，这些回答进行自由讨论，因为有效和学生互动是提高教学效率的制胜秘诀。传送信封的绝招，让我深觉老师用心慧心的重要。
大树一班·2023-09-17 19:55

【Flink实战】玩转Flink里面核心的Source Operator实战

作者：“大数据小禅”文章简介：【Flink实战】玩转Flink里面核心的SourceOperator实战欢迎小伙伴们点赞、收藏⭐、留言目录导航Flink的API层级介绍SourceOperator速览Flink
大数据小禅·2023-09-17 19:40

邝石，广州趣丸网络（TT语音）CSO，前YY娱乐高管 语录

2.需求须洞察本质，单点突破3.增长，要抓住制胜关键点，构筑增长核心动力学员提问：Q:创业时如何找准趋势？
风之恋人·2023-09-17 17:06

Flink SQL Gateway REST Endpoint 使用第二弹

在上一篇文章中，我们只是使用RestAPI通过FlinkSQLGateway向standalone集群提交了SQL任务，但是还存在一些问题没有解决，比如如何设置任务的jobname,checkpoint
JasonLee实时计算·2023-09-17 17:10

【Flink 实战系列】Could not find any factory for identifier ‘wechat-alarm‘ that implements ‘org.apache.fli

Couldnotfindanyfactoryforidentifier‘wechat-alarm’thatimplements‘org.apache.flink.table.factories.DynamicTableFactory
JasonLee实时计算·2023-09-17 17:10

【Flink实战系列】Flink 消费多个 Topic 数据利用侧流输出完成动态的分流操作

【Flink实战系列】Flink消费多个Topic数据利用侧流输出完成动态的分流操作需求背景这篇文章实际上是对Flink消费多个Topic数据利用侧流输出完成分流功能这篇文章的升级，在上一篇文章中我们已经完成了利用侧流输出分流的功能
JasonLee实时计算·2023-09-17 17:10

【Flink实战系列】Flink如何提交任务到远程的集群

Flink可以直接从本地提交任务到远程的集群,这样就不用每次打包上传到集群然后再启动任务,会减少很多时间,下面就来看看具体是怎么实现的?
JasonLee实时计算·2023-09-17 17:39

【Flink实战系列】Flink 如何动态写入 kafka 的多个 topic

昨天在群里一个同学问了这样一个问题,Flink怎么根据数据里面的某个字段动态把数据写入多个kafka的topic.其实这个问题非常简单,你肯定会想到说写多个sink就可以了,Flink确实也是支持多个sink
JasonLee实时计算·2023-09-17 17:39

【Flink实战系列】Flink 1.14.0 消费 kafka 数据自定义反序列化器

Flink1.14.0消费kafka数据自定义反序列类在最近刚发布的Flink1.14.0版本中Source接口进行了重构,API的变化还是非常大的,那在新的接口下消费kafka的时候如何自定义反序列类呢
JasonLee实时计算·2023-09-17 17:39

【Flink实战系列】Hash collision on user-specified ID “Kafka Source”

Hashcollisiononuser-specifiedID“KafkaSource”在使用fromSource构建KafkaSource的时候，遇到下面的报错，下面就走进源码，分析一下原因。Exceptioninthread"main"java.lang.IllegalArgumentException:Hashcollisiononuser-specifiedID"KafkaSource".
JasonLee实时计算·2023-09-17 17:08

Flink CDC 2.0 详解

一、CDC概述CDC的全称是ChangeDataCapture，在广义的概念上，只要是能捕获数据变更的技术，我们都可以称之为CDC。目前通常描述的CDC技术主要面向数据库的变更，是一种用于捕获数据库中数据变更的技术。CDC技术的应用场景非常广泛：数据同步：用于备份，容灾；数据分发：一个数据源分发给多个下游系统；数据采集：面向数据仓库/数据湖的ETL数据集成，是非常重要的数据源。CDC的技术方案非常
000X000·2023-09-17 15:43

maven

Error:MavenResourcesCompiler:Mavenprojectconfigurationrequiredformodule'flink-flow-dispatch’isn'tavailable.CompilationofMavenprojectsissupportedonlyifexternalbuildisstartedfromanIDE
arbalest1080·2023-09-17 11:24

（三十一）大数据实战——一键式DolphinScheduler高可用工作流任务调度系统部署安装

DolphinScheduler支持多种任务类型，包括Shell、SQL、Spark、Python、Sub-Process、HTTP、Flink等，同时也支持用户自定义任务类型。本节内容我
北溟溟·2023-09-17 10:12

Kerberos安全认证-连载12-Kafka Kerberos安全配置及访问

目录1.Kafka配置Kerberos2.客户端操作Kafka3.JavaAPI操作Kafka4.StructuredStreaming操作Kafka5.Flink操作Kafka技术连载系列，前面内容请参考前面连载
IT贫道·2023-09-17 10:02

Flink SQL实战演练之脚手架开发

flinksql目前开发的方式包括纯sql的开发，可以运行在zeppelin上，也可以采用代码进行开发，打包成jar运行，代码开发的话每次都要新建工程，会有一些重复性的工作要做，本章讲述通过脚手架的方式快速构建
Coder小咚·2023-09-17 08:01
上一页 77 78 79 80 81 82 83 84 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他