flink源码分析

福利「Flink Forward Asia 2023 」PPT 阅读合集！

2023年12月8日-9日，FlinkForwardAsia（FFA）峰会成功举行。
·2024-02-19 11:20

Owin Katana 的底层源码分析

usingMicrosoft.Owin;23[assembly:OwinStartup(typeof(Owin.Analysis.Startup))]4namespaceOwin.Analysis5{6publicclassStartup7{8publicvoidConfiguration(IAppBuilderapp)9{10app.Run(context=>11{12context.Respo
金色888·2024-02-19 11:49

Flink和Kafka端到端数据一致性

Flink内部把Checkpoint开启，设置Checkpoint模式为EXACTLY_ONCEenv.enableCheckpointing(1000*10L);env.getCheckpointConfig
今天好好洗头了嘛·2024-02-19 10:19

Flink介绍

Flink介绍1.简介ApacheFlinkisaframeworkanddistributedprocessingengineforstatefulcomputationsoverunboundedandboundeddatastreams.Flinkhasbeendesignedtoruninallcommonclusterenvironments
·2024-02-19 10:08

BugKu-Web-矛盾

BugKu-Web-矛盾题目链接:https://ctf.bugku.com/challenges/detail/id/72.html考点：PHP弱类型比较漏洞题目源码分析：$num=$_GET['num
H_u_p·2024-02-15 10:53

HTTP2:netty http2 StreamChannel多流实现与Http2StreamFrame解码器的源码分析

nettyhttp2server侧的核心逻辑个人认为，主要在编解码处理器和StreamTransformChannel这块，分别处理Http2消息帧的编解码，以及连接的多流处理机制。对应用的处理类分别：ChannelHandlerDescio.netty.handler.codec.http2.Http2FrameCodec负责http2帧和消息的编解码io.netty.handler.codec
Saleson·2024-02-15 10:45

iTop-4412 裸机程序（三）- 点亮一颗LED灯源码分析

目录代码文件分析led原理图分析start.Slink.ldsmkbl1Makefile代码文件分析root@ubuntu:~/4412NoOS/led/1.0_点亮一颗led#lslink.ldsMakefilemkbl1.cs3c4412_gpio.hstart.Sstart.S:汇编文件，编译生成最后的led.bin文件s3c4412_gpio.h:Exynos4412上的GPIO寄存器地址
Kilento·2024-02-15 08:26

iTop-4412 裸机程序（四）- 流水灯

目录流水灯源码分析流水灯源码分析相对于上篇博客，流水灯的代码仅增加了delay延时函数，其他文件不变，代码我已经上传到GitHub上：https://github.com/Kilento/4412NoOS
Kilento·2024-02-15 08:26

jdk1.8中的hashmap实现原理和源码分析

文章目录Hashmap内部结构常用方法putgetremove内部方法hashresize相似数据结构参考HashmapHashMap可以根据键值存取数据。HashMap位于java.util包下，继承AbsractMap，实现Map，Cloneable，Serializable接口。publicclassHashMapextendsAbstractMapimplementsMap,Cloneab
娟宝宝萌萌哒·2024-02-15 08:16

Flink SQL Query 语法（三）- Join

主要引用官方文档https://ci.apache.org/projects/flink/flink-docs-release-1.13/docs/dev/table/sql/queries/joins
Alex90·2024-02-15 06:18

Hbase - 自定义Rowkey规则

在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取
kikiki2·2024-02-15 06:39

基于Apache Flink的实时计算引擎Blink在阿里搜索中的应用

阿里巴巴是世界上最大的电子商务零售商。我们在2015年的年销售额总计3940亿美元，超过eBay和亚马逊之和。阿里巴巴搜索(个性化搜索和推荐平台)是客户的关键入口，并承载了大部分在线收入，因此搜索基础架构团队需要不断探索新技术来改进产品。在电子商务网站应用场景中，什么能造就一个强大的搜索引擎?答案就是尽可能的为每个用户提供实时相关和准确的结果。同样一个不容忽视的问题就是阿里巴巴的规模，当前很难找到
weixin_34186950·2024-02-15 01:50

基于 Apache Flink 的实时计算数据流业务引擎在京东零售的实践和落地

内容主要包括五个方面：京东零售实时计算的现状实时计算框架场景优化：TopN场景优化：动线分析场景优化：FLINK一站式机器学习点击查看更多技术内容一、京东零售实时计算的现状1.1现状技术门槛高、学习成本大
Apache Flink·2024-02-15 01:50

Flink在实时搜索引擎领域的应用

ApacheFlink是一个流处理框架，它可以处理大规模的流数据，并提供了实时计算能力。在实时搜索引擎领域，Flink可以用于实时处理搜索关键词、计算搜索结
禅与计算机程序设计艺术·2024-02-15 01:46

实习语雀文章 源码分析

React可以抽象的看成一个公式：UI=f(state)。函数f是React和基于React的代码，传给函数的参数就是state，最终在页面上绘制出来的UI是函数运行结果。作为state管理的重要方法，setState至关重要，在使用过程中发现该方法的几个关键点：1.setState不会立刻改变React组件中state的值组件读取状态时使用this.state，更新状态使用this.setSta
Chasingcar_501·2024-02-14 20:36

Gunicorn源码分析（四）入口

前面的博客已经将Gunicorn的核心流程给讲完了，剩下的最后其实就是Gunicorn的启动入口了下面是Gunicorn入口函数：defrun():"""\The``gunicorn``commandlinerunnerforlaunchingGunicornwithgenericWSGIapplications."""fromgunicorn.app.wsgiappimportWSGIAppli
喵帕斯0_0·2024-02-14 19:46

基于Kafka的实时计算引擎如何选择？

以Flink和Spark为首的实时计算引擎，成为实时计算场景的重点考虑对象。那么，今天就来聊一聊基于Kafka的实时计算引擎如何选择？FlinkorSpark？2.为何需要实时计算？
java菜·2024-02-14 19:37

spring步步前行(IOC)-整理篇

从之前的ioc部分的源码分析等，我们对spring-ioc部分的相关已经有了一部分认识和了解，但是还是有很多人对里面一些部分的理解还是很模糊，好比既然有了beanFactory那factoryBean是干什么的
7868758c6196·2024-02-14 16:16

【Canal源码分析】Canal Instance启动和停止

一、序列图1.1启动instance启动.png1.2停止instance停止.png二、源码分析2.1启动这部分代码其实在ServerRunningMonitor的start()方法中。
端木轩·2024-02-14 15:42

Flink教程

1.Flink运行框架1.1运行组件：作业管理器（JobManager）:请求slot资源管理器（ResourceManager）:管理slot任务管理器（TaskManager）:提供slot，执行任务分发器
July2333·2024-02-14 15:20

02-flink基本架构

02-flink基本架构flink基本组件栈flink基本组件栈.pngAPI&Libraries同时提供了流计算和批计算的接口，同时在此基础上抽象出不同的应用类型的组件库Runtime核心层主要负责对上层不同接口提供基础服务
蜗牛写java·2024-02-14 13:54

Flink基础系列34-Flink CEP简介

一.什么是CEP复杂事件处理（ComplexEventProcessing，CEP）FlinkCEP是在Flink中实现的复杂事件处理（CEP）库CEP允许在无休止的事件流中检测事件模式，让我们有机会掌握数据中重要的部分一个或多个由简单事件构成的事件流通过一定的规则匹配
只是甲·2024-02-14 08:30

ButterKnife使用方式源码分析+手写一个IOC注解框架

概述我在之前的一篇文章xUtils源码分析+手写一个IOC注解框架讲过IOC的概念，并自己实现过一个IOC注解框架。其实这也是根据xUtils框架的源码分析而写的，是基于注解+反射来实现事件注入的。
碧云天EthanLee·2024-02-14 05:58

Netty Review - ServerBootstrap源码解析

文章目录概述源码分析小结概述ServerBootstrapbootstrap=newServerBootstrap();bootstrap.group(bossGroup,workerGroup).channel
小小工匠·2024-02-14 04:39

Netty Review - NioServerSocketChannel源码分析

文章目录概述入口NioServerSocketChannel类继承关系实例化过程中做的事情小结概述入口ChannelFuturechannelFuture=serverBootstrap.bind(9000).sync();我们进入bind方法/***Createanew{@linkChannel}andbindit.*/publicChannelFuturebind(intinetPort){/
小小工匠·2024-02-14 02:10

Flink 1.7.0 安装、配置与使用

本地单机安装ApacheFlink是一个面向分布式数据流处理和批量数据处理的开源计算平台，它能够基于同一个Flink运行时，提供支持流处理和批处理两种类型应用的功能。
编码前线·2024-02-13 22:57

NSQ源码分析之概述

罗道文的私房菜消息队列在互联网公司使用非常普遍，因此也促使我去学习研究消息队列的原理以及细节问题；之前也有接触过消息队列，最主要就是在异步处理方面，当然消息队列还解耦，流量削峰等功能；目前消息队列产品也比较多，例如kafka，ActiveMQ，RabbitMQ，NSQ等等；之前原本打算看kafka，但是处于学习成本(kafka是scala编写，之前scala接触的比较少)，所以就先不看kafka，
faunjoe·2024-02-13 12:29

Contractfuzzer 框架分析（源码分析）

最近阅读了Contractfuzzer的源代码，总结了Contractfuzzer的系统框架图Contractfuzzer是第一篇智能合约fuzz的文章，其主要分为三个模块，分别是测试用例生成模块、交易自动化发送模块和交易执行与漏洞检测模块。一、测试用例生成模块（对应文件Contract_fuzzer）测试用例生成模块主要负责测试用例的生成以及接收来自geth-cf的测试结果，并对测试结果进行处理
区区小块·2024-02-13 11:24

MySQL • 源码分析 • SHUTDOWN过程

摘要：ORACLE中的SHUTDOWNMySQLSHUTDOWNLEVEL暂时只有一种，源码中留了LEVEL的坑还没填在此借用Oracle的SHUTDOWNLEVEL分析OracleSHUTDOWNLEVEL共有四种：ABORT、IMMEDIATE、NORMAL、TRANSACTIONALABORT立即结束所有SQL回滚未提交事务断开所有用户连ORACLE中的SHUTDOWNMySQLSHUTDO
暖夏未眠丶·2024-02-13 11:58

Flink SQL实战演练之CDC Connector

简介：公司实时项目组处理的业务数据以前是由业务团队把数据push到rabbitmq，然后我们通过flink转运到kafka，然后再做实时计算的，由于新业务逻辑变化会较大，导致推送过来的数据偶尔会出现偏差
Coder小咚·2024-02-13 10:43

Spring AOP从零单排-织入时期源码分析

问题：SpringAOP代理中的运行时期，是在初始化时期织入还是获取对象时期织入？织入就是代理的过程，指目标对象进行封装转换成代理，实现了代理，就可以运用各种代理的场景模式。何为AOP简单点来定义就是切面，是一种编程范式。与OOP对比，它是面向切面，为何需要切面，在开发中，我们的系统从上到下定义的模块中的过程中会产生一些横切性的问题，这些横切性的问题和我们的主业务逻辑关系不大，假如不进行AOP，会
油腻的Java·2024-02-13 07:10

Netty Review - NioEventLoopGroup源码解析

文章目录概述类继承关系源码分析小结概述EventLoopGroupbossGroup=newNioEventLoopGroup(1);EventLoopGroupworkerGroup=newNioEventLoopGroup
小小工匠·2024-02-13 07:03

iOS-底层原理 ：alloc & init & new 源码分析（二）

（iOS底层原理文章汇总）（iOS资料大全）在分析alloc源码之前，先来看看一下3个变量内存地址和指针地址区别：分别输出3个对象的内容、内存地址、指针地址，下图是打印结果结论：通过上图可以看出，3个对象指向的是同一个内存空间，所以其内容和内存地址是相同的，但是对象的指针地址是不同的%p->&p1：是对象的指针地址，%p->p1：是对象指针指向的的内存地址这就是本文需要探索的内容，alloc做了什
ios南方·2024-02-13 02:27

不学无数——Mybatis解析判断表达式源码分析

Mybatis解析判断表达式源码分析在我们开发过程中用Mybatis经常会用到下面的例子Mapper如下MaptestArray(@Param("array")String[]array);XMl中的sql
不学无数的程序员·2024-02-12 23:27

ZGC源码分析（6）- 日志分析

根据ZGC运行的情况，截取部分关键的日志信息。分析如下：ZGC初始化信息这一部分主要是ZGC初始化的状态。从日志我们看出JVM的版本，是否支持NUMA，大爷内存等。还有CPU的数目为8，GC工作线程数位5，并发工作线程数为1。整个堆空间15279MB（接近15GB，实际上我设置了15GB的堆空间，这里有效地为14.9GB），预分配的内存为256M[2018-12-17T14:15:10.878+0
躺在石头上吐泡泡·2024-02-12 18:47

Flink第二篇：集群搭建

Flink集群搭建.Flink可以选择的部署方式有：Local、Standalone（资源利用率低）、Yarn、Mesos、Docker、Kubernetes、AWS。
菜鸟Coders·2024-02-12 17:22

Hbase - 自定义Rowkey规则

在Flink中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢，这时候我们就可以定制TableInputFormat来实现我们的需求了，我们还可以采用Flink的DataSet的方式读取
大猪大猪·2024-02-12 15:45

Flink 指标（一）

Flink自带一个度量系统，允许收集和公开指标到外部系统。
Alex90·2024-02-12 14:55

【大数据】Flink on Kubernetes 原理剖析

FlinkonKubernetes原理剖析1.基本概念2.架构图3.核心概念4.架构5.JobManager6.TaskManager7.交互8.实践8.1SessionCluster8.2JobCluster9
G皮T·2024-02-12 13:27

浅谈Java集合丨底层源码解析

1、Map一、背景二、Map家族三、HashMap、Hashtable等四、HashMap底层数据结构2、List一、List包括的子类二、ArrayList三、ArrayList源码分析四、LinkedList
Java__JJ·2024-02-12 10:08

FLink发布任务

/bin/flinkrun-corg.apache.flink.streaming.examples.socket.SocketWindowWordCountSocketWindowWordCount.jar
卡门001·2024-02-12 09:06

CC1-LazyMap利用链-源码分析

本篇文章是基于CC1利用链的，本质其实都是一样，无非就是使用了LazyMap类的get方法来触发利用链，在看本篇文章之前，需要先弄明白CC1第一条链的原理，弄明白了第一条链，这条链相当于理解了百分之90。如果不明白CC1的第一条链，可以先阅读我的这篇文章：https://blog.csdn.net/weixin_46367450/article/details/132274219文章目录漏洞影响范
yuan_boss·2024-02-12 09:53

彻底扒光QQ音乐，批量下载音乐和MV文件

计划会员到期前下载一些音乐文件，继续针对QQ音乐网站源码分析和歌曲下载链接的进行研究。平时通过APP和软件播放歌曲也是趋势，所以在QQ音乐Web网站显示的歌曲数量有限。但是还是可以下载一些歌曲。
超级小刀-技术·2024-02-12 08:49

DataX源码分析 reader

系列文章目录一、DataX详解和架构介绍二、DataX源码分析JobContainer三、DataX源码分析TaskGroupContainer四、DataX源码分析TaskExecutor五、DataX
shandongwill·2024-02-12 07:29

SpringBean生命周期是怎样的？

文章目录注意事项环境源码分析Demo.javaClassPathXmlApplicationContextAbstractApplicationContextrefreshfinishBeanFactoryInitializationDefaultListableBeanFactorypreInstantiateSingletonsAbstractBeanFactorygetBeandoGetBe
后端开发萌新·2024-02-12 04:39

[1132]Flink与Kafka版本对应关系

以下为Flink和Kafka的版本对照表Flink版本Kafka版本1.12.X2.4.11.11.X2.4.11.10.X2.2.11.9.X2.2.01.8.X2.0.11.7.X2.0.10.10
周小董·2024-02-12 01:47

【Flink】 Flink与Kafka版本对应关系

1.概述转载：Flink与Kafka版本对应关系转载这个主要是上次做flinkkafka版本升级，忘记记录了。
九师兄·2024-02-12 01:17

【Flink异常】flink与kafka版本匹配: NetworkClient$DefaultMetadataUpdater.handleServerDisconnect

文章目录1.异常详情2.报错原因及解决办法3.Flink与Kafka的版本匹配1.异常详情使用flink1.11的kafkaconnector读取0.9版本的kafka报错：[10:49:12:644]
search-lemon·2024-02-12 01:17

Flink Maven项目兼容多版本Kafka

主要有两种方法可以解决：修改jar包内部的包名或者使用自定义classloaderFlink需要导入kafka-clients来支持对kafka的生产和消费。
weixin_30855099·2024-02-12 01:47

freertos 源码分析五 任务调度一

vTaskStartScheduler创建空闲进程，调用适配xPortStartScheduler();voidvTaskStartScheduler(void){xReturn=xTaskCreate(prvIdleTask,configIDLE_TASK_NAME,configMINIMAL_STACK_SIZE,(void*)NULL,portPRIVILEGE_BIT,&xIdleTask
yvee·2024-02-11 23:13
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他