深入理解flink

深入理解HTTPS原理：保障通信安全的加密卫士

标题：深入理解HTTPS原理：保障通信安全的加密卫士1.引言随着网络的不断发展，数据的安全性越来越受到重视。
一休哥助手·2024-01-22 10:00

flink if函数false时对字符串做阶段的bug

背景flink官网对if函数就是我们正常的理解我们之前在使用flink1.12时候也没有发现问题，但是最近一个1.15的任务出现了一个bug本来应该返回cdefg，但是返回了cdeif(false,'abc
这个程序猿可太秀了·2024-01-22 10:25

01-深入理解JNI

目录1JNI概述2学习JNI的实例：MediaPlayer2.1加载JNI库2.2JNI层MediaPlayer的分析2.3注册JNI函数2.3.1静态注册2.3.2动态注册1JNI概述JNI是JavaNativeInterface的缩写，中文译为“Java本地调用”。通俗地说，JNI是一种技术，通过这种技术可以做到以下两点：a).Java程序中的函数可以调用Native语言写的函数，Native
Snasph·2024-01-22 09:55

32位AT&T风格汇编语言输出数组中最大值

我的代码是参考了《深入理解程序设计使用Linux汇编语言》这本书里边的代码。
zhaoseaside·2024-01-22 09:23

深入理解java虚拟机第三版怎么样?第三版与第二版对比

https://www.zhihu.com/question/363888117自从《深入理解Java虚拟机（第3版）》发行后，我看到了很多人提出了相同的问题：第三版值不值得买？
yygr·2024-01-22 09:18

《深入理解Java虚拟机：JVM高级特性与最佳实践(第3版) 周志明》 - 第12章代码示例

背景最近在看《深入理解Java虚拟机：JVM高级特性与最佳实践(第3版)周志明》这本书，书中有些代码示例是为了让读者理解作者表达的意思，但不是完整的代码示例，所以针对这些不完整的代码，自己动手写出完整的代码示例
太自由·2024-01-22 09:45

高频面试题-请把Java垃圾回收器说清楚！

深入理解Java虚拟机一书中写到：如果说收集算法是内存回收的方法论，那么垃圾收集器就是内存回收的具体实现。不同的时代，出现了不同了垃圾收集器，它们被不断的应用在各个版本的Java虚拟机中。
敲代码的程序狗·2024-01-22 09:14

Flink（四十九）—— Flink on Yarn / K8s 原理剖析及实践

本文根据ApacheFlink进阶篇系列直播课程整理而成，由阿里巴巴技术专家周凯波（宝牛）分享，主要介绍FlinkonYarn/K8s的原理及应用实践，文章将从Flink架构、FlinkonYarn原理及实践
weixin_42073629·2024-01-22 08:03

flink on yarn 三种部署模式的相关命令及其差异

官方文档：https://flink.apache.org/2020/07/14/application-deployment-in-flink-current-state-and-the-new-application-mode
bigdata-rookie·2024-01-22 08:03

Flink on YARN（下）：常见问题与排查思路

杨弢（搏远），阿里巴巴计算平台事业部技术专家，ApacheHadoopCommitter，目前专注于YARN、Flink、YuniKorn等开源项目的资源调度方向。
Apache Flink·2024-01-22 08:33

Flink on yarn 实时日志收集到 kafka 打造日志检索系统

点击上方"JasonLee实时计算",选择"设为星标"再也不用担心错过重要文章后台回复"监控",获取grafana监控Flink最新的模板背景在Flinkonyarn的模式下,程序运行的日志会分散的存储在不同的
JasonLee实时计算·2024-01-22 08:33

一张图轻松掌握 Flink on YARN 基础架构与启动流程

杨弢（搏远），阿里巴巴计算平台事业部技术专家，ApacheHadoopCommitter，目前专注于YARN、Flink、YuniKorn等开源项目的资源调度方向。
zhisheng_blog·2024-01-22 08:02

flink部署模式（二）- yarn三种部署模式

基于flink1.15.0SessionModeonyarn开启flinkyarn-session集群.
PONY LEE·2024-01-22 08:32

flink部署模式介绍

Flink为各种场景提供了不同的部署模式，主要有以下三种，它们的区别主要在于：集群的生命周期以及资源的分配方式；应用的main方法到底在哪里执行——客户端（Client）还是JobManager。
201001070·2024-01-22 08:32

Flink背景

数仓简介在信息爆炸的时代，为了从海量数据中洞察业务价值，驱动运营决策，企业通常会构建用于数据分析的数据仓库。数据仓库的数据一般来源于多个分散的、异构的数据源，通过数据集成技术将数据整合在一起，消除数据孤岛，便于后续的分析。实时数仓近年来，面向分析的数据系统发展迅速，各种新型的OLAP系统开始显露锋芒，数据湖和Lakehouse的概念也变得炙手可热。然而，数据集成仍然是人们通往数据分析之路上的主要障
201001070·2024-01-22 08:31

flink1.13环境搭建

具体安装步骤如下：1.1下载安装包进入Flink官网，下载1.13.0版本安装包flink-1.13.0-bin-scala_2.12.tgz，注意此处选用对应scala版本为scala2.12的安装包
201001070·2024-01-22 08:31

[flink]一Flink部署|配置文件|提交作业|部署模式|独立模式部署|yarn模式部署

、集群部署集群规划节点服务器hadoop1hadoop2hadoop3hadoop4角色JobManagerTaskManagerTaskManagerTaskManagerTaskManager1、flink-conf.yaml
胖胖学编程·2024-01-22 08:30

PTA题目：递增有序顺序表的插入

实验目的：1、掌握线性表的基本知识2、深入理解、掌握并灵活运用线性表。3、熟练掌握线性表的存储结构及主要运算的实现已知顺序表L递增有序，将X插入到线性表的适当位置上，保证线性表有序。。
Tajang·2024-01-22 08:30

Flink集群部署到YARN上的提交流程

第一步:Flink任务提交后，Client向HDFS上传Flink的Jar包和配置第二步:之后向YarnResourceManager提交任务，ResourceManager分配Container资源并通知对应的
疯子1313·2024-01-22 08:00

【Flink】Flink on Yarn 翻译 使用 hdfs jar yarn.provided.lib.dirs

/bin/flinkrun-application-tyarn-application\-Dyarn.provided.lib.dir
九师兄·2024-01-22 08:59

【Flink】部署模式-会话模式/单作业模式/应用模式/Yarn模式/独立模式/K8s模式

目录部署模式会话模式（SessionMode）单作业模式（Per-JobMode）应用模式（ApplicationMode）结合资源提供者（ResourceProvider）下的部署模式独立模式（Standalone）会话模式部署单作业模式部署应用模式部署YARN模式相关准备和配置会话模式/应用模式/单作业模式NativeKubernetes部署模式在一些应用场景中，对于集群资源分配和占用的方式，
清清清清风·2024-01-22 08:59

Dinky安装和部署

概述Dinky是一个开箱即用、易扩展，以ApacheFlink为基础，连接OLAP和数据湖等众多框架的一站式实时计算平台，致力于流批一体和湖仓一体的探索与实践。
Appreciate(欣赏)·2024-01-22 08:28

13.Flink之Flink on Yarn/K8s 原理剖析及实践

Flink架构概览Flink架构概览–Job用户通过DataStreamAPI、DataSetAPI、SQL和TableAPI编写Flink任务，它会生成一个JobGraph。
吃胖点儿·2024-01-22 08:58

史上最全深度解析Flink内存管理--大数据技术

目前，大数据计算引擎主要使用Java或基于JVM的编程语言实现的，例如ApacheHadoop，ApacheSpark，ApacheDrill，ApacheFlink等。
大数据学习僧·2024-01-22 08:50

flink内存模型

flink内存管理jvm中java对象模型缺陷flink自主管理内存来解决jvm的几个问题早期flink内存模型当前flink内存模型补充内容flink将对象序列化存储会不会存在高昂的序列化和反序列化代价
小路遥同学·2024-01-22 08:48

03-Flink内存模型

如何处理缓存和高效处理1自主管理内存Flink从一开始就选择了使用自主的内存管理，避开了JVM内存管理在大数据场景下的问题，提升了计算效率.1.1JVM内存管理的不足1.1.1有效数据密度低存储：对象头
情深@骚明·2024-01-22 08:48

flink结合Yarn进行部署

1.什么是Yarn模式部署Flink独立（Standalone）模式由Flink自身提供资源，无需其他框架，这种方式降低了和其他第三方资源框架的耦合性，独立性非常强。
201001070·2024-01-22 08:17

Flink（十四）【Flink SQL（中）查询】

FlinkSQL查询环境准备：#1.先启动hadoopmyhadoopstart#2.不需要启动flink只启动yarn-session即可/opt/module/flink-1.17.0/bin/yarn-session.sh-d
让线程再跑一会·2024-01-22 08:14

Flink是如何管理内存的

在讲Flink管理内存之前要了解下Flink为什么要自己实现内存管理一、Flink为什么要自己实现内存管理在大数据领域，大多数数据相关的开源框架（Hadoop、Spark、Storm）都是基于JVM运行的
Relian哈哈·2024-01-22 08:13

【内存模型】Flink内存模型：从宏观（Flink内存模型）、微观（Flink内存结构）、数据传输等角度分析Flink的内存管理

我们首先先从Flink的不同角色看一下Flink的内存管理，然后在微观的看一下Flink的内存管理器和数据模型，最后再观察下数据传输时的内存管理。
roman_日积跬步-终至千里·2024-01-22 08:11

【内存管理】flink内存管理(一)：内存管理概述：flink主动管理内存原理、flink内存模型

文章目录一.flink为什么自己管理内存1.处理大数据时JVM内存管理的问题2.flink主动管理内存逻辑2.1.Flink内存管理方面2.2.序列化、反序列化说明3.Flink主动管理内存的好处二.Flink
roman_日积跬步-终至千里·2024-01-22 08:11

flink内存管理（二）：MemorySegment的设计与实现:（1）架构、（2）管理堆内/外内存、（3）写入/读取内存、（4）垃圾清理器

MemorySegment管理堆内存2.基于MemorySegment管理堆外内存3.基于Unsafe管理MemorySegment4.写入和读取内存数据5.创建MemoryCleaner垃圾清理器在flink
roman_日积跬步-终至千里·2024-01-22 08:11

Flink TaskManager 内存管理机制介绍与调优总结

作者：董伟柯，腾讯CSIG高级工程师概要Flink的新版内存管理机制，要追溯到2020年初发布的Flink1.10版本。
腾讯云大数据·2024-01-22 08:09

flink基础概念之什么是时间语义

什么是时间语义Flink支持三种不同的时间语义，以便处理流式数据中的事件时间、处理时间和摄入时间。
吃草料的羊·2024-01-22 08:38

TaskExecutor统一内存配置(FLink FLIP-49翻译)

文章目录目的：(1)解决流、批配置差异大(2)解决Streaming方式RocksDB配置复杂(3)去掉复杂、不确定、难以理解的配置公共接口修改建议统一流处理和批处理内存管理内存使用场景及特点统一显式和隐式内存申请将托管的堆上内存池和堆外内存池分离MemoryPools和配置方式框架堆内存（FrameworkHeapMemory）用户堆内存（TaskHeapMemory）用户堆外内存（TaskOf
LS_ice·2024-01-22 08:38

flink内存管理（三）：MemorySegment内存使用场景：托管内存与网络内存

MemoryManager实例3.算子使用通过MemoryManager使用内存4.ManagedMemory内存空间申请流程二.NetworkBuffer内存申请与使用1.NetworkBuffer构造器在Flink
roman_日积跬步-终至千里·2024-01-22 08:35

flink基本概念

1.Flink关键组件:这里首先要说明一下“客户端”。其实客户端并不是处理系统的一部分，它只负责作业的提交。
上官沐雪·2024-01-22 08:05

深入理解与运用Lombok的@Cleanup注解：自动化资源管理利器

前言在Java编程中，正确地管理和释放诸如文件流、数据库连接等资源至关重要。若处理不当，可能会引发内存泄漏或系统资源耗尽等问题。为此，Lombok库提供了一个名为@Cleanup的便捷注解，它允许我们以简洁且安全的方式自动关闭实现了java.io.Closeable或java.lang.AutoCloseable接口的对象。接下来，我们将通过详细解读和示例来探索这个注解的作用、属性以及用法。1.1
李少兄·2024-01-22 07:53

高通平台Android Wi-Fi P2P连接--Go协商分析

如下的流程图清晰地给出了答案（图片取自于深入理解Android：WIFI模块）：Go协商图如上图可以知道：·
专业开发者·2024-01-22 06:29

DMA/DMA2D概念

STM32】DMA原理，步骤超细详解，一文看懂DMA_Z小旋的博客-CSDN博客_dmastm32对DMA请求如何产生的理解_pangyinglong的博客-CSDN博客_dma请求【STM32】STM32之深入理解
Yuule·2024-01-22 06:27

深入理解@PostConstruct注解

一、概述@PostConstruct注解很多人以为是Spring提供的。其实是Java自己的注解。Java中该注解的说明：@PostConstruct该注解被用来修饰一个非静态的void（）方法。被@PostConstruct修饰的方法会在服务器加载Servlet的时候运行，并且只会被服务器执行一次。PostConstruct在构造函数之后执行，init（）方法之前执行。通常我们会是在Spring
善思者_tin·2024-01-22 05:27

Flink 源码之 Window Slice

Flink源码分析系列文档目录请点击：Flink源码分析系列文档目录前言Windowslice是Flink对SQLwindow聚合的一种优化方式。
AlienPaul·2024-01-22 04:29

flinkcdc 3.0 尝鲜

本文会将从环境搭建到demo来全流程体验flinkcdc3.0包含了如下内容flink1.18standalone搭建doris1fe1be搭建整库数据同步测试各同步场景从检查点重启同步任务环境搭建flink
Antg·2024-01-22 03:51

Flink SQL Window源码全解析

文章目录一、概述二、Window分类1、TimeWindow与CountWindow2、TimeWindow子类型TumbleWindow（翻转窗口）HopWindow（滑动窗口）SessionWindow（会话窗口）三、Window分类及整体流程四、创建WindowOperator算子五、WindowOperator处理数据图解六、WindowOperator源码调试1、StreamExecGr
王知无·2024-01-22 03:07

深入理解JavaScript箭头函数

‍个人主页：《爱蹦跶的大A阿》当前正在更新专栏：《VUE》、《JavaScript保姆级教程》、《krpano》、《krpano中文文档》✨前言函数是JavaScript中非常重要的一个组成部分,可以封装代码逻辑,提高代码的复用性和模块化。自ES6开始,JavaScript新增了箭头函数,提供了一个更简洁的函数定义语法。箭头函数作为一种新的函数定义方式,有哪些特点和使用场景呢?本文将详细地剖析箭头
爱蹦跶的大A阿·2024-01-22 01:59

[AIGC] 深入理解Java并发编程：从入门到进阶

深入理解Java并发编程：从入门到进阶引言在计算机领域中，针对多核处理器的高并发需求，Java并发编程成为了一项重要的技能。
程序员三木·2024-01-22 01:57

深入理解linux内核-内存管理-内存管理

RAM的某些部分永久分配给内核，来存放内核代码及静态内核数据结构。RAM的其余部分称为动态内存，这不仅是进程所需的宝贵资源，也是内核本身所需的宝贵资源。页框管理Intel的Pentinum处理器可采用两种不同的页框大小：4KB，4MB（如PAE被激活，则为2MB）。Linux采用4KB页框大小作为标准的内存分配单元。(1).由分页单元引发的缺页异常很容易得到解释，或由于请求的页存在但不允许进程对其
raindayinrain·2024-01-21 21:47

支持微服务架构的流数据处理

之前说过消息传输系统一方面将生产者和消费者解耦，另一方面又有足够高的吞吐量，并且能够满足像Flink这样的高性能流
afansdie·2024-01-21 19:49

《月亮与六便士》读书随笔

今日打卡《月亮与六便士》，看完之后意犹未尽，就赶紧看了更直观的书评去再深入理解故事背景和用意。
赛_fd97·2024-01-21 19:19

基于PiflowX构建MySQL和Postgres的Streaming ETL

说明：案例来自flinkcdc官方。
PiflowX·2024-01-21 18:07
上一页 26 27 28 29 30 31 32 33 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他