E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
#flink核心概念
从零开始快速构建自己的
Flink
应用
本文介绍如何在mac下快速构建属于自己的
Flink
应用。
程序员白总
·
2024-02-20 09:55
flink
flink
大数据
Flink
SQL
Flink
SQL来源:B站尚硅谷sql-client准备TableAPI和SQL是最上层的API,在
Flink
中这两种API被集成在一起,SQL执行的对象也是
Flink
中的表(Table),所以我们一般会认为它们是一体的
魅美
·
2024-02-20 08:10
大数据基础
笔记
flink
sql
大数据
【机器学习】是什么?
以下是机器学习的一些
核心概念
dami_king
·
2024-02-20 08:13
机器学习
Docker中部署
flink
集群的两种方式
文章目录一、概述二、准备工作三、方式一四、方式二1、准备配置文件2、执行docker命令一、概述本文将通过2种方式在docker中部署
flink
standalone集群,集群中共有4个节点,分别是1个jobManager
尐葮阿譽
·
2024-02-20 08:02
Java基础
docker
flink
容器
Docker基础知识
核心概念
docker主机(Host):安装了Docker程序的机器(Docker直接安装在操作系统之上);docker客户端(Client):连接docker主机进行操作;
笨笨哒2018
·
2024-02-20 07:30
【
Flink
入门修炼】1-4
Flink
核心概念
与架构
前面几篇文章带大家了解了
Flink
是什么、能做什么,本篇将带大家了解
Flink
究竟是如何完成这些的,
Flink
本身架构是什么样的,让大家先对
Flink
有整体认知,便于后期理解。
大数据王小皮
·
2024-02-20 07:24
Flink
入门修炼
flink
架构
大数据
深入微服务-Nacos 配置中心
核心概念
及实战
服务注册与发现SpringCloudEureka之基础深入微服务-服务注册与发现SpringCloudEureka之高可用以及核心原理深入微服务-Nacos基础及NacosServer搭建深入微服务-Nacos
核心概念
及服务发现实战深入微服务
janyxe
·
2024-02-20 07:48
SpringCloud
Nacos
spring
微服务
Hbase - 自定义Rowkey规则
>在
Flink
中我们有时候需要分析数据1点到2点的范围,可是经过Region又比较慢,这时候我们就可以定制`TableInputFormat`来实现我们的需求了,我们还可以采用
Flink
的`DataSet
kikiki5
·
2024-02-20 07:17
Kafka的介绍
文章目录一、介绍二、消息队列通信的模式三、特性四、使用场景五、
核心概念
一、介绍kafka是一个分布式的发布订阅消息系统基于Zookeeper协调最初由Linkedin公司开发,于2010年贡献给了Apache
kimi-001
·
2024-02-20 07:45
Kafka
kafka
分布式
消息队列-RabbitMQ:MQ作用分类、RabbitMQ
核心概念
及消息生产消费调试
1、MQ的相关概念1)什么是MQMQ(messagequeue),从字面意思上看,本质是个队列,FIFO先入先出,只不过队列中存放的内容是message而已,还是一种跨进程的通信机制,用于上下游传递消息。在互联网架构中,MQ是一种非常常见的上下游“逻辑解耦+物理解耦”的消息通信服务。使用了MQ之后,消息发送上游只需要依赖MQ,不用依赖其他服务2)为什么要用MQ流量消峰举个例子,如果订单系统最多能处
666-LBJ-666
·
2024-02-20 07:44
RabbitMQ
rabbitmq
消息队列
spring
boot
解决:
FLINK
1.12.0 Upsert Kafka SQL Connector 无法识别scan.startup.mode的问题
问题描述:在升级
Flink
1.12.0以后UpsertKafkaSQLConnector不支持scan.startup.mode、scan.startup.specific-offsets、scan.startup.timestamp-millis
zengjinbo
·
2024-02-20 07:43
Flink
flink
java
实时大数据
【天衍系列 05】
Flink
集成KafkaSink组件:实现流式数据的可靠传输 & 高效协同
创建数据源5.将数据流添加到KafkaSink6.内部工作机制04KafkaSink参数配置05KafkaSink应用依赖06KafkaSink快速入门6.1包结构6.2项目配置6.3pom文件6.4
Flink
浅夏的猫
·
2024-02-20 07:41
Flink专栏
flink
大数据
kafka
java
apache
【
Flink
】ClassNotFoundException: org.apache.hadoop.conf.Configuration
问题背景在
Flink
的sql-client客户端中执行连接hive的sql代码时出现如下错误,版本
Flink
1.13.6
Flink
SQL>createcatalogtestwith(>'type'='hive
一杯咖啡半杯糖
·
2024-02-20 07:38
Flink实战
flink
hadoop
sql
Flink
Sql一个简单的测试程序
Flink
Sql一个简单的测试程序以下是一个简单的
Flink
SQL示例,展示了如何使用
Flink
TableAPI和
Flink
SQL进行基本的数据流处理。
公子乂
·
2024-02-20 07:36
java
flink
flink
sql upsert kafka对于changelogNormalize state解读
flink
sqlupsertkafka对于changelogNormalizestate解读原文:https://www.jianshu.com/p/5ffe5aa0dc59这里说一点:
flink
sql-upsertkafka
minchowang
·
2024-02-20 07:36
Flink
2024.2.19 阿里云
Flink
一、
Flink
基本介绍Spark底层是微批处理,
Flink
底层则是实时流计算流式计算特点:数据是源源不断产生,两大问题,乱序和延迟Stateful:有状态
Flink
的三个部分Source:Transactions
白白的wj
·
2024-02-20 07:05
flink
大数据
生产环境下,应用模式部署
flink
任务,通过hdfs提交
前言 通过通过yarn.provided.lib.dirs配置选项指定位置,将
flink
的依赖上传到hdfs文件管理系统1.实践 (1)生产集群为cdh集群,从cm上下载配置文件,设置环境exportHADOOP_CONF_DIR
但行益事莫问前程
·
2024-02-20 07:04
flink
flink
Flink
容错机制
目录
Flink
容错机制一,检查点:二,保存点:
Flink
容错机制一,检查点:在出现故障时,我们将系统重置回正确状态,以确保数据的完整性和准确性。
佛系爱学习
·
2024-02-20 07:30
flink知识点
flink
大数据
Flink
Upsert Kafka SQL Connector 介绍
在
Flink
1.11中,能够通过
flink
-cdc-connectors项目提供的changelog-jsonformat来实现该性能。
大数据AI
·
2024-02-20 07:00
大数据从入门到精通
flink
kafka
Flink
Catalog 解读与同步 Hudi 表元数据的最佳实践
在当前的大数据格局中,Spark/Hive/
Flink
是最为主流的ETL或Strea
Laurence
·
2024-02-20 06:28
大数据专题
flink
catalog
hudi
metastore
hive
共用表
元数据
算法学习笔记 4-3 深搜(DFS)与广搜(BFS):初识问题状态空间 与 LeetCode真题(Java)
课件参考—开课吧《门徒计划》4-3深搜(DFS)与广搜(BFS):初识问题状态空间搜索的
核心概念
首先给大家拓展一个概念,这个概念就是我们学习搜索算法中非常重要的一环:这个问题求解树是一个抽象
小成同学_
·
2024-02-20 06:16
数据结构与算法
算法
leetcode
dfs
bfs
java
Vuex学习记录
Vuex统一管理的好处1.3什么样的数据适合存储在Vuex中二、Vuex的基本使用2.1创建Vuex项目视图式(版本:vue3+vuex4)命令式(版本:vue2+vuex3)可自定义选择版本三、Vuex的
核心概念
娃哈哈哈哈呀
·
2024-02-20 05:41
Vue
学习
前端
javascript
vue.js
vue数据驱动
概念:vue的
核心概念
就是数据驱动;所谓数据驱动指,视图是由数据驱动生成的,我们对视图的修改不会直接操作DOM,而是通过修改数据进行视图的更新。
super舒楠
·
2024-02-20 05:06
vue.js
javascript
前端
前端框架
以内存为核心的开源分布式存储系统
Tachyon为不同的大数据计算框架(如ApacheSpark,HadoopMapReduce,Apache
Flink
等)提供可靠的内存级的数据共享服务。
这次靠你了
·
2024-02-20 05:26
大数据
Tachyon
hdfs
大数据
K8S-7--K8s资源对象(API/pod探针/sevice/volume/Statefulset/DaemonSet/PV/PVC/)/结合ceph
一、K8s资源对象https://kubernetes.io/zh/docs/concepts/workloads/controllers/资源管理
核心概念
k8s的设计理念-分层架构:http://docs.kubernetes.org.cn
哈密瓜小贼
·
2024-02-20 05:53
k8s
kubernetes
docker
Java并发基础:SynchronousQueue全面解析!
核心概念
假如,有一个在线购物平台,其中有一个非常关键的部分是处理用户的支付请求,当用户点击“支付”按钮后,系统需要确保用户的支付请求能够被安全、快速地处理,并且一旦处
程序员古德
·
2024-02-20 03:46
Java并发基础
java
开发语言
Spring Cloud Alibaba 实战(八) - 审核业务的分布式事务处理实现
Github博客地址本文主要讲解RabbitMQ的介绍和安装,SpringCloudStream
核心概念
,SpringCloudAlibabaRocketMQ学习,异步消息推送与消费1审核业务的实现com
JavaEdge
·
2024-02-19 23:30
Java多线程系列——内存模型JMM
目录核心思想关键概念1.可见性2.原子性3.有序性工作原理并发工具类对并发编程的影响同步策略JMM的实践意义结语Java内存模型(JavaMemoryModel,JMM)是Java并发编程中的
核心概念
,
飞影铠甲
·
2024-02-19 23:00
Java
java
开发语言
c++
算法
从零开始快速构建自己的
Flink
应用
本文介绍如何在mac下快速构建属于自己的
Flink
应用。
·
2024-02-19 23:02
大数据flink教程开发流程
【JavaScript】原型链和继承
构建原型链构造函数与原型实例与原型链3.继承的实现原型链继承原型链的问题4.继承的最佳实践构造函数继承(经典继承)组合继承5.ES6中的类和继承6.总结在JavaScript中,原型链和继承是构建对象关系的
核心概念
之一
好久不见的流星
·
2024-02-19 22:20
JavaScript
javascript
原型模式
开发语言
前端
Kotlin之函数式和面向对象
函数式编程的
核心概念
如下:头等函数---把函数当做值使用,可以用变量保存它,把它当做参数传递或者当做其他函数的返回值。
Rnwater
·
2024-02-19 22:04
Kotlin自学
Kotlin学习
kotlin
K8s进阶之路-
核心概念
/架构:
架构:Master/NodeMaster组件--主控节点{负责集群管理(接收用户事件转化成任务分散到node节点上)}Apiserver:资源操作的唯一入口,提供认证、授权、API注册和发现等机制Scheduler:负责集群资源调度,按照预定的调度策略将Pod调度到相应的node节点上注:容器负载均衡部署Deployment控制器是之一Controller-manager:负责维护集群的状态,比如
是芸晗ya
·
2024-02-19 21:31
K8s进阶之路
学习笔记
kubernetes
架构
容器
flink
中的分区、分组与分流
flink
中的分区、分组与分流在
flink
中有三个看似相似实则完全不同的概念:分区、分组与分流下面逐个介绍三者的特点和区别。
时代新人0-0
·
2024-02-19 21:24
flink
flink
大数据
JAVA设计模式第九章:建造者模式
一.什么是建造者模式通过将对象的构建过程从表现层隔离出来,使得相同的构建过程可以用来创建不同的表现形式二.建造者模式解决了什么问题用于简化和优化复杂对象的创建过程,提高创建效率和代码可读性;三.
核心概念
Asparrow
·
2024-02-19 20:18
JAVA设计模式
java
设计模式
建造者模式
SpringBoot项目中使用AOP的方法
Spring的AOP技术主要有4个
核心概念
:Pointcut:切点,用于定义哪个方法会被拦截,例如execution(*cn.springcamp.springaop.service.*.*(..))Advice
小白不会java
·
2024-02-19 20:06
spring
spring
Flink
2.0 状态存算分离改造实践
本文整理自阿里云智能
Flink
存储引擎团队兰兆千在FFA2023核心技术(一)中的分享,内容关于
Flink
2.0状态存算分离改造实践的研究,主要分为以下四部分:
Flink
大状态管理痛点阿里云自研状态存储后端
·
2024-02-19 20:28
后端flink大数据
【
Flink
入门修炼】1-3
Flink
WordCount 入门实现
本篇文章将带大家运行
Flink
最简单的程序WordCount。先实践后理论,对其基本输入输出、编程代码有初步了解,后续篇章再对
Flink
的各种概念和架构进行介绍。
·
2024-02-19 20:28
flinkhadoop
阿里云实时计算企业级状态存储引擎 Gemini 技术解读
本文整理自阿里云
Flink
存储引擎团队李晋忠,兰兆千,梅源关于阿里云实时计算企业级状态存储引擎Gemini的研究,内容主要分为以下五部分:流计算状态访问的痛点企业级状态存储引擎GeminiGemini性能评测
·
2024-02-19 20:58
flink实时计算后端
FFA 2023 专场解读:AI 特征工程、数据集成
今年
Flink
ForwardAsia(以下简称FFA)重新回归线下,将于12月8-9日在北京望京凯悦酒店举办。
Flink
ForwardAsia2023大会议程已正式上线!
·
2024-02-19 20:57
flink大数据
Flink
Forward Asia 2023 主会场精彩回顾
2023年12月8日-9日,
Flink
ForwardAsia(FFA)峰会成功举行。
Flink
ForwardAsia是由Apache软件基金会官方授权、由阿里云承办的技术峰会。
·
2024-02-19 20:57
后端flink大数据实时计算
Flink
CDC 3.0 正式发布,详细解读新一代实时数据集成框架
一、
Flink
CDC概述
Flink
CDC是基于数据库日志CDC(ChangeDataCapture)技术的实时数据集成框架,支持了全增量一体化、无锁读取、并行读取、表结构变更自动同步、分布式架构等高级特性
·
2024-02-19 20:57
后端flink大数据实时计算
【
Flink
入门修炼】1-4
Flink
核心概念
与架构
前面几篇文章带大家了解了
Flink
是什么、能做什么,本篇将带大家了解
Flink
究竟是如何完成这些的,
Flink
本身架构是什么样的,让大家先对
Flink
有整体认知,便于后期理解。
·
2024-02-19 20:26
flink
系统调用的概念
在嵌入式开发、操作系统开发以及一般的系统编程中,系统调用是一个
核心概念
。它允许用户空间程序请求内核执行某些操作,如打开文件、读写数据、创建进程等。
小米人er
·
2024-02-19 20:56
我的博客
系统
Flink
-部署实践
Flink
部署Standalone模式安装解压缩
flink
-1.10.1-bin-scala_2.12.tgz,进入conf目录中。
魔笛Love
·
2024-02-19 20:52
flink
[
Flink
04]
Flink
部署实践
Flink
部署支持三种模式:本地部署、Standalone部署、
Flink
onYarn部署。
YoungerChina
·
2024-02-19 20:49
数据湖
flink
大数据
GlusterFS:开源分布式文件系统的深度解析与应用场景实践
GlusterFS简介与
核心概念
GlusterFS简介GlusterFS是一款开源、可扩展的分布式文件系统,专为大规模数据存储和管理而设计。它
超逮虾户
·
2024-02-19 19:20
企业级工具
开源
系统架构
java
- 工程实践 - 《QPS百万级的有状态服务实践》03 - 消息队列
本章我们介绍下各个消息队列的优缺点,并选择其中一个说下
核心概念
和原理。图1目前市面上的消息中间件优缺点和使用案例如下。
Bovinitwo
·
2024-02-19 19:56
构建工业级QPS百万级服务
系统架构
python
微服务
rocketmq
[
Flink
01] 了解
Flink
Flink
入门系列文章主要是为了给想学习
Flink
的你建立一个大体上的框架,助力快速上手
Flink
。学习
Flink
最有效的方式是先入门了解框架和概念,然后边写代码边实践,然后再把官网看一遍。
YoungerChina
·
2024-02-19 16:41
数据湖
flink
大数据
MVC 、DDD(domain-driven design,软件主动学习业务)、中台、Java SPI(Service Provider Interface)
文章目录引言I单体架构DDD实现版本1.1
核心概念
1.2DDD四层架构规范1.3案例1.4请求转发流程II领域服务调用2.1菱形对称架构2.2中台IIIJavaSPI3.1概念3.2实现原理3.3例子:
iOS逆向
·
2024-02-19 16:19
Java开发的深入浅出
mvc
使用
Flink
完成流数据统计 | 京东云技术团队
统计流程所有流计算统计的流程都是:1、接入数据源2、进行多次数据转换操作(过滤、拆分、聚合计算等)3、计算结果的存储其中数据源可以是多个、数据转换的节点处理完数据可以发送到一个和多个下一个节点继续处理数据
Flink
·
2024-02-19 15:51
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他