E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
flink高可用
大数据系列——
Flink
理论
概述
Flink
是一个对有界和无界数据流进行有状态计算的分布式处理引擎和框架,既可以处理有界的批量数据集,也可以处理无界的实时流数据,为批处理和流处理提供了统一编程模型,其代码主要由Java实现,部分代码由
mql007007
·
2024-01-23 16:11
大数据
flink
scala
剑指大数据——
Flink
学习精要(Java版)
剑指大数据——
Flink
学习精要(Java版)写在前面本书内容读者对象本书作者程序员硬核技术丛书。
小术晓术
·
2024-01-23 16:41
大数据
java
flink
Flink
从0到1学习——
Flink
不可以连续 Split(分流)?
前言今天上午被
Flink
的一个算子困惑了下,具体问题是什么呢?
zhisheng_blog
·
2024-01-23 16:40
大数据
Flink
流式计算
Flink
大数据
Java
Flink
基础介绍
Flink
基础介绍学习目标
Flink
基本介绍大数据发展历史
Flink
性能比较
Flink
在阿里的现状
Flink
集群安装伪分布式安装StandAlone模式安装StandAlone的
高可用
模式Yarn模式Yarn-Session
Flink
Baby 看你们浪。
·
2024-01-23 16:10
flink
spark
big
data
搭建
Flink
编程f的开发环境
职业技能大赛训练学习#搭建
Flink
编程f的开发环境
Flink
是一个以java和scala作为开发语言的开源大数据的一个项目对于我们初次使用者来说javamavengit这三个辅助工具必不可少java安装步骤
YaoYan..
·
2024-01-23 16:40
java
scala
Flink
编程——基础环境搭建
启动集群步骤3:提交作业(Job)步骤4:停止集群总结准备环境搭建我们先把电脑的准备环境给安装好,这样后面才能顺利的学习和时间因为后面可能用到的有:Kafka、MySQL、ElasticSearch等,另外像
Flink
不二人生
·
2024-01-23 16:40
#
Flink
编程
flink
大数据
〖Spring Cloud〗Eureka
高可用
服务注册中心详解
Eureka服务注册中心相关视频参考(来自动力节点)相关资料下载1、什么是Eureka?Netflix在涉及Eureka时,遵循的就是API原则.Eureka是Netflix的有个子模块,也是核心模块之一。Eureka是基于REST的服务,用于定位服务,以实现云端中间件层服务发现和故障转移,服务注册与发现对于微服务来说是非常重要的,有了服务注册与发现,只需要使用服务的标识符,就可以访问到服务,而不
牛仔码农code
·
2024-01-23 15:44
大型网站架构之分布式消息队列
实现高性能,
高可用
,可伸缩和最终一致性架构。是大型分布式系统
罗卜丝粉
·
2024-01-23 15:17
消息队列
分布式
架构
消息队列
大型网站架构系列:分布式消息队列
实现高性能,
高可用
,可伸缩和最终一致性架构。是大型分布式系统不可缺少的中间件。
lz0426001
·
2024-01-23 15:44
架构
.NET微服务框架
它支持在云、本地和边缘环境中构建
高可用
性、可扩展的服务,并且支持多种语言和平台,包括.NET、Java、Node.js和Docker。ASP.NETCore:这是一个跨平台的高
布·丁
·
2024-01-23 14:54
微服务
数据库
架构
大数据学习之
Flink
算子、了解(Source)源算子(基础篇二)
Source源算子(基础篇二)目录Source源算子(基础篇二)二、源算子(source)1.准备工作2.从集合中读取数据可以使用代码中的fromCollection()方法直接读取列表也可以使用代码中的fromElements()方法直接列出数据获取3.从文件中读取数据说明:4.从Socket读取数据(1)编写StreamWordCount(2)在Linux环境的主机bigdata1上,执行下列
十二点的泡面
·
2024-01-23 14:22
Flink
算子
大数据
学习
flink
大数据学习之
Flink
算子、了解(Transformation)转换算子(基础篇三)
Transformation转换算子(基础篇三)目录Transformation转换算子(基础篇三)三、转换算子(Transformation)1.基本转换算子1.1映射(Map)1.2过滤(filter)1.3扁平映射(flatmap)1.4基本转换算子的例子2.聚合算子(Aggregation)2.1按键分区(keyBy)2.2简单聚合2.3归约聚合(reduce)3.用户自定义函数(UDF)
十二点的泡面
·
2024-01-23 14:22
算子
Flink
大数据
学习
flink
大数据学习之
Flink
算子、了解DataStream API(基础篇一)
DataStreamAPI(基础篇)注:本文只涉及DataStream原因:随着大数据和流式计算需求的增长,处理实时数据流变得越来越重要。因此,DataStream由于其处理实时数据流的特性和能力,逐渐替代了DataSet成为了主流的数据处理方式。目录DataStreamAPI(基础篇)前摘:一、执行环境1.创建执行环境2.执行模式3.触发程序执行二、源算子(source)三、转换算子(Trans
十二点的泡面
·
2024-01-23 14:51
Flink
算子
大数据
学习
flink
【QNX】
高可用
性框架(5)
其目标是为
高可用
性I/O提供一个API,该API可以透明地为客户端提供恢复,特别是在服务器也必须具有
高可用
性的环境中。恢复是可配置的,以适应特定的客户需求;我们提供了开发更复杂的恢复机制的方法示例。
北原寒星101
·
2024-01-23 12:04
[ZooKeeper之七] 使用 Watcher 监视机制处理状态变化
一、轮询与通知 在分布式系统中,检测系统状态是非常重要的工作,只有实时检测到节点故障和故障原因,才能采取相应的处理方案,保证整个系统对外提供服务上的
高可用
。
小胡_鸭
·
2024-01-23 12:47
如何在GpuMall智算云平台实现开发工具与远程实例无缝对接
#智算云GpuMall##社区云##
高可用
云##免费##租赁##GpuMall#在人工智能和机器学习的快速发展浪潮中,分布式算力正成为这一浪潮中不可或缺的重要角色。
GpuMall
·
2024-01-23 11:41
机器学习
深度学习
gpu算力
全链路压测平台的作用与重要性
全链路压测平台应运而生,它在保障系统
高可用
性和性能方面发挥着关键作用。本文将探讨全链路压测平台的作用,以及它为企业带来的重要价值。
掌动智能
·
2024-01-23 11:08
运维
数据库
手把手教你搭建 RabbitMQ 集群
@[toc]单个的RabbitMQ肯定无法实现
高可用
,要想
高可用
,还得上集群。今天松哥就来和大家聊一聊RabbitMQ集群的搭建。
_江南一点雨
·
2024-01-23 11:19
用
flink
cdc debezium来捕获数据库的删除内容
我在用
flink
cdc把数据从sqlserver写到doris正常情况下sqlserver有删除数据,doris是能捕获到并很快同步删除的。
后季暖
·
2024-01-23 11:17
数据库
flink
学习之窗口处理函数
窗口处理函数什么是窗口处理函数
Flink
本身提供了多层API,DataStreamAPI只是中间的一环,在更底层,我们可以不定义任何具体的算子(比如map(),filter(),或者window()),
吃草料的羊
·
2024-01-23 10:16
flink
学习
大数据
Spring SpEL在
Flink
中的应用-SpEL详解
前言Spring表达式语言SpringExpressionLanguage(简称SpEL)是一个支持运行时查询和操做对象图的表达式语言。语法相似于EL表达式,但提供了显式方法调用和基本字符串模板函数等额外特性。SpEL在许多组件中都得到了广泛应用,如SpringData、SpringSecurity、SpringWebFlow等。它提供了一种非常灵活的方式来查询和操作对象图,从而简化了复杂的业务逻
shandongwill
·
2024-01-23 10:16
Java
Flink
flink
大数据
Atlassian Confluence RCE漏洞复现(CVE-2023-22527)
是面向大型企业和组织的
高可用
性、可扩展性和高性能版本。
OidBoy_G
·
2024-01-23 10:24
漏洞复现
atlassian
安全
web安全
去中心化分布式即时通讯引擎tim v2.0.1 发布
Tim即时通讯引擎的去中心化分布式架构具有去中心化、分布式数据存储、支持大规模用户、即时通讯、安全性和隐私保护、
高可用
性和容错性以及可扩展性和灵活性等特点。
donnie4w
·
2024-01-23 09:43
Tim分布式IM引擎
去中心化
分布式
实时互动
实时音视频
后端
2024-01-22(MongoDB)
传统的关系型数据库/mysql在“三高”需求以及应对web2.0的网站需求面前,有点力不从心,什么是“三高”需求:a.对数据库高并发的读写需求b.对海量数据的高效率存储和访问需求c.对数据库的高可扩展性和
高可用
性的需求
陈xr
·
2024-01-23 09:55
随记日志
数据库
mongodb
高可用
负载均衡搭建
高可用
负载均衡搭建主机名服务IPnginx-ka-master172.17.1.131nginx-ka-backup172.17.1.132web1-server172.17.1.133web2-server172.17.1.134VIP172.17.1.881
优质&青年
·
2024-01-23 09:53
负载均衡
网络
运维
Flink
中的容错机制
一.容错机制在
Flink
中,有一套完整的容错机制来保证故障后的恢复,其中最重要的就是检查点。
- Hola -
·
2024-01-23 09:08
flink
大数据
flink
1.18 广播流 The Broadcast State Pattern 官方案例scala版本
对应官网https://nightlies.apache.org/
flink
/
flink
-docs-master/docs/dev/datastream/fault-tolerance/broadcast_state
Thomas2143
·
2024-01-23 08:49
free
scala
开发语言
后端
Keepalived+Nginx实现双机主备、双主热备
高可用
集群架构(待完善)
使用两台本地虚拟机,实现Keepalived+Nginx实现双机主备、双主热备
高可用
集群架构前言本文根据B站up的教学视频以及参考相应博文实现。
猫咪很懒
·
2024-01-23 08:51
nginx
keepalived+nginx 双主架构
articleId=115586364中我们已经简要阐述了如何配置nginx
高可用
,对于一主一备的架构来说,主机服务正常的情况下,备机始终处于“空闲”的状态,为提供资源的利用率,可调整为双主架构,每个keepalived
丛娟
·
2024-01-23 08:21
nginx
keepalived应用,keepalived+nginx,keepalived+mysql主主架构
keepalived
高可用
1.keepalived简介1.1keepalived是什么?
诺坎普第一球探
·
2024-01-23 08:21
数据库
keepalived高可用
vrrp
nginx负载均衡
mysql双主热备
Keepalived实现nfs
高可用
Keepalived实现nfs
高可用
Nfs_master服务器:172.20.26.167(keepalived、nfs、sersync、rsync)Nfs_salve服务器:172.20.26.198
lqcbj_IT老混混
·
2024-01-23 08:46
keepalived
nfs
linux
运维
Flink
对接Kafka的topic数据消费offset设置参数
scan.startup.mode是
Flink
中用于设置消费Kafkatopic数据的起始offset的配置参数之一。
墨子白
·
2024-01-23 07:48
flink
flink
kafka
大数据
大数据学习之
Flink
、比较不同框架的容错机制
第一章、
Flink
的容错机制第二章、
Flink
核心组件和工作原理第三章、
Flink
的恢复策略第四章、
Flink
容错机制的注意事项第五章、
Flink
的容错机制与其他框架的容错机制相比较目录第五章、
Flink
十二点的泡面
·
2024-01-23 07:07
大数据
Flink
大数据
学习
flink
大数据学习之
Flink
、
Flink
容错机制的注意事项
第一章、
Flink
的容错机制第二章、
Flink
核心组件和工作原理第三章、
Flink
的恢复策略第四章、
Flink
容错机制的注意事项第五章、
Flink
的容错机制与其他框架的容错机制相比较目录第四章、
Flink
十二点的泡面
·
2024-01-23 07:06
大数据
Flink
大数据
学习
flink
大数据学习之
Flink
、搞懂
Flink
的恢复策略
第一章、
Flink
的容错机制第二章、
Flink
核心组件和工作原理第三章、
Flink
的恢复策略第四章、
Flink
容错机制的注意事项第五章、
Flink
的容错机制与其他框架的容错机制相比较目录第三章、
Flink
十二点的泡面
·
2024-01-23 07:36
大数据
Flink
大数据
学习
flink
38、
Flink
的CDC 格式:canal部署以及示例
Flink
系列文章一、
Flink
专栏
Flink
专栏系统介绍某一知识点,并辅以具体的示例进行说明。1、
Flink
部署系列本部分介绍
Flink
的部署、配置相关基础内容。
一瓢一瓢的饮 alanchanchn
·
2024-01-23 07:02
#
Flink专栏
flink
大数据
kafka
flink
hive
flink
sql
Flink
CDC
flink
kafka
聊聊
flink
Table的groupBy操作
序本文主要研究一下
flink
Table的groupBy操作Table.groupBy
flink
-table_2.11-1.7.0-sources.jar!
go4it
·
2024-01-23 06:35
Flink
之Transformation
一个
Flink
程序的核心,其实就是所有的转换操作,它们决定了处理的业务逻辑。基本转换算子映射(map)map()是大家非常熟悉的大数据操作算子,主要用于将数据流中的数据进行转换,形成新的数据流。
不加班程序员
·
2024-01-23 06:55
Flink学习过程
Hadoop相关
scala
flink
大数据
架构设计内容分享(一百二十三):分布式系统 :架构理论
分布式系统在解决单点故障、提高系统可扩展性和确保
高可用
性方面发挥着至关重要的作用。背景随着互联网应用的不断发展,传统的集中式系统面临着越来越多的挑战。
之乎者也·
·
2024-01-23 05:33
架构设计
内容分享
架构
SpringCloud从零开始搭建
一、注册中心EurekaCAP定理:Eureka是AP(
高可用
性,分区容错性)Eureka由多个instance(服务实例)组成,这些服务实例可以分为两种:EurekaServer和EurekaClient
Just do Java
·
2024-01-23 05:31
Java
Springcloud
亚信安慧AntDB全链路实时化的未来之选
它以其卓越的性能、
高可用
性和灵活的扩展性,吸引了越来越多的企业选择使用。首先,亚信安慧AntDB具备卓越的性能。它采
亚信安慧AntDB数据库
·
2024-01-23 04:53
数据库
性能优化
设计亚马逊按销售排名功能
1:定义UseCases和约束Usecases作用域内的UseCaseService通过目录计算过去一周内最受欢迎的产品User通过目录去View过去周内最受欢迎的产品Service有
高可用
作用域外整个电商网站设计组件
李黎明
·
2024-01-23 03:43
服务器
设计模式
设计一个Key-Value缓存去存储最近的Web Server查询的结果
UseCases我们可以定义如下Scope:User发送一个searchrequest,缓存命中成功返回DataUser发送一个searchrequest,缓存未命中,未成功返回DataService有
高可用
约束和假设状态假设
李黎明
·
2024-01-23 03:13
缓存
python
设计模式
【
Flink
-1.17-教程】-【四】
Flink
DataStream API(3)转换算子(Transformation)【用户自定义函数(UDF)】
【
Flink
-1.17-教程】-【四】
Flink
DataStreamAPI(3)转换算子(Transformation)【用户自定义函数(UDF)】1)函数类(FunctionClasses)2)富函数类
bmyyyyyy
·
2024-01-23 03:23
Flink
flink
java
#flink-udf
#flink自定义函数
#datastream-api
【
Flink
-1.17-教程】-【四】
Flink
DataStream API(2)转换算子(Transformation)【基本转换算子、聚合算子】
【
Flink
-1.17-教程】-【四】
Flink
DataStreamAPI(2)转换算子(Transformation)【基本转换算子、聚合算子】1)基本转换算子(map/filter/flatMap)
bmyyyyyy
·
2024-01-23 03:51
Flink
flink
java
大数据
#flink转换算子
#flink聚合算子
#datastream-api
Iceberg教程
概述1.2特性2.存储结构2.1数据文件(datafiles)2.2表快照(Snapshot)2.3清单列表(Manifestlist)2.4清单文件(Manifestfile)2.5查询流程分析3.与
Flink
Cool_Pepsi
·
2024-01-23 02:43
大数据
大数据
Paimon教程
教程来自尚硅谷目录教程来自尚硅谷1.概述1.1简介1.2核心特性1.3文件布局1.3.1LSMTrees2.集成
Flink
2.1安装&配置2.2Catalog3.进阶使用3.1写入性能3.1.1并行度3.1.2Compaction3.1.3
Cool_Pepsi
·
2024-01-23 02:11
大数据
大数据
数据湖
ZooKeeper
ZooKeeper提供了一个分布式的并且具有
高可用
性的协调服务,可以用于解决分布式应用中的一些常见问题,如统一命名服务、配置管理、分布式锁、分布式队列等。
.:::.
·
2024-01-23 02:37
zookeeper
一起学习ETCD系列——简单安装
ETCD采用raft算法,实现分布式数据的一致性和
高可用
,遵循CP原则,支持1
pigfu
·
2024-01-23 01:15
ETCD
etcd
etcd集群安装
dubbo
注册中心的
高可用
性怎么做?部署3台及以上的zookeeper服务(奇数):因为要选举leader如何监控服务,统计服务调用次数,估计服务压力,决定添加/减少机器数量。
BenjaminCool
·
2024-01-23 00:38
上一页
36
37
38
39
40
41
42
43
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他