flink高可用

Linux多网卡绑定实现负载均衡详解

将多块网卡绑定同一IP地址对外提供服务，可以实现高可用或者负载均衡。直接给两块网卡设置同一IP地址是不可以的。通过bonding，虚拟一块网卡对外提供连接，物理网卡的被修改为相同的MAC地址。
小艺要秃头·2024-01-16 10:43

Redis分布式锁（二）基于Redis的分布式锁

获取锁，并设置过期时间，保存线程标识；释放锁时先判断线程标识是否与自己一致，一致则删除2、特性：利用setnx满足互斥性；利用setex保证故障时锁依然能释放，避免死锁，提高安全性；利用Redis集群保证高可用和高并发特性
w_t_y_y·2024-01-16 10:54

Flume用法总结

Flume用法总结一、Flume是什么Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。可以实时读取服务器的日志写入HDFS。
天选之子123·2024-01-16 10:53

16 | 高性能和可伸缩架构：业务增长，能不能加台机器就搞定？

在课程的第11讲介绍了，技术架构除了要保证系统的高可用，还要保证系统的高性能和可伸缩，并且能以低成本的方式落地。在实践中呢，高性能、可伸缩和低成本紧密相关，处理的手段也比较类似，这里就放在一起来讲解。
_Rye_·2024-01-16 09:40

【FlinkSQL】一文读懂 动态表-时态表

一、FLinkSql简介FlinkSQL是基于ApacheCalcite来实现的标准SQL。它是一种关系型API，可以来做流批统一处理。
架构师思考实践·2024-01-16 09:26

Flink-SQL——时态表(Temporal Table)

时态表(TemporalTable)文章目录时态表(TemporalTable)数据库时态表的实现逻辑时态表的实现原理时态表的查询实现时态表的意义Flink中的时态表设计初衷产品价格的例子——时态表汇率的例子
不二人生·2024-01-16 09:51

【Flink-1.17-教程】-【一】Flink概述、Flink快速入门

【Flink-1.17-教程】-【一】Flink概述、Flink快速入门1）Flink是什么1.1.有界流和无界流1.2.Flink的发展史2）Flink特点3）FlinkvsSparkStreaming4
bmyyyyyy·2024-01-16 08:16

Flink 处理函数（1）—— 基本处理函数

在Flink的多层API中，处理函数是最底层的API，是所有转换算子的一个概括性的表达，可以自定义处理逻辑在处理函数中，我们直面的就是数据流中最基本的元素：数据事件（event）、状态（state）以及时间
THE WHY·2024-01-16 08:13

flink 1.18 sql gateway /sql gateway jdbc

一sqlgateway注意之所以直接启动gateway能知道yarnsession主要还是隐藏的配置文件，但是配置文件可以被覆盖，多个session保留最新的applicationid1安装flink（
卤蛋x001·2024-01-16 08:12

flink 1.12 时间语义与WaterMark

一.在新版本中flink默认处理的是事件时间而不是以前默认的处理时间在学习的时候安装新版本步骤容易报错大概的意思就是设置mark或者将事件类型换成ProcessingTime@deprecatedInFlink1.12thedefaultstreamtimecharacteristichasbeenchangedto
卤蛋x001·2024-01-16 08:41

flink1.12 stream windows-top-n

窗口top-Nflink1.12packagecom.cn.stream;importorg.apache.flink.api.common.eventtime.WatermarkStrategy;importorg.apache.flink.api.common.functions.AggregateFunction
卤蛋x001·2024-01-16 08:41

flink 时态表 Join

创建所以可以使时态表功能相近并且时态表可以DDL创建使用时态表函数只能使用TABLEAPI去注册packagecom.cn.sql.joins.temporaljoins;importorg.apache.flink.streaming.api.environment.StreamExecutionEnvironme
卤蛋x001·2024-01-16 08:41

Flink（十三）【Flink SQL（上）】

今天开始学习Flink最后一部分FlinkSQL，完了还有不少框架得学：Kafka、Flume、ClickHouse、Hudi、Azkaban、OOzie...有的算是小工具，不费劲，但是学完得复习啊，
让线程再跑一会·2024-01-16 08:33

flink 1.18 sql demo

flink1.18sqldemo更换flink-table-planner为flink-table-planner-loaderpom.xmlorg.apache.flinkflink-table-api-java-uber1.18.0providedorg.apache.flinkflink-table-runtime1.18.0org.apache.flinkflink-table-api-j
卤蛋x001·2024-01-16 08:03

3、深入解析Redis Cluster集群运维与核心原理

了解RedisCluster的运维及核心原理对于确保系统的高可用性和性能至关重要。
oNuoyi·2024-01-16 08:55

Redis主从架构、哨兵集群原理实战

1.主从架构简介背景单机部署简单，但是可靠性低，且不能很好利用CPU多核处理能力生产环境必须要保证高可用，一般不可能单机部署读写分离是可用性要求不高、性能要求较高、数据规模小的情况目标读写分离，扩展主节点的读能力
水宝的滚动歌词·2024-01-16 07:43

分布式开放消息系统(RocketMQ)的原理与实践

分布式消息系统作为实现分布式系统可扩展、可伸缩性的关键组件，需要具有高吞吐量、高可用等特点。
豆奶快攻·2024-01-16 07:01

flink1.14.5使用CDH6.3.2的yarn提交作业

使用CDH6.3.2安装了hadoop集群，但是CDH不支持flink的安装，网上有CDH集成flink的文章，大都比较麻烦；但其实我们只需要把flink的作业提交到yarn集群即可，接下来以CDHyarn
码道功成·2024-01-16 06:30

架构设计内容分享(六十四)：如果你当架构师，从0开始，如何做一个后台项目的架构？

目录总览一下：后台技术栈结构团队协助基础工具链的选型和培训搭建微服务开发基础设施选择合适的RPC框架选择和搭建高可用的注册中心选择和搭建统一配置中心选择和搭建高性能的缓存中间件选择和搭建高性能的消息中间件选择和搭建高性能的关系数据库选择和搭建高性能的
之乎者也··2024-01-16 06:16

seatunnel 消费kafka数据写入clickhouse

SeaTunnel是一个非常易用、高性能、支持实时流式和离线批处理的海量数据集成平台，架构于ApacheSpark和ApacheFlink之上，支持海量数据的实时同步与转换。
冰帆<·2024-01-16 05:41

Flink-容错机制

Flink中的容错机制流式数据连续不断地到来，无休无止；所以流处理程序也是持续运行的，并没有一个明确的结束退出时间。机器运行程序，996起来当然比人要容易得多，不过希望“永远运行”也是不切实际的。
左美美 ￣　　·2024-01-16 05:24

深入理解 Flink（八）Flink Task 部署初始化和启动详解

JobMaster部署Task核心入口：JobMaster.onStart();部署Task链条：JobMaster-->DefaultScheduler-->SchedulingStrategy-->ExecutionVertex-->Execution-->RPC请求-->TaskExecutorTaskExecutor处理JobMaster的submitTaskRPC请求JobMaster向
我很ruo·2024-01-16 05:21

Kafka和Flink：构建高吞吐量的实时数据流处理系统

ApacheKafka和ApacheFlink是两个非常重要的开源项目，它们分别是一个分布式流处理平台和一个流处理框架。
OpenChat·2024-01-16 05:20

微服务架构设计核心理论：掌握微服务设计精髓

微服务与服务治理1、概述2、TwoPizza原则和微服务团队3、主链路规划4、服务治理和微服务生命周期5、微服务架构的网络层搭建6、微服务架构的部署结构7、面试题二、配置中心1、为什么要配置中心2、配置中心高可用思考三
秃了也弱了。·2024-01-16 03:41

日志采集传输框架之 Flume，将监听端口数据发送至Kafka

1、简介Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，主要有以下几个部分组成。
知其_所以然·2024-01-16 03:03

ClickHouse - 01

与其特性在大数据处理场景中，流处理和批处理使用到的技术大致如下：大数据处理场景流程.png批处理会将源业务系统中的数据通过数据抽取工具（例如Sqoop）将数据抽取到HDFS中，这个过程可以使用MapReduce、Spark、Flink
ArthurHC·2024-01-16 02:17

Redis高可用（主从复制、哨兵模式和Cluster集群）

目录前瞻主从复制哨兵集群主从复制主从复制的作用主从复制流程搭建Redis主从复制实验准备实验流程修改Redis配置文件（Master节点操作）修改Redis配置文件（Slave节点操作）验证主从效果哨兵模式哨兵模式的作用哨兵结构由两部分组成故障转移机制主节点的选举搭建Redis哨兵模式实验准备实验流程修改Redis哨兵模式的配置文件（所有节点操作）编写故障切换脚本文件并在哨兵模式的配置文件中添加路
GnaW1nT·2024-01-16 01:03

Flink定制化功能开发，demo代码

前言：这是一个Flink自定义开发的基础教学。
i7杨·2024-01-15 23:31

RabbitMQ 的核心组件&工作原理【很重要】

RabbitMQ最初起源于金融系统，用于在分布式系统中存储转发消息，在易用性、扩展性、高可用性等方面都表现不俗，也是目前社区活跃度较高的消息中间件之一。
m0_67394230·2024-01-15 22:56

Docker 如何安装 MySQL 并实现远程连接

而MySQL则是一个广泛使用的开源关系型数据库管理系统，它支持多个平台和各种编程语言，并且具有高性能、高可用性和强大的功能。在本文中，我将分享如何使用Docker安装MySQL并实
咕噜签名-铁蛋·2024-01-15 21:17

13 | 高可用架构案例（一）：如何实现O2O平台日订单500万？

在上一讲中，介绍了高可用系统的设计原则和常见手段。今天呢，会通过一个实际的案例，告诉具体如何落地一个高可用的架构，能够深入理解和运用这些高可用手段。项目背景介绍先说下项目的背景。
_Rye_·2024-01-15 20:05

14 | 高可用架构案例（二）：如何第一时间知道系统哪里有问题？

在前面两讲中，介绍了系统的高可用都有哪些设计原则和具体手段。其中也特别提到，要想保证系统的高可用，我们还需要对系统进行全面有效的监控。监控是系统的眼睛，无监控，不运维。
_Rye_·2024-01-15 20:05

15 | 高可用架构案例（三）：如何打造一体化的监控系统？

上一讲，介绍了整体化监控系统的设计方案，今天就深入它的内部设计，了解它具体是如何落地的。这个监控系统主要分为4大部分：节点信息采集、节点接入、数据上报和前端展示。下面，就来具体展开介绍。节点信息采集在上一讲中提到过，Agent负责采集节点的健康数据，每隔3s，主动访问一次；然后，Agent会根据这些数据，结合相应的规则，来判断节点的健康状态。最终的健康状态有三种，分别是错误、警告和正常，这三种状态
_Rye_·2024-01-15 20:05

分布式系统的复杂性：如何构建高可用性的架构

1.背景介绍分布式系统的复杂性：如何构建高可用性的架构分布式系统的复杂性是一项重要的技术挑战，尤其是在当今的大数据时代，数据量越来越大，计算能力和存储能力也在不断增长。
OpenChat·2024-01-15 18:35

flink02-安装

1standalone模式1.1安装解压缩flink-1.7.0-bin-hadoop27-scala_2.11.tgz修改flink/conf/flink-conf.yaml文件image.png修改
chen_666·2024-01-15 18:25

搭建高可用的Harbor

Harbor简介Docker容器应用的开发和运行离不开可靠的镜像管理，Docker官方提供了原生的Registry，但其功能比较简单，而且没有可视化界面，自然无法满足企业级的需求。虽然Docker官方也提供了公共的镜像仓库，但是从安全和效率等方面考虑，部署私有环境内的Registry也是非常必要的。为了解决以上需求，VMware公司推出了Harbor，Harbor是为企业用户设计的容器镜像仓库开源
端碗吹水·2024-01-15 18:36

Java版商城：Spring Cloud+SpringBoot b2b2c实现多商家入驻直播带货及 免 费 小程序商城搭建的完整指南

该产品采用了先进的云计算技术，具有高可用性、高扩展性和高安全性等特点，可以满足不同企业的需求。鸿鹄云商SAAS云产品的核心功能包
微服务 spring cloud·2024-01-15 17:31

开源对象存储服务器MinIO本地部署并结合内网穿透实现远程访问管理界面

MinIO的设计目标是高性能、高可用
屿小夏·2024-01-15 16:22

【大数据】Flink 详解（十）：SQL 篇 Ⅲ

《Flink详解》系列（已完结），共包含以下101010篇文章：【大数据】Flink详解（一）：基础篇【大数据】Flink详解（二）：核心篇Ⅰ【大数据】Flink详解（三）：核心篇Ⅱ【大数据】Flink
G皮T·2024-01-15 15:44

【大数据】Flink 详解（九）：SQL 篇 Ⅱ

《Flink详解》系列（已完结），共包含以下101010篇文章：【大数据】Flink详解（一）：基础篇【大数据】Flink详解（二）：核心篇Ⅰ【大数据】Flink详解（三）：核心篇Ⅱ【大数据】Flink
G皮T·2024-01-15 15:13

【大数据】Flink 详解（八）：SQL 篇 Ⅰ

《Flink详解》系列（已完结），共包含以下101010篇文章：【大数据】Flink详解（一）：基础篇【大数据】Flink详解（二）：核心篇Ⅰ【大数据】Flink详解（三）：核心篇Ⅱ【大数据】Flink
G皮T·2024-01-15 15:12

【大数据】深入浅出 Apache Flink：架构、案例和优势

深入浅出ApacheFlink：架构、案例和优势1.现代大数据架构1.1什么是批处理？1.2什么是流处理？
G皮T·2024-01-15 15:11

亚信安慧AntDB-S流式数据库实现企业数智化转型

该流式数据库具备强大的ACID特性和高可用性，为企业降低了流式业务开发和维护的成本。
亚信安慧AntDB数据库·2024-01-15 14:11

中国数据库市场的领军黑马——亚信安慧AntDB数据库

这使得AntDB具备了高可用性、分布式架构、多租户支持、鉴权授权等丰富的能力。这些特性使
亚信安慧AntDB数据库·2024-01-15 14:35

【源码分析】一个flink job的sql到底是如何执行的（一）：flink sql底层是如何调用connector实现物理执行计划的

文章目录一.一条flinksql二.源码流程图示1.flinkconnector的实现逻辑2.flinksql的转换逻辑三、flinksql调用connector源码分析1.tEnv.executeSql
roman_日积跬步-终至千里·2024-01-15 14:25

几个集群的总结（三）keepalived①

keepalived打算分三篇来写，第一篇为keepalived的安装，第二篇为keepalived+nginx实现主从模式的高可用，第三篇为keepalived+nginx实现双主模式。
吹雪007·2024-01-15 13:48

Lamp架构从入门到精通

系列文章目录lnmp架构lnmp架构-nginx负载均衡以及高可用系列文章目录一、源码编译configure(检测预编译环境是否可行)makemakeinstall优化关闭Debug二、nginx负载均衡三
redhat_yan·2024-01-15 13:37

大数据开发之Flume

第1章：Flume概述1.1Flume定义Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输系统。
Key-Key·2024-01-15 12:35

streaming 101

看之前就知道这是两篇能够提升你对流处理理解的文章，不是一般的提升，可以说是一种升华，因为他谈的不是一个具体的工具（sparkstreaming，flink等），而是谈流处理应该是怎么样的，流处理要打败批处理一统天下的话需要有什么特性
Bitson·2024-01-15 12:31

大数据开发之HA

第1章：HadoopHA高可用1.1HA概述所谓HA（HighAvailablity），即高可用（7*24小时不间断服务）。实现高可用最关键的策略是消除单点故障。
Key-Key·2024-01-15 12:03
上一页 46 47 48 49 50 51 52 53 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他