flink高可用第18页

【Oracle 集群】RAC知识图文详细教程(二)--Oracle 集群概念及原理

Oracle的三种高可用集群方案1RAC（RealApplicationClusters）多个Oracle服务器组成一个共享的Cache，而这些Oracle服务器共享一个基于网络的存储。

大叶梧桐·2024-02-01 13:31

亿级流量系统架构之如何支撑百亿级数据的存储与计算

这篇文章就聊聊这个数据产品背后对应的一套大型商家数据平台，看看这个平台在分布式、高并发、高可用、高性能、海量数据等技术挑战下的架构演

java成功之路·2024-02-01 13:21

2022-01-11 rabbitmq集群部署（经典镜像模式）

背景实际应用场景默认集群模式，无法做到高可用性，忽略。本文只考虑使用mirrorqueue及quorumqueue，默认使用docker-compose方式部署，其他方式除安装步骤不同，配置基本一样。

anyangdp·2024-02-01 12:28

服务器名词解释

高可用性在计算中，术语可用性用于描述服务可用的时间段，以及系统响应用户请求所需的时间。高可用性是系统或组件的质量，可确保在给定时间段内实现高水平的操作性能。

jjyy2233667·2024-02-01 12:33

Flink Savepoint 和 Checkpoint 使用

flinkSavepoint和Checkpoint使用checkpoint应用定时触发，用于保存状态，会过期内部应用失败重启的时候使用，特点是作业容错自动恢复，轻量，自动周期管理savepoint用户手动执行

GOD_WAR·2024-02-01 12:46

1.11 flinksql自定义redis connector 连接器

FlinkStreamApiApacheBahir已经实现了redis对应的连接器FlinkstreamingconnectorforRedismaven仓库如下org.apache.bahirflink-connector-redis

菜到抠脚的cxy·2024-02-01 12:15

Flink检查点（checkpoint）、保存点（savepoint）的区别与联系

FlinkcheckpointCheckpoint是Flink实现容错机制最核心的功能，能够根据配置周期性地基于Stream中各个Operator的状态来生成Snapshot，从而将这些状态数据定期持久化存储下来

雾岛与鲸·2024-02-01 12:44

【Flink】Flink 自定义 redis sink

1.概述内部要做FlinkSQL平台，本文以自定义RedisSink为例来说明FlinkSQL如何自定义Sink以及自定义完了之后如何使用基于Flink1.112.步骤implementsDynamicTableSinkFactoryimplementsDynamicTableSink

九师兄·2024-02-01 12:13

flink（十三）：flink-CheckPoint和SavePoint作用和区别

运行原理开启设置保存多个CheckPoint恢复任务SavePoint运行原理创建SavePoint恢复任务SavePoint和CheckPoint的区别详细区别总结分享大数据博客列表说明本博客周五更新一次Flink

羽落风起·2024-02-01 12:13

flink sql 知其所以然（二）| 自定义 redis 数据维表（附源码）

1.序篇-本文结构背景篇-为啥需要redis维表目标篇-做redis维表的预期效果是什么难点剖析篇-此框架建设的难点、目前有哪些实现维表实现篇-维表实现的过程总结与展望篇本文主要介绍了flinksqlredis

大数据技术派·2024-02-01 12:43

streampark+flink一键整库或多表同步mysql到doris实战

streampark+flink一键整库或多表同步mysql到doris实战，此应用一旦推广起来，那么数据实时异构时，不仅可以减少对数据库的查询压力，还可以减少数据同步时的至少50%的成本，还可以减少30%

京东云技术团队·2024-02-01 12:42

Flink Native Library xxx is being loaded in another classloader

在使用flink连接tdengine时，第一次连接没有问题，当重启任务时，出现flinkNativeLibrarylibtaos.soalreadyloadedinanotherclassloader异常

不会消失的夜晚·2024-02-01 12:11

Flink检查点（checkpoint）、保存点（savepoint）的区别和联系

一、FlinkcheckpointCheckpoint是Flink实现容错机制最核心的功能，能够根据配置周期性的基于Stream中各个Operator的状态来生成Snapshot，从而将这些状态数据定期持久存储下来

小枫@码·2024-02-01 12:41

k8s 1.29 一键安装脚本, 丝滑致极

博客原文文章目录集群配置配置清单集群规划集群网络规划环境初始化主机配置安装脚本需要魔法的脚本不需要魔法的脚本配置自动补全加入其余节点验证集群高可用版本:高可用k8s1.29一键安装脚本集群配置配置清单OS

M·K·T·2024-02-01 09:02

支撑微博千亿调用的轻量级RPC框架：Motan

编者按：高可用架构分享及传播在架构领域具有典型意义的文章，本文由张雷在高可用架构群分享。转载请注明来自高可用架构公众号「ArchNotes」。张雷，新浪微博技术专家，MotanRPC框架技术负责人。

高可用架构·2024-02-01 09:26

(转载) 支撑微博千亿调用的轻量级RPC框架：Motan

MzAwMDU1MTE1OQ==&mid=403874424&idx=1&sn=22d5f15814c297c623ffd2cac4e797ba&scene=21#wechat_redirect编者按：高可用架构分享及传播在架构领域具有典型意义的文章

hongtoushiziyuan·2024-02-01 09:25

聊聊flink的ScheduledExecutor

序本文主要研究一下flink的ScheduledExecutorExecutorjava.base/java/util/concurrent/Executor.javapublicinterfaceExecutor

go4it·2024-02-01 08:37

Flink详解系列之五--水位线（watermark）

1、概念在Flink中，水位线是一种衡量EventTime进展的机制，用来处理实时数据中的乱序问题的，通常是水位线和窗口结合使用来实现。

王吉吉real·2024-02-01 07:15

Flink实战五_状态机制

接上文：Flink实战四_TableAPI&SQL在学习Flink的状态机制之前，我们需要理解什么是状态。

core512·2024-02-01 07:26

Redis 主从复制

复制功能是高可用Redis的基础，哨兵和集群都是在复制的基础上构建的。配置主从结构参与复制的Redis实例划分为主节点（master）和从节点（slave）。

ikun66666·2024-02-01 02:09

RabbitMQ 高可用之如何确保消息成功消费

前面小编和大家聊了MQ高可用之如何确保消息成功发送，各种配置齐上阵，最终确保了消息的成功发送，甚至在一些极端情况下还可能发生同一条消息重复发送的情况，不管怎么样，消息总算发送出去了，如果小伙伴们还没看过上篇文章

Java弟中弟·2024-02-01 00:56

Exchange Server 2016 部署系列（六）高可用 DAG

见证目录权限配置本次实验中将使用DC作为见证服务器，需要将ExchangeTrustedSubsytem组加入到见证服务器的本地Administrators组中，在DC中需要使用AD用户和计算机来添加添加ExchangeTrustedSubsytem组到Administrators组中1.png在域控制器上，打开ActiveDirectory用户和计算机，展开域节点“computer”，在右侧窗口

陳陳陳ccc·2024-01-31 23:54

Harbor高可用部署

1、前置准备三台虚拟机主机名IP地址部署分配master10.204.81.117nginxnode110.204.82.15harbor-1node210.204.82.16harbor-22、分别在node1、node2部署harbora、分别部署安装docker【参考docker安装、常用命令、容器服务启动脚本】b、上传、解压harbor安装包：harbor-offline-installe

曹弘毅·2024-01-31 23:13

kubernetes集群环境搭建（kubeadm-v1.20.6)

1.kubernetes高可用集群环境搭建（kubeadm-v1.20.6）1.1前置知识点目前生产部署Kubernetes集群主要有两种方式：kubeadmKubeadm是一个K8s部署工具，提供kubeadminit

weixin_44834469·2024-01-31 20:14

使用HAProxy和Heartbeat进行负载平衡的高可用MySQL集群

您好，在本文中，我想分享一些从两个主MySQL节点构建高可用MySQL数据库集群的经验，具有基于HAProxy和Heartbeat的负载平衡和故障转移功能。

开心人开发世界·2024-01-31 20:59

RabbitMQ实战指南（一）—— 安装与使用方式

RabbitMQ凭借其高可靠、易扩展、高可用及丰富的功能特性受到越多企业青睐。

我的头发哪去了·2024-01-31 17:11

Flink 集成和使用 Hive Metastore

1.AWSEMR的Flink使用HiveMetastore想在Flink中使用HiveMetastore其实只需要将FlinkHiveConnector以及HiveMetastore有关的Jar包部署到

　Laurence·2024-01-31 16:31

Flink Hudi 源码之HoodieTableSink

Flink源码分析系列文档目录请点击：Flink源码分析系列文档目录源代码分支release-0.9.0Hudi源代码GitHub地址：apache/hudi:Upserts,DeletesAndIncrementalProcessingonBigData

AlienPaul·2024-01-31 15:09

大厂 5 年实时数据开发经验总结，Flink SQL 看这篇就够了！

本文摘编于《FlinkSQL与DataStream入门、进阶与实战》（500页、70万字）作者羊艺超，目前就职于快手，国内最早一批FlinkSQL使用者拥有从0到1使用FlinkSQL建设、保障及治理实时数仓的丰富经验京东机械工业出版社旗舰店限时

zhisheng_blog·2024-01-31 15:29

Apache Paimon 介绍

从FlinkTableStore演进而来Flinktablestore架构如下图：（和今天Paimon的架构相比，LogSystem不再被推荐使用，LakeStore的能力大幅强于LogSystem，除了延时

zhisheng_blog·2024-01-31 15:58

Gateway API 实践之（六）FSM Gateway 的健康检查功能

这一功能在微服务或分布式系统中尤为关键，因为它通过及时识别并隔离故障或性能下降的服务，来维护系统的高可用性和弹性。通过健康检查，网关能够保证请求负载被有效

Flomesh·2024-01-31 15:52

得物云原生容器技术探索与落地实践

从2021年8月开始，我们以提升资源使用率和资源交付效率为目标，开始基于云原生技术建设整个服务体系的高可用性、可观测性和高运维效率，同时要保证成本可控。

得物技术·2024-01-31 15:14

数据湖技术Iceberg0.12预研文档

Iceberg0.12预研本次预研场景主要为kafka=>flinksql=>iceberg=>hive=>hdfs=>trino(presto)本次预研使用组件如下：名称版本描述flink1.12.1

我去探险了·2024-01-31 15:36

什么是分布式系统！以及分布式系统架构的优缺点

现在的架构很多，各种各样的，如高并发架构、异地多活架构、容器化架构、微服务架构、高可用架构、弹性化架构等，还有和这些架构相关的管理型的技术方法，如DevOps、应用监控、自动化运维、SOA服务治理、去IOE

架构师Javaspring·2024-01-31 15:57

再谈Redis三种集群模式：主从模式、哨兵模式和Cluster模式

总结经验redis主从：可实现高并发(读)，典型部署方案：一主二从redis哨兵：可实现高可用，典型部署方案：一主二从三哨兵redis集群：可同时支持高可用(读与写)、高并发，典型部署方案：三主三从一、

MobotStone·2024-01-31 13:23

ZooKeeper学习

ZooKeeper是什么ApacheZooKeeper是一个高可用的分布式协调中间件。GooleChubby的一个开源实现，主要解决分布式一致性问题，提供分布式锁服务。

苜蓿花乐园·2024-01-31 12:09

使用 Paimon + StarRocks 极速批流一体湖仓分析

摘要：本文整理自阿里云智能高级开发工程师王日宇，在FlinkForwardAsia2023流式湖仓（二）专场的分享。

Apache Flink·2024-01-31 11:25

Redis热Key问题解决方案汇总

Guava的LoadingCache,Caffeine等等)方法4:京东开源的hotkey工具Redis缓存问题Redis作为消息队列的优劣Redis热Key问题解决方案汇总Redis集群模式下保证可迁移和高可用

Cat凯94·2024-01-31 11:33

flink sql运用入门

目录前言一、flink是什么？

yc_zlj·2024-01-31 11:21

Flink实战三_时间语义

接上文：Flink实战二_DataStreamAPI接下来本文分析Flink的时间语义。时间语义是Flink中非常精妙的一部分设计，也可以说是Flink最为重要的一个设计。

core512·2024-01-31 11:20

Flink实战四_TableAPI&SQL

接上文：Flink实战三_时间语义1、TableAPI和SQL是什么？

core512·2024-01-31 11:18

60、Flink CDC 入门介绍及Streaming ELT示例（同步Mysql数据库数据到Elasticsearch）-完整版

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。

一瓢一瓢的饮 alanchanchn·2024-01-31 11:47

KAFKA高可用架构涉及常用功能整理

KAFKA高可用架构涉及常用功能整理1.kafka的高可用系统架构和相关组件2.kafka的核心参数2.1常规配置2.2特殊优化配置3.kafka常用命令3.1常用基础命令3.1.1创建topic3.1.2

李姓门徒·2024-01-31 11:07

Apache Flink 文件上传漏洞 CVE-2020-17518 漏洞复现

ApacheFlink文件上传漏洞CVE-2020-17518漏洞复现一、漏洞描述二、漏洞影响三、漏洞复现1、环境搭建2、漏洞复现四、漏洞POC五、参考链接一、漏洞描述ApacheFlink是一个开源的流处理框架

Senimo_·2024-01-31 10:24

Apache Flink jobmanager/logs 目录穿越漏洞 CVE-2020-17519 漏洞复现

ApacheFlinkjobmanager/logs目录穿越漏洞CVE-2020-17519漏洞复现一、漏洞描述二、漏洞影响三、漏洞复现1、环境搭建2、漏洞复现四、漏洞POC五、参考链接一、漏洞描述ApacheFlink