flink高可用

高可用架构去中心化重要?

1背景在互联网高可用架构设计中，应该避免将所有的控制权都集中到一个中心服务，即便这个中心服务是多副本模式。
xdpcxq1029·2024-01-16 20:41

Hudi0.14.0最新编译（修订版）

1编译环境Java1.8maven3.9.3hadoop3.3.4hive3.1.3spark3.2.1flink1.16.0hudi0.14.02hudi准备2.1源码$gitclonehttps:/
跟着大数据和AI去旅行·2024-01-16 20:40

Docker本地部署MinIO对象存储服务器结合Cpolar内网穿透实现远程访问

MinIO的设计目标是高性能、高可用性和可扩展性。它可以在分布式模式下运行，以满足不同规模的存储需求。
内网渗透·2024-01-16 20:07

Docker安装各种软件

目录一.Nacos二.MySQL5.7三.Tomcat四.Clickhouse五.Redis六.Zookeeper七.Kafka八.Flink九.Fastdfs十.RabbitMQ十一.Elasticsearch
黑暗对我避而远之·2024-01-16 20:37

如何在Docker中搭建MinIO容器并实现无公网ip远程访问本地服务

MinIO的设计目标是高性能、高可用
ｋｓ胤墨·2024-01-16 19:27

Alink 使用技巧：如何使用批式 CSV 数据读取？

Alink是基于Flink的机器学习算法平台，欢迎访问Alink的GitHub获取更多信息。本文主要分享Alink的使用技巧之一，如何使用批式CSV进行数据读取。
流计算Alink·2024-01-16 19:39

大数据学习入门到实战教程，精心整理万字长文入门，老奶奶看了都说学会了

换个角度说，大数据是：1、有海量的数据2、有对海量数据进行挖掘的需求3、有对海量数据进行挖掘的软件工具（hadoop、spark、storm、flink、tez
悦悦学Python·2024-01-16 18:10

RKE安装k8s及部署高可用rancher之证书通过cert-manager

1.安装rke和local集群[[email protected]]#rke-vrkeversionv1.5.1 [root@nginxcert-manager]#rkeup--configlocale-cluster.ym[[email protected]]#catlocale-cluster.ymlnodes:-address:192.168.1.65internal_address:192.168
Michaelwubo·2024-01-16 18:13

什么是DNS（域名系统）

目的：DNS的主要目的是提高可用性和访问互联网的便捷性。DNS的工作原理解析过程：当用户在浏览器输入一个域名并按下回车时，浏
小名空鵼·2024-01-16 17:05

2.6、云负载均衡产品详述

一、定义弹性负载均衡(ElasticLoadBalance，简称ELB)可将来自公网的访问流量分发到后端云主机，可选多种负载均衡策略，并支持自动检测云主机健康状况，消除单点故障，保障应用系统的高可用。
网运少年·2024-01-16 17:58

第 3 章 Keepalived 双机热备

技能展示：会构建双机热备系统会构建LVS+HA高可用群集在这个高度信息化的IT时代，企业的生产系统、业务运营、销售和支持，以及日常管理等环节越来越依赖于计算机信息和服务，对高可用（HA）技术的应用需求不断提高
IT_张三·2024-01-16 14:00

Keepalived 双机热备

本章主要内容：Keepalived双机热备基础知识学会构建双机热备系统学会构建LVS+HA高可用群集简介在这个高度信息化的IT时代，企业的生产系统，业务运营，销售和支持，以及日常管理等环节越来越依赖于计算机和服务
L罗盛·2024-01-16 14:47

Redis分片集群

1.为何需要分片集群主从和哨兵可以解决高可用、高并发读的问题还有两个问题海量数据存储问题高并发写的问题2.分片集群特点集群中有多个Master，每个master保存不同的数据每个master都可以有多个
不会仅此而已·2024-01-16 14:15

软件开发面试题

，过期删除，内存淘汰】持久化【持久化机制】集群【高可用】操作系统锁进程，线程C++基础指针/引用，封装
進擊的小老虎·2024-01-16 14:43

LVS负载均衡

了解群集的结构与工作模式了解LVS负载均衡群集原理学会配置NFS共享服务学会构建LVS-NAT负载均衡群集在各种互联网应用中，随着站点对硬件性能、响应速度、服务稳定性、数据可靠性等要求越来越高，单台服务器已经无法满足负载均衡及高可用的要求
L廖锦耀·2024-01-16 13:21

Keepalived双机热备

学会构建双机热备系统学会构建LVS+HA高可用群集1.1Keepalived概述及安装Keepalived的官方网站位于http://www.keepalived.org/，本章将以yum方式讲解Keepalived
L廖锦耀·2024-01-16 13:21

tim实践系列——去中心化分布式架构特点

Github系列开源文章《tim实践系列文章》去中心化分布式架构是一种高度自治、开放、平等、高可用、并发、可扩展、灵
donnie4w·2024-01-16 13:49

mysql实现主从复制/主从同步

这个时候就需要做高可用两个ngix+两个tomcat+两个mysql实现高可用，避免单点问题。中间使用keepalived监听。下面先从简单的mysql主从搞起。
醉于麦田·2024-01-16 12:13

【GaussDB数据库】序

同时拥有云上高可用，高可靠，高安全，弹性伸缩，一键部署，快速备份恢复，监控告警等关键能力，能为企
小手の冰凉·2024-01-16 11:43

Linux多网卡绑定实现负载均衡详解

将多块网卡绑定同一IP地址对外提供服务，可以实现高可用或者负载均衡。直接给两块网卡设置同一IP地址是不可以的。通过bonding，虚拟一块网卡对外提供连接，物理网卡的被修改为相同的MAC地址。
小艺要秃头·2024-01-16 10:43

Redis分布式锁（二）基于Redis的分布式锁

获取锁，并设置过期时间，保存线程标识；释放锁时先判断线程标识是否与自己一致，一致则删除2、特性：利用setnx满足互斥性；利用setex保证故障时锁依然能释放，避免死锁，提高安全性；利用Redis集群保证高可用和高并发特性
w_t_y_y·2024-01-16 10:54

Flume用法总结

Flume用法总结一、Flume是什么Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。可以实时读取服务器的日志写入HDFS。
天选之子123·2024-01-16 10:53

16 | 高性能和可伸缩架构：业务增长，能不能加台机器就搞定？

在课程的第11讲介绍了，技术架构除了要保证系统的高可用，还要保证系统的高性能和可伸缩，并且能以低成本的方式落地。在实践中呢，高性能、可伸缩和低成本紧密相关，处理的手段也比较类似，这里就放在一起来讲解。
_Rye_·2024-01-16 09:40

【FlinkSQL】一文读懂 动态表-时态表

一、FLinkSql简介FlinkSQL是基于ApacheCalcite来实现的标准SQL。它是一种关系型API，可以来做流批统一处理。
架构师思考实践·2024-01-16 09:26

Flink-SQL——时态表(Temporal Table)

时态表(TemporalTable)文章目录时态表(TemporalTable)数据库时态表的实现逻辑时态表的实现原理时态表的查询实现时态表的意义Flink中的时态表设计初衷产品价格的例子——时态表汇率的例子
不二人生·2024-01-16 09:51

【Flink-1.17-教程】-【一】Flink概述、Flink快速入门

【Flink-1.17-教程】-【一】Flink概述、Flink快速入门1）Flink是什么1.1.有界流和无界流1.2.Flink的发展史2）Flink特点3）FlinkvsSparkStreaming4
bmyyyyyy·2024-01-16 08:16

Flink 处理函数（1）—— 基本处理函数

在Flink的多层API中，处理函数是最底层的API，是所有转换算子的一个概括性的表达，可以自定义处理逻辑在处理函数中，我们直面的就是数据流中最基本的元素：数据事件（event）、状态（state）以及时间
THE WHY·2024-01-16 08:13

flink 1.18 sql gateway /sql gateway jdbc

一sqlgateway注意之所以直接启动gateway能知道yarnsession主要还是隐藏的配置文件，但是配置文件可以被覆盖，多个session保留最新的applicationid1安装flink（
卤蛋x001·2024-01-16 08:12

flink 1.12 时间语义与WaterMark

一.在新版本中flink默认处理的是事件时间而不是以前默认的处理时间在学习的时候安装新版本步骤容易报错大概的意思就是设置mark或者将事件类型换成ProcessingTime@deprecatedInFlink1.12thedefaultstreamtimecharacteristichasbeenchangedto
卤蛋x001·2024-01-16 08:41

flink1.12 stream windows-top-n

窗口top-Nflink1.12packagecom.cn.stream;importorg.apache.flink.api.common.eventtime.WatermarkStrategy;importorg.apache.flink.api.common.functions.AggregateFunction
卤蛋x001·2024-01-16 08:41

flink 时态表 Join

创建所以可以使时态表功能相近并且时态表可以DDL创建使用时态表函数只能使用TABLEAPI去注册packagecom.cn.sql.joins.temporaljoins;importorg.apache.flink.streaming.api.environment.StreamExecutionEnvironme
卤蛋x001·2024-01-16 08:41

Flink（十三）【Flink SQL（上）】

今天开始学习Flink最后一部分FlinkSQL，完了还有不少框架得学：Kafka、Flume、ClickHouse、Hudi、Azkaban、OOzie...有的算是小工具，不费劲，但是学完得复习啊，
让线程再跑一会·2024-01-16 08:33

flink 1.18 sql demo

flink1.18sqldemo更换flink-table-planner为flink-table-planner-loaderpom.xmlorg.apache.flinkflink-table-api-java-uber1.18.0providedorg.apache.flinkflink-table-runtime1.18.0org.apache.flinkflink-table-api-j
卤蛋x001·2024-01-16 08:03

3、深入解析Redis Cluster集群运维与核心原理

了解RedisCluster的运维及核心原理对于确保系统的高可用性和性能至关重要。
oNuoyi·2024-01-16 08:55

Redis主从架构、哨兵集群原理实战

1.主从架构简介背景单机部署简单，但是可靠性低，且不能很好利用CPU多核处理能力生产环境必须要保证高可用，一般不可能单机部署读写分离是可用性要求不高、性能要求较高、数据规模小的情况目标读写分离，扩展主节点的读能力
水宝的滚动歌词·2024-01-16 07:43

分布式开放消息系统(RocketMQ)的原理与实践

分布式消息系统作为实现分布式系统可扩展、可伸缩性的关键组件，需要具有高吞吐量、高可用等特点。
豆奶快攻·2024-01-16 07:01

flink1.14.5使用CDH6.3.2的yarn提交作业

使用CDH6.3.2安装了hadoop集群，但是CDH不支持flink的安装，网上有CDH集成flink的文章，大都比较麻烦；但其实我们只需要把flink的作业提交到yarn集群即可，接下来以CDHyarn
码道功成·2024-01-16 06:30

架构设计内容分享(六十四)：如果你当架构师，从0开始，如何做一个后台项目的架构？

目录总览一下：后台技术栈结构团队协助基础工具链的选型和培训搭建微服务开发基础设施选择合适的RPC框架选择和搭建高可用的注册中心选择和搭建统一配置中心选择和搭建高性能的缓存中间件选择和搭建高性能的消息中间件选择和搭建高性能的关系数据库选择和搭建高性能的
之乎者也··2024-01-16 06:16

seatunnel 消费kafka数据写入clickhouse

SeaTunnel是一个非常易用、高性能、支持实时流式和离线批处理的海量数据集成平台，架构于ApacheSpark和ApacheFlink之上，支持海量数据的实时同步与转换。
冰帆<·2024-01-16 05:41

Flink-容错机制

Flink中的容错机制流式数据连续不断地到来，无休无止；所以流处理程序也是持续运行的，并没有一个明确的结束退出时间。机器运行程序，996起来当然比人要容易得多，不过希望“永远运行”也是不切实际的。
左美美 ￣　　·2024-01-16 05:24

深入理解 Flink（八）Flink Task 部署初始化和启动详解

JobMaster部署Task核心入口：JobMaster.onStart();部署Task链条：JobMaster-->DefaultScheduler-->SchedulingStrategy-->ExecutionVertex-->Execution-->RPC请求-->TaskExecutorTaskExecutor处理JobMaster的submitTaskRPC请求JobMaster向
我很ruo·2024-01-16 05:21

Kafka和Flink：构建高吞吐量的实时数据流处理系统

ApacheKafka和ApacheFlink是两个非常重要的开源项目，它们分别是一个分布式流处理平台和一个流处理框架。
OpenChat·2024-01-16 05:20

微服务架构设计核心理论：掌握微服务设计精髓

微服务与服务治理1、概述2、TwoPizza原则和微服务团队3、主链路规划4、服务治理和微服务生命周期5、微服务架构的网络层搭建6、微服务架构的部署结构7、面试题二、配置中心1、为什么要配置中心2、配置中心高可用思考三
秃了也弱了。·2024-01-16 03:41

日志采集传输框架之 Flume，将监听端口数据发送至Kafka

1、简介Flume是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构，主要有以下几个部分组成。
知其_所以然·2024-01-16 03:03

ClickHouse - 01

与其特性在大数据处理场景中，流处理和批处理使用到的技术大致如下：大数据处理场景流程.png批处理会将源业务系统中的数据通过数据抽取工具（例如Sqoop）将数据抽取到HDFS中，这个过程可以使用MapReduce、Spark、Flink
ArthurHC·2024-01-16 02:17

Redis高可用（主从复制、哨兵模式和Cluster集群）

目录前瞻主从复制哨兵集群主从复制主从复制的作用主从复制流程搭建Redis主从复制实验准备实验流程修改Redis配置文件（Master节点操作）修改Redis配置文件（Slave节点操作）验证主从效果哨兵模式哨兵模式的作用哨兵结构由两部分组成故障转移机制主节点的选举搭建Redis哨兵模式实验准备实验流程修改Redis哨兵模式的配置文件（所有节点操作）编写故障切换脚本文件并在哨兵模式的配置文件中添加路
GnaW1nT·2024-01-16 01:03

Flink定制化功能开发，demo代码

前言：这是一个Flink自定义开发的基础教学。
i7杨·2024-01-15 23:31

RabbitMQ 的核心组件&工作原理【很重要】

RabbitMQ最初起源于金融系统，用于在分布式系统中存储转发消息，在易用性、扩展性、高可用性等方面都表现不俗，也是目前社区活跃度较高的消息中间件之一。
m0_67394230·2024-01-15 22:56

Docker 如何安装 MySQL 并实现远程连接

而MySQL则是一个广泛使用的开源关系型数据库管理系统，它支持多个平台和各种编程语言，并且具有高性能、高可用性和强大的功能。在本文中，我将分享如何使用Docker安装MySQL并实
咕噜签名-铁蛋·2024-01-15 21:17

13 | 高可用架构案例（一）：如何实现O2O平台日订单500万？

在上一讲中，介绍了高可用系统的设计原则和常见手段。今天呢，会通过一个实际的案例，告诉具体如何落地一个高可用的架构，能够深入理解和运用这些高可用手段。项目背景介绍先说下项目的背景。
_Rye_·2024-01-15 20:05
上一页 31 32 33 34 35 36 37 38 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他