flink高可用

Flink（十一）【状态管理】

Flink状态管理我们一直称Flink为运行在数据流上的有状态计算框架和处理引擎。
让线程再跑一会·2023-12-30 17:49

Apache Flink连载（二十）：Flink On Yarn运行 - Yarn Per-Job模式（弃用）

博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.任务提交命令2.任务提交流程Per-Job模式目前只有yarn支持，Per-job模式从Flink1.15版本开始已经被弃用
IT贫道·2023-12-30 15:02

Apache Flink连载（二十一）：Flink On Yarn运行原理-Yarn Application模式

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.任务提交命令
IT贫道·2023-12-30 15:30

Nginx基础配置及场景应用

场景三：nginx实现动静分离场景四Nginx高可用集群Nginx配置详解配置演示图全局块events块server块，常用要参与改动的块location块简介Nginx是一个高性能的HTTP和反向代理服务器
别告诉我有BUG·2023-12-30 14:38

Flink实时电商数仓（九）

用户注册汇总表需求分析统计各窗口的注册用户数，写入Doris思路分析读取kafka用户注册主题数据转换数据结构string->JSONObject->javaBean使用user_info表中的数据代表用户注册设置水位线开窗聚合写入Doris具体实现创建用户注册统计类继承BaseApp,设置端口，并行度，kafka消费者组，kafka主题（Topic_user_register）启动zookeep
十七✧ᐦ̤·2023-12-30 11:16

【23.12.29期--Redis缓存篇】谈一谈Redis的集群模式

哨兵模式✔️Redis哨兵模式Demo✔️特点✔️Cluster模式✔️RedisCluster模式Demo✔️特点✔️谈一谈Redis的集群模式Redis有三种主要的集群模式，用于在分布式环境中实现高可用性和数据复制
昕宝爸爸爱编程·2023-12-30 11:54

Redis之常用架构

这些架构模式为Redis提供了高可用性、扩展性和容错性.下面我们来逐个了解：主从复制主从复制是redis最基本的架构形式.有一个主节点，和1个或多个从节点组成.主节点负责写请求和部分读请求，从节点负责部分读请求
我就是胖着玩玩的·2023-12-30 11:35

Java技术大纲

常用的设计模式link如何构建高可用系统？
流花一叶·2023-12-30 10:26

GBASE南大通用-一文读懂如何用Zabbix监控GBase 8c

南大通用GBase8c是基于openGauss3.0构建的一款多模多态的分布式数据库，支持行存、列存、内存等多种存储模式和单机、主备式、分布式等多种部署形态，具备多模多态、极高性能、极高可用、极致弹性、
GBASE数据库·2023-12-30 10:19

ClickHouse基础知识（六）：ClickHouse的副本配置

副本的目的主要是保障数据的高可用性，即使一台ClickHouse节点宕机，那么也可以从其他服务器获得相同的数据。
依晴无旧·2023-12-30 09:07

京东短网址高可用回收策略分析

京东原文：京东短网址高可用提升最佳实践|京东云技术团队-知乎此篇文章缺少回收策略，故根据其文章流程图梳理出其架构，分析短链回收策略业务方通过短链服务提供的sdk将长链转换为短链，结构如下目前疑问：难点就是如何复用之前的号段先来梳理一下文章中的一些内容
北i·2023-12-30 09:33

亚信安慧AntDB数据库高可用解决方案助力西南某省高速清分结算系统成功升级

AntDB数据库技术总监北陌近期分享了一项引人注目的成功案例，该案例涉及西南某省高速领域，利用AntDB数据库作为基础架构成功升级了清分结算系统。这一系统升级对比传统架构，呈现出显著的性能提升，其中包括15%的性能改进、90%的业务处理速度提高、40倍以上的负载增加以及30倍以上的数据分析效率提升，同时在成本上实现了惊人的80%的节约。这个成功案例不仅推动了该省高速系统的升级，更为国产数据库在交通
亚信安慧AntDB数据库·2023-12-30 09:27

Flink版本更新汇总（1.14-1.18）

0、汇总========1.14.0========1.有界流支持Checkpoint；2.批执行模式支持DataStream和Table/SQL混合应用；3.新增HybridSource功能；4.新增缓冲区去膨胀功能；5.新增细粒度资源管理功能；6.新增DataStream的Pulsar连接器；========1.15.0========1.支持增量的Savepoint；2.保证作业级别的指标在
猫猫爱吃小鱼粮·2023-12-30 09:55

Flink实时电商数仓（八）

用户域登录各窗口汇总表主要任务：从kafka页面日志主题读取数据，统计七日回流用户：之前活跃的用户，有一段时间不活跃了，之后又开始活跃，称为回流用户当日独立用户数：同一个用户当天重复登录，只算作一个独立用户。思路分析读取kafka页面主题数据转换数据结构：String->JSONObject过滤数据，uid不为null登录的两种情况用户打开应用后自动登录用户打印应用后没有登录，浏览后跳转到登录页面
十七✧ᐦ̤·2023-12-30 09:55

Flink DataStream 编程模型

本文是我的第一篇付费文章，这是个开篇纵览，后面会深入讲解Flink理论与开发，不限于Flink这一个组件，后面也会有Spark、Clickhouse等等，代码也会配套同步到Gitee上面（Gitee地址见文末
大数据技术派·2023-12-30 09:54

Flink Shuffle、Spark Shuffle、Mr Shuffle 对比

总结：1、FlinkShufflePipelinedShuffle：上游Subtask所在TaskManager直接通过网络推给下游Subtask的TaskManager；BlockingShuffle
猫猫爱吃小鱼粮·2023-12-30 09:53

搭建flink集群 —— 筑梦之路

ApacheFlink是一个框架和分布式处理引擎，用于在无边界和有边界数据流上进行有状态的计算。Flink能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。
筑梦之路·2023-12-30 09:04

nfs高可用部署

一、前言为了避免nfs单点问题导致的服务不可用，使用以下架构实现nfs的高可用，keepalived+inotify+rsync+nfs，keepalived实现nfs的高可用，inotify持续监控nfs
Apex Predator·2023-12-30 09:03

微服务事务处理：CAP 定理和最终一致性的关系

**可用性：**每个请求都收到响应（非错误），但不保证是最新数据（类似于高可用性）。**分区容错性：**系统在
surfirst·2023-12-30 08:27

国产数据库华为高斯数据库（GaussDB）功能与特点总结

同时拥有云上高可用，高可靠，高安全，弹性伸缩，一键部署，快速备份恢复，监控告警等关键能力，能为企业提供功能全面，稳定可靠，扩展性强，性能优越的企业级数据库服务。
cxzm_1024·2023-12-30 08:55

如何确保云中高可用？聊聊F5分布式云DNS负载均衡

在当今以应用为中心的动态化市场中，企业面临着越来越大的压力，不仅需要提供客户所期望的信息、服务和体验，而且要做到快速、可靠和安全。DNS是网络基础设施的重要组成部分，拥有一个可用的、智能的、安全和可扩展的DNS基础设施是至关重要的。想简化基于云的DNS管理和负载均衡，减轻运营和开发团队的负担，打造云中可用的强大的DNS，不妨寻求F5分布式云DNS负载均衡的助力。今天就来聊聊，它具有哪些优势。具有负
hanniuniu13·2023-12-30 07:12

Flink 输出至 Elasticsearch

【1】引入pom.xml依赖org.apache.flinkflink-connector-elasticsearch6_2.121.10.0【2】ES6Scala代码，自动导入的scala包需要修改为
程序猿进阶·2023-12-30 06:27

Flink cdc 2.3.0 日前发布，支持众多新特性

连接器增量快照迎来新的连接器成员2.3.0版本MongoDBCDC，OracleCDC两大连接器均支持了增量快照，实现无锁读取+并发读取+断点续传优化2.3.0版本MySQLCDC连接器性能和稳定性大幅提升Flink
青涩的芒果汁·2023-12-30 06:00

mysql cdc 整库迁移 (mysql to mysql)

技术思想利用mysqlcatalog，mysqlcdc，flinkjdbc等技术实现mysql整库迁移至下游数据库，这里是示范mysqltomysql，其他sink组件可自行扩展实现。
青涩的芒果汁·2023-12-30 06:00

flink 消费Kafka 空指针问题

flink消费Kafka空指针问题error：2021-12-0210:51:55,644WARNorg.apache.flink.runtime.taskmanager.Task[]-Source:CustomSource
青涩的芒果汁·2023-12-30 06:30

基于Rsyslog+Kafka+Flink+Clickhouse的高性能日志采集、分析、汇聚存储方法

在上一篇博文中介绍了简单的实用负载均衡与实时监控方案（tengine+rsyslog+goaccess），功能上是满足日常需要的。但是用户的需求是没有止境的，更何况我们做技术的都有一颗追求极致的心。在实际场景中客户需要了解平台整体UV、PV，各功能模块PV、UV，区域PV、UV，各手机型号、应用版本的使用情况，平台使用的趋势分析，功能模块的热度分析等指标。用户端精确埋点和基于Haddop的大数据采
IT 行者·2023-12-30 05:02

RabbitMQ详解

RabbitMQ最初起源于金融系统，用于在分布式系统中存储转发消息，在易用性、扩展性、高可用性等方面表现不俗。具体
武昌库里写JAVA·2023-12-30 05:08

【阿里面试系列】Java线程的应用及挑战

Q群725219329分享并发编程，分布式，微服务架构，性能优化，源码，设计模式，高并发，高可用，Spring，Netty，tomcat，JV
Java架构·2023-12-30 04:12

消息队列的设计与Redis Stream详解为例

文章目录1.为什么会设计Stream2.消息队列功能2.1解耦2.2最终一致性2.3广播2.4错峰与流控2.5综述3.设计消息队列实现队列基本功能3.1RPC通信协议3.2高可用3.3服务端承载消息堆积的能力
LdLtd66·2023-12-30 02:41

浅谈高并发以及三大利器：缓存、限流和降级

软件系统有三个追求：高性能、高并发、高可用，俗称三高。
懂电商API接口的Jennifer·2023-12-30 01:32

关于 K8s 的一些基础概念整理

它为跨主机的容器化应用提供资源调度、服务发现、高可用管理和弹性伸缩等功能。下面简单列一下k8s的几个特性：自动化部署：Kubernetes可以根据应用程序计算资源需求自动分配到node。
液态不合群·2023-12-30 01:54

redis的搭建及应用(四)-redis哨兵机制

redis哨兵机制Redis主从虽然能够增强Redis的高可用性，但是如果主（master）Redis服务忽然下线，需要提升某个从成为主来重新架构。
自信人间三百年·2023-12-30 00:12

PiflowX组件-WriteToKafka

计算引擎flink有界性StreamingAppendMode组件分组kafka端口Inport：默认端口outport：默认端口组件属性名称展示名称默认值允许值是否必填描述例子kafka_hostKAFKA_HOST
暗影八度·2023-12-29 23:14

PiflowX组件-DataGen

具体可以查看Flink官方DataGenconnector。计算引擎flink有界性字段的数据全部生成完成后，source就结束了。因此，有界性取决于字段的有界性。
暗影八度·2023-12-29 23:14

flink generic log-based incremental checkpoints 设计

背景flink在1.15版本后开始提供genericlog-basedincrementalcheckpoints的检查点方案，目的在于减少checkpoint的耗时，尽量缩短端到端的数据处理延迟，本文就来看下这种新类型的
lixia0417mul2·2023-12-29 23:43

PiflowX大数据流水线系统

支持分布式计算引擎flink和spark。以所见即所得的方式，实现大数据采集、处理、存储与分析流程化配置、运行与智能监控。
暗影八度·2023-12-29 23:43

PiflowX组件-ReadFromKafka

计算引擎flink有界性Unbounded组件分组kafka端口Inport：默认端口outport：默认端口组件属性名称展示名称默认值允许值是否必填描述例子kafka_hostKAFKA_HOST“”
暗影八度·2023-12-29 23:13

flink中值得监控的几个指标

背景为了维持flink的正常运行，对flink的日常监控就变得很重要，本文我们就来看一下flink中要监控的几个重要的指标重要的监控指标1.算子的处理速度的指标：numRecordsInPerSecond
lixia0417mul2·2023-12-29 23:12

大数据HelloWorld-Flink实现WordCount

MR，Spark，Flink以来开篇第一个程序都是WordCount。那么今天Flink开始目标就是在本地调试出WordCount。[图片上传失败...
指尖数虫·2023-12-29 22:38

K8S简介(Kubernetes)

Kubernetes这个名字源于希腊语是“舵手”或“飞行员”的意思并且k和s之间有8个字符所以叫作k8s并且Google在2014年开源了KubernetesK8s主要特性高可用，不宕机，自动灾难恢复灰度更新
GG-0408·2023-12-29 22:34

给linux(centos)操作系统设置主机名的几种方式

镜像下载、域名解析、时间同步请点击阿里云开源镜像站一、前言就是我们需要集群部署hadoop,Flink时，写ip地址太长了，然后大家想的就是能不能用比如：node1,node2,node3去代替IP地址
萌褚·2023-12-29 21:13

集群部署篇--Redis 主从模式

Redis服务不能以单机的方式运行，必须有备份，来应对服务挂掉的情况，本文通过docker完成Redis的主从模式部署；Redis主从部署：1.1主从架构介绍：Redis主从架构是一种常见的数据复制和高可用性架构设计
拽着尾巴的鱼儿·2023-12-29 18:23

Java版商城：Spring Cloud+SpringBoot b2b2c电子商务平台，多商家入驻、直播带货及免 费 小程序商城搭建

该产品采用了先进的云计算技术，具有高可用性、高扩展性和高安全性等特点，可以满足不同企业的需求。鸿鹄云商SAAS云产品的核心功能包
2301_77700816·2023-12-29 18:08

零信任 aTrust 本地集群部署

一、本地集群部署使用背景本地集群部署主要是为解决设备高可用问题，为客户提供设备容灾和扩容的能力。
慕容天成·2023-12-29 17:38

Java版直播商城免 费 搭 建：电商、小程序、三级分销及免 费 搭 建，平台规划与营销策略全掌握

该产品采用了先进的云计算技术，具有高可用性、高扩展性和高安全性等特点，可以满足不同企业的需求。鸿鹄云商SAAS云产品的核心功能包
m0_72864708·2023-12-29 17:58

Flink实时电商数仓之DWS层

org.apache.dorisflink-doris-connector-1.17com.janeluoikanalyzer测试代码如下：publicclassIkUtil{publicsta
十七✧ᐦ̤·2023-12-29 17:19

【flink番外篇】9、Flink Table API 支持的操作示例（5）- 表的列操作

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:18

【flink番外篇】9、Flink Table API 支持的操作示例（4）- Table API 对表的查询、过滤操作

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:17

【flink番外篇】9、Flink Table API 支持的操作示例（1）-通过Table API和SQL创建表

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:47

【flink番外篇】9、Flink Table API 支持的操作示例（3）- 通过API查询表和使用窗口函数的查询

Flink系列文章一、Flink专栏Flink专栏系统介绍某一知识点，并辅以具体的示例进行说明。1、Flink部署系列本部分介绍Flink的部署、配置相关基础内容。
一瓢一瓢的饮 alanchan·2023-12-29 17:47
上一页 59 60 61 62 63 64 65 66 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他