flink高可用

上传jar包到flink环境遇到的问题

1、运行命令：flink版本1.13.2flinkrun-ccom.zf.online_record_monitor.Monitor/home/flink/analysis-1.0.0.jar2、遇到问题
赵凡在·2024-01-30 16:50

Flink 使用之 CEP（SQL方式）

Flink使用介绍相关文档目录Flink使用介绍相关文档目录SQLmatchrecognize本篇为Flink使用之CEP后续。如果您对CEP不了解，请先浏览Flink使用之CEP。
AlienPaul·2024-01-30 16:19

如何接手一个大数据项目

以下是个人的一些思考总结：了解一个大数据系统，我认为需要从以下几个方面入手：宏观方面：1.了解系统的整体架构和技术栈：需要了解系统中使用的技术栈，包括各种大数据组件和工具，例如Hadoop、Spark、Hive、Flink
Mmj666·2024-01-30 15:19

ZK和ETCD的产品对比和差异

ZK和ETCD的产品对比和差异1.底层实现1.1高可用机制1.2数据结构2.客户端视角2.1临时数据2.2监听机制探讨zk和etcd的底层实现以及客户端使用上的差异。
李姓门徒·2024-01-30 15:03

Redis：企业级的深入

高可用性：集群中的每个节点都可以包含数据的部分副本，确保即使其中一个节点出现故障，其他节点依然可以继续提供服务。自动分片和负载均衡：Redis集群支持自动分片，无
星光闪闪k·2024-01-30 15:16

多地多活与单元化架构

为了提高系统的伸缩能力与高可用能力，我们都不断的在努力消除系统单点瓶颈。如使用应用集群是为了解决服务层的单点问题，使用主从数据库是为了解决数据库层面的单点问题。
IT枫斗者·2024-01-30 13:12

消息中间件RabbitMQ介绍

消息队列（MQ）是一种应用程序对应用程序的通信方法，由Erlang（专门针对于大数据高并发的语言）语言开发，可复用的企业消息系统，是当前最主流的消息中间件之一，具有可靠性、灵活的路由、消息集群简单、队列高可用
xmh-sxh-1314·2024-01-30 12:56

高性能和多级高可用，云原生数据库 GaiaDB 架构设计解析

1云原生数据库和GaiaDB目前，云原生数据库已经被各行各业大规模投入到实际生产中，最终的目标都是「单机+分布式一体化」。但在演进路线上，当前主要有两个略有不同的路径。一种是各大公有云厂商选择的优先保证上云兼容性的路线。它基于存算分离架构，对传统数据库进行改造，典型产品有AWSAurora、阿里云PolarDB、腾讯云TDSQL-C、百度智能云GaiaDB。数据库作为公有云上的核心基础设施，第一要
百度智能云技术站·2024-01-30 12:22

Redis面试（二）

1.Redis集群了解吗前面说到了主从同步存在高可用和分布式问题，哨兵机制解决了高可用问题，而集群就是终极方案，一举解决高可用和分布式问题。
海的辽阔·2024-01-30 12:21

flink sql 知其所以然（十六）：flink sql 开发企业级利器之 Dlink

1.序篇博主这个系列都是讲flinksql相关的实践的。讲到这个章节，其实挺多常用的flinksql语法及实战案例都已经讲了。那么原理讲了，得在自己家公司把flinksql这等好东西用起来啊。
大数据羊说·2024-01-30 11:06

Flink的SQL开发

概叙Flink有关FlinkSQL的官网:https://nightlies.apache.org/flink/flink-docs-release-1.13/zh/docs/dev/table/sql
Appreciate(欣赏)·2024-01-30 11:05

本地MinIO存储服务通过Java程序结合Cpolar内网穿透进行远程连接

它的优点包括高性能、高可用性、易于部署和管理、支持多租户等。Cpolar
小沈YO.·2024-01-30 11:01

高可用架构之异地多活

当谈到架构的高可用时，无论是高可用计算架构，还是高可用存储架构，其本质的设计目的都是为了解决部分服务器故障的场景下，如何保证系统能够继续提供服务。但在一些极端场景下，有可能所有服务器都出现故障。
满载星辉·2024-01-30 10:54

企业链表实现-C语言

LinkList.h#ifndefLINKLIST_H#defineLINKLIST_H#include#include//链表小结点typedefstructLINKNODE{structLINKNODE
沈跃泉·2024-01-30 10:39

电商库存系统一

这对库存系统的准确性和可靠性提出了很高的要求，在各种场景下能保证数据的准确，在遇到突发流量时能保证高可用，除此之外，还需要提供熔断和降级的能力，保证在极端情况下不拖垮主站。
程序员的自我修养·2024-01-30 10:50

Flink SQL:CREATE Statements

CREATEStatementsCREATEstatementsareusedtoregisteratable/view/functionintocurrentorspecifiedCatalog.Aregisteredtable/view/functioncanbeusedinSQLqueries.CREATE语句用于将表/视图/函数注册到当前或指定的目录中。注册的表/视图/函数可以用于SQL查
曹木青芸·2024-01-30 10:25

flink sql 语法校验

flinksql语法校验说明：apacheflink源码的校验方式1新增依赖包org.apache.flinkflink-table-planner-blink_${scala.binary.version
老鼠扛刀满街找猫@·2024-01-30 10:20

【大数据】Flink SQL 语法篇（一）：CREATE

FlinkSQL语法篇（一）1.建表语句2.表中的列2.1常规列（物理列）2.2元数据列2.3计算列3.定义Watermark4.CreateTableWith子句5.CreateTableLike子句
G皮T·2024-01-30 10:16

软件系统架构黄金法则：事件驱动架构的力量

传统架构往往采用同步、阻塞的方式进行通信，这种方式在处理高并发、高可用、高性能的场景下，往往会遇到瓶颈。此外，传统架构的耦合性较高，不利于系统的扩展和维护。
OpenChat·2024-01-30 10:37

Xds （eXtensible Discovery Service）理解

XDS协议的设计目标是支持大规模、动态和高可用的微服务架构。组成RDS（RouteDiscoveryService）：RDS是X
yuluo_YX·2024-01-30 09:31

ES实战回顾

业务监控、搜索sug功能、B/M端的一些，业务历史数据，业务单等3、这些索引怎么配置的高可用？
shuimuhanchen·2024-01-30 08:29

【极数系列】Flink集成DataSource读取Socket套接字数据（09）

文章目录01引言02简介概述03基于socket套接字读取数据3.1从套接字读取。元素可以由分隔符分隔。3.2windows安装netcat工具（1）下载netcat工具（2）安装部署（3）启动socket端口监听04源码实战demo4.1pom.xm依赖4.2创建socket数据流作业4.3实时cmd窗口输入数据01引言源码地址,一键下载可用：https://gitee.com/shawsong
浅夏的猫·2024-01-30 08:39

PyFlink使用教程，Flink，Python，Java

环境准备环境要求Java11Python3.7,3.8,3.9or3.10文档：https://nightlies.apache.org/flink/flink-docs-release-1.17/zh
raoxiaoya·2024-01-30 08:09

【极数系列】Flink集成DataSource读取文件数据（08）

文章目录01引言02简介概述03基于文件读取数据3.1readTextFile(path)3.2readFile(fileInputFormat,path)3.3readFile(fileInputFormat,path,watchType,interval,pathFilter,typeInfo)3.4实现原理3.5注意事项3.6支持读取的文件形式04源码实战demo4.1pom.xml依赖4.
浅夏的猫·2024-01-30 08:33

【大数据】Flink SQL 语法篇（二）：WITH、SELECT & WHERE、SELECT DISTINCT

FlinkSQL语法篇（二）1.WITH子句2.SELECT&WHERE子句3.SELECTDISTINCT子句1.WITH子句应用场景（支持Batch/Streaming）：With语句和离线HiveSQLWith
G皮T·2024-01-30 07:21

Flink问题解决及性能调优-【Flink rocksDB读写state大对象导致背压问题调优】

RocksDB是Flink中用于持久化状态的默认后端，它提供了高性能和可靠的状态存储。
PONY LEE·2024-01-30 07:48

Hadoop与Spark横向比较【大数据扫盲】

它们通常提供简单的查询语言，并强调水平扩展和高可用性。例如：-键值存储：如Redis，AmazonDynamoDB-列式存储：如ApacheCassandra，HBase-文档数据库：如M
super_journey·2024-01-30 06:51

Flink CDC 3.0 表结构变更的处理流程

FlinkCDC3.0表结构变更的处理流程表结构变更主要涉及到三个类SchemaOperator、DataSinkWriterOperator（Sink端）和SchemaRegistry（协调器）；SchemaOperator
过悟·2024-01-30 06:10

使用 CDC MinIO 汇入端为 CockroachDB 保持持久数据

它从其昆虫名字的坚持不懈中汲取灵感，即使面对硬件故障，CockroachDB也能保证高可用性。其分布式架构横跨多个节点，类似于其昆虫原型的适应性。
MinIO官方账号·2024-01-30 04:28

最全的RocketMQ学习指南，程序员必备的中间件技能

高可用，具有跟踪和审核功能万亿级消息
丰极·2024-01-30 03:53

架构篇26：高可用存储架构-集群和分区

文章目录数据集群数据分区小结上一篇我们讨论了高可用存储架构中常见的双机架构，分别为主备复制、主从复制、双机切换和主主复制，并分析了每类架构的优缺点以及适应场景。
星猿杂谈·2024-01-30 01:37

GFS--Google File System论文翻译和理解

一、系统设计目标高可用的大文件分布式文件系统。二、关键点Architecture-架构：有哪些Server，每个Server的功能。Master存储的MetaData的结构。client写数据流程。
不争_900c·2024-01-29 23:00

配置nginx+keepalived高可用代理数据库ip端口

需求：配置nginx+keepalived高可用反向代理数据库ip端口（数据库服务器无法增加新SCANIP或者需要隐藏数据库IP的情况下适用）环境准备：两台centos7.9本机ip为：192.168.20.10
好记忆不如烂笔头abc·2024-01-29 21:37

PiflowX组件-FileRead

计算引擎flink组件分组file端口Inport：默认端口outport：默认端口组件属性名称展示名称默认值允许值是否必填描述例子pathpath“”无是文件路径。
PiflowX·2024-01-29 18:03

PiflowX组件-FileWrite

计算引擎flink组件分组file端口Inport：默认端口outport：默认端口组件属性名称展示名称默认值允许值是否必填描述例子pathpath“”无是文件路径。
PiflowX·2024-01-29 18:29

Flink容错机制

Flink提供了容错机制，可以恢复数据流应用到一致状态。
王知无·2024-01-29 18:11

K8S、keepalived、haproxy 高可用集群实战

K8S、keepalived、haproxy高可用集群实战环境：Centos7.6、2个CPU、8G内存以上配置Master1：172.20.26.24Master2：172.20.26.86Master3
lqcbj_IT老混混·2024-01-29 17:09

美团外卖搜索基于Elasticsearch的优化实践

然而在高并发、高可用、大数据量的C端场景，目前可参考的资料并不多。因此，我们希望通过分享在外卖搜索场景下的优化实践，能为大家提供Elasticsearch优化思路上的一些借鉴。
架构未来·2024-01-29 17:07

开发项目发布可能会涉及的流程

服务器选型当选择软件开发项目的服务器时，可以考虑以下几个方面：云服务提供商：主流的云服务提供商包括阿里云、腾讯云、华为云等，它们提供了可靠的服务器托管服务，具有高可用性和可扩展性。
仲夏那片海·2024-01-29 16:27

数据湖技术之应用场景篇

比如说在线数据抽取场景原有模式对线上库表产生较大压力，flink多流join维护的大状态导致的稳定性问题等等，具体场景如下图所示：场景1:在线数据抽取业务一般会从线上mysql库表以离线方式抽取全量数据到
风筝Lee·2024-01-29 16:04

Eureka服务集群DS Replicas为空

Eureka在相互注册（集群）形成高可用时DSReplicas为空今儿在用eureka相互注册，想要形成集群时，通过网页浏览时DSReplicas显示为空，如下：查询别人的说法，最后实践验证，如下方法可行
Jastep·2024-01-29 15:00

Fink CDC 1.0 至3.0的从古至今

本文主要分享FlinkCDC1.0至3.0的发展历程，了解其背后的关键特性和发展趋势，探讨其在大数据领域的影响和价值。
小枫@码·2024-01-29 14:07

程序世界里的不信任原则

导语人与人之间最重要的是信任，但程序的世界里，可能信任越少越好；我越发觉得越是高性能高可用的系统里，不信任原则会体现得更加淋漓尽致。
秃头老码农·2024-01-29 13:16

SRE--redis集群高可用篇

1.Redis集群与高可用1.1redis的编译安装#下载redis二进制安装的依赖包root@redis-server:~#apt-yinstallmakegcclibjemalloc-devlibsystemd-dev
优质&青年·2024-01-29 11:17

Keepalived+Haproxy+Mysql(双主)高可用架构部署

一、背景公司原部署的Mysql架构为keepalived+Mysql双主，但是这个架构有个缺陷是所有的读写请求都在一台机器上(VIP所在机器)，造成另一台机器空闲，导致资源浪费，为了解决这个问题，所以需要往Keepalived和mysql之间增加一个haproxy负载均衡插件，将读写请求均衡分布到两台机器上。二、安装keepalived心跳+Mysql双主架构（原有架构）参考：1、快速编译安装my
seaskyccl·2024-01-29 10:10

读写分离MySQL+MHA+MAXSCALE集群高可用

需要的包下载：（MHA0.57+MAXSCALE1.432.0）http://down.51cto.com/data/2258543http://down.51cto.com/data/2258544http://down.51cto.com/data/2258545架构图：要点：1、安装配置MHA2、主从搭建3、MAXSCALE安装配置4、单节点故障简介：MasterHighAvailabili
seaskyccl·2024-01-29 10:10

5大主流方案对比：MySQL千亿级数据线上平滑扩容实战

1.2停写方案1.3日志方案1.4双写方案（中小型数据）1.5平滑2N方案（大数据量）2.平滑2N扩容方案实践2.1实现应用服务级别的动态扩容2.2实现数据库的秒级平滑2N扩容3.keepalived高可用配置大全
seaskyccl·2024-01-29 10:10

Mysql5.7高可用集群MHA搭建+shell脚本监测切换Manager节点解决单点故障问题

安装MHA五、Manage工具测试五、Shell脚本监测Manager节点解决单点故障问题六、数据库集群的故障测试及切换测试总结前言MHA（MasterHighAvailability）目前在MySQL高可用方面是一个相对成熟的解
seaskyccl·2024-01-29 10:39

想要彻底搞懂大厂是如何实现Redis高可用的？看这篇文章就够了！(1.2W字，建议收藏）

高可用HA（HighAvailability）是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。假设系统一直能够提供服务，我们说系统的可用性是100%。
跟着Mic学架构·2024-01-29 10:54

八种Flink任务告警方式

目录一、Flink应用分析1.1Flink任务生命周期1.2Flink应用告警视角分析二、监控告警方案说明2.1监控消息队中间件消费者偏移量2.2通过调度系统监控Flink任务运行状态2.3引入开源服务的
i7杨·2024-01-29 09:40
上一页 16 17 18 19 20 21 22 23 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他