airflow高可用第7页

大数据Flume--入门

AgentSourceSinkChannelEventFlume安装部署安装地址安装部署Flume入门案例监控端口数据官方案例实时监控单个追加文件实时监控目录下多个新文件实时监控目录下的多个追加文件FlumeFlume定义Flume是Cloudera提供的一个高可用的

泛黄的咖啡店·2024-02-11 09:04

Clickhouse 优点与缺点（个人测评）

5、开源的列存储，支持线性扩展，简单方便，高可用容错。缺点1

u013250861·2024-02-11 08:48

Redis-基础知识

支持多类型数据结构(字符串、散列、列表、集合、有序集合、范围查询、索引半径查询),内置了复制、LUA脚本、LRU驱动事件、事务和不同级别磁盘持久化,并通过Redis哨兵和自动分区提高可用性.基本知识Redis

向上的小张·2024-02-11 07:11

RabbitMQ学习笔记

适用于中小型企业，但在高并发情况下效率较低，不适用与并发Kafka高吞吐、速度快，但不支持事务，不能保证消息的可靠性一般用于日志传输，不适用于事务场景RocketMQ阿里开发的商业性MQ，商业版收费高吞吐、高可用适用于大规模分布式

努力变优秀的Z·2024-02-11 06:05

RabbitMQ详解以及spring对RabbitMQ的集成(附带部分源码解读)

/wenku.baidu.com/view/e297236f83c4bb4cf7ecd193.html①异步处理(高并发)②系统解耦③流量削锋2丶为什么使用RabbitMQ①给予AMQP协议②高并发③高可用

HAKUNA·MATATA·2024-02-11 06:04

Dynamo：亚马逊的高可用键值存储

Tyler_Zx·2024-02-11 02:34

airflow DAG配置文件

小林帮·2024-02-10 23:31

JAVA 秒杀系统总结

项目要点另一种角度分析：高性能：静态资源，CDN一致性：分布式锁，减库存的几种方式高可用：集群，哨兵，流量控制，消息队列1、库存扣除未加任务处理的下单请求，极有可能在高并发环境下造成超卖。

肥牛火锅·2024-02-10 22:26

使用 kind 部署单机版 kubernetes 集群

它经过CNCF认证，并且支持多节点集群，包括高可用集群。

leileitang_blog·2024-02-10 18:19

如何设计一个高并发系统？

所谓高并发系统，是指能同时处理大量并发请求，并及时响应，从而保证系统的高性能和高可用那么我们在设计一个高并发系统时，应该考虑哪些方面呢？

低吟不作语·2024-02-10 15:20

etcd集群的部署和添加删除节点

简介etcd是一种高可用的、分布式数据库，以键值对的方式存储数据。

南南宫问天·2024-02-10 15:26

nginx+keepalived实现高可用

keepalived是集群管理中保证集群高可用的一个服务，类似于heartbeat，用来防止单节点故障。keepalived工作原理keepalived是以VRRP协议为基础实现的。

四季三餐，有趣有盼·2024-02-10 12:06

Mysql MGR搭建

一、架构说明1.1架构概述MGR(单主)+VIP架构是一种分布式数据库架构，其中数据库系统采用单主复制模式，同时引入虚拟IP(VIP)来提高可用性和可扩展性。

mid的博客·2024-02-10 11:05

03-Debezium的载体Kafka Connect

首先我们要知道，Kafka的特性，例如，topic的分区、I/O结合操作系统的页缓存(pagecache)等，这些令Kafka具备了高吞吐量、低延时及高可用等优点。

Brother Jiawei·2024-02-10 09:32

redis集群架构

一、Redis哨兵高可用架构sentinel哨兵是特殊的redis服务，不提供读写服务，主要用来监控redis实例节点。

小丫么小武·2024-02-10 07:29

redis-sentinel（哨兵模式）

1、哨兵简介:RedisSentinelSentinel(哨兵)是用于监控redis集群中Master状态的工具，其已经被集成在redis2.4+的版本中是Redis官方推荐的高可用性(HA)解决方案。

藻头男·2024-02-10 05:51

DolphinScheduler-3.2.0 集群搭建

注：参考文档：DolphinScheduler-3.2.0生产集群高可用搭建_dophinscheduler3.2.0使用说明-CSDN博客文章浏览阅读1.1k次，点赞25次，收藏23次。

爱吃辣条byte·2024-02-10 01:23

Redis教程（三）——Redis的主从复制

Redis的安装和持久化Redis的安装Redis的持久化Redis的主从复制（replication)Redis的主从复制是组成Redis高可用的一部分，也是必不可少的一部分，通过Redis提供的复制功能

AmosZhu·2024-02-10 00:18

2022-12-02 Redis Cluster （1）通信机制

原文链接https://mp.weixin.qq.com/s/tlocdMlyI4Sx8UxfbuVjTw能提供的能力高可用更高的QPS分布式存储大量数据分散网络流量压力基本架构分区方式虚拟槽分区虚拟槽分区示意图

圆方的鱼·2024-02-09 21:05

Jenkins for Kubernetes实现Slave动态伸缩

JenkinsforKubernetes的好处：Jenkins-Master的高可用。

谁叫我土豆了·2024-02-09 21:20

Airflow根据执行日期，调用kylin

最近接到一个需求,根据Airflow的执行日期，每次往前推3天重新计算kylin中的指标(1)首先需要拿到Airflow的执行日期，根据官网可以知道jinja中可以拿到执行日期{{ds}}（2）然后需要调用

tlp_0190·2024-02-09 18:26

mysql运维内参读后感_MySQL运维内参_ MySQL、Galera、Inception核心原理与最佳实践读书笔记...

曾经在O'Reilly的高可用MySQL里讲到的MMM、MHA则已经被5.7官方的GTID／GroupReplication和GaleraCluster方案代替了？InnoD

weixin_39694016·2024-02-09 14:59

keepalived

文章目录一、Keepalived高可用概述VRRP原理二、Keepalived高可用安装配置安装keepalived配置master配置backup对比master与Backup的keepalived配置区别启动

Dream visit·2024-02-09 05:05

亚马逊认证考试系列 - 知识点 - EBS简介

以一些真实的使用案例来说明这些特性的重要性，例如在某个区域的故障中如何使用EBS来保持应用的高可用性。举例来说，假

customservice·2024-02-09 02:00

《MySQL 简易速速上手小册》第5章：高可用性和灾难恢复（2024 最新版）

文章目录5.1构建高可用性MySQL解决方案5.1.1基础知识5.1.2重点案例：使用Python构建高可用性的电子商务平台数据库5.1.3拓展案例5.2数据备份策略和工具5.2.1基础知识5.2.2重点案例

江帅帅·2024-02-09 02:56

Docker 第十一章： Docker 三剑客之 Swarm （集群管理命令）

Docker三剑客之Swarm（集群管理命令）本章知识点：本文介绍了Docker三剑客之一的Swarm集群管理工具,通过Swarm，用户可以轻松地创建和管理Docker容器集群，实现容器服务的横向扩展和高可用性

半部论语·2024-02-09 01:45

如何构建一个高效的微服务治理闭环管理体系

1、微服务治理概述微服务治理是指对微服务架构中的服务进行有效管理和控制，确保服务的高可用性、高性能和安全性，前面已经介绍过，这里包括诸如服务注册与发现、服务配置管理、服务监控、服务限流、服务熔断、

灸哥漫谈·2024-02-08 19:04

k8s1.20 搭建-抛弃docker使用containerd

玄德公笔记·2024-02-08 19:00

Raft算法在Curve中的实践

article/details/110006508【嵌牛导读】：本文介绍了RAFT算法的特点和基本应用【嵌牛鼻子】：Curve实践【嵌牛模块】：RAFT算法概念、特点、应用场合【嵌牛正文】：urve作为高性能、高可用

xx_d18b·2024-02-08 19:45

高可用 k8s 1.29 一键安装脚本, 丝滑至极

博客原文文章目录集群配置配置清单集群规划集群网络规划环境初始化主机配置配置高可用ApiServer安装nginx安装Keepalived安装脚本需要魔法的脚本不需要魔法的脚本配置自动补全加入其余节点验证集群集群配置配置清单

M·K·T·2024-02-08 15:44

windows server 域控器 AD DC

文章目录ADDC入门概念ActiveDirectory域服务概述修改dc计算机名更改AD域安全策略安装域控设置域控域控制器高可用ADDC入门概念ActiveDirectory域服务概述目录是存储有关网络上对象的信息的层次结构

gslhelloworld·2024-02-08 14:58

聊聊PowerJob Server的高可用

序本文主要研究一下PowerJobServer的高可用PowerJobSpringWorkertech/powerjob/worker/PowerJobSpringWorker.javapublicclassPowerJobSpringWorkerimplementsApplicationContextAware

hello_ejb3·2024-02-08 13:52

云计算中的边缘云治理方案是什么？-薪享宏福

该方案通过确保大带宽和超低的往返时延，保证高可用性和高安全性以及全面的软件栈，体现与边缘云相关的业务和技术优势。具备以下特性的边缘云治理方案可以提供服务提供商所需要的灵活性、高性能和运营商级可靠性。

北京薪享宏福·2024-02-08 12:50

网站高可用架构设计——存储，分层，计算高可用

编程广角镜·2024-02-08 12:16

网站高可用架构设计——服务高可用

一、服务高可用基础接口级故障的典型表现就是系统并没有宕机，网络也没有中断，但业务却出现问题了。

编程广角镜·2024-02-08 12:14

《Redis开发与运维》学习笔记3:主从复制，哨兵和集群

聚焦于Redis的分布式和集群部分，转载注明出处：https://blog.csdn.net/Koikoi12复制复制可以在分布式系统中实现相同数据的多个Redis副本，满足故障恢复和负载均衡等需求，是高可用的

Koikoi123·2024-02-08 10:50

类比

一款开源的分布式文件系统，冗余备份、负载均衡、线性扩容等机制，并注重高可用、高性能等指标类比：图书馆有什么用？

lzb30·2024-02-08 10:07

RabbitMQ高可用架构涉及常用功能整理

RabbitMQ高可用架构涉及常用功能整理1.rabbitmq的集群模式2.镜像模式高可用系统架构和相关组件3.rabbitmq的核心参数3.1镜像策略3.2新镜像同步策略3.3从节点晋升策略3.4主队列选择策略

李姓门徒·2024-02-08 09:44

[缓存] - Redis

来代替在存到Redis之前压缩数据设置key有效期选择回收策略(maxmemory-policy)减少不必要的连接限制redis的内存大小（防止swap，OOM）slowLog使用pipline批量操作数据2.高可用

don't_know·2024-02-08 08:33

BAT架构师进阶：大型网站架构书籍推荐

liuhuiteng·2024-02-08 07:40

大数据系列—数据迁移(Sqoop,Flume,DataX)对比学习（stage3）

个人大数据技术栈：DataX,Sqoop,Hadoop,Hive,Spark,Flink,Hbase,Kafka,Kettle,Azkaban,Airflow,Tableau…个人在学习领域：Python

道-闇影·2024-02-08 06:07

中移在线：基于openGauss的数据库自主创新替代实践

中移在线基于openGauss输出了安全可控、数据无损、业务低感知的自主创新数据库替代方案，不仅满足了业务应用的自主创新转型要求，其高可用架构和高性能优势也提升了业务系统的稳定性和服务效率。

openGaussMan·2024-02-08 05:10

京东云StarDB for openGauss实现混合多云场景元数据安全可控

基于openGauss产品的高性能、高可用、高智能、高安全四大核心特性，京东云推出了StarDBforopenGauss的商业版本，作为一款基

openGaussMan·2024-02-08 05:09

rac oracle安装流程

它可以让多个oracle实例同时运行在不同的服务器上，从而实现高可用性和负载均衡。但是，rac的安装过程相对于单节点数据库来说要更加复杂一些。本文将为大家介绍racoracle安装的详细步骤。

Mr. Sun_·2024-02-08 05:12

消息队列使用的四种场景介绍

实现高性能，高可用，可伸缩和最终一致性架构。使用较多的消息队列有ActiveMQ，RabbitMQ，ZeroMQ，Kafka，MetaMQ，RocketMQ。

Bin哥厉害7·2024-02-08 03:19

关于TDSQL(MySQL)的简单知识分享

1.1TDSQL优点：数据强一致性高性能低成本线性水平扩展金融级高可用企业级安全性便捷的运维1.2TDSQL系统总览资源池：TDSQL部署的服务器资源。

小满别摸鱼·2024-02-08 01:20

使用Keepalived实现Nginx的双机主备高可用

1、概述前面我们聊过使用Nginx为后端Tomcat做负载均衡、高可用，但是这时Nginx又成了单点，如果Nginx不幸挂掉，整个网站便无法访问。此时我们就会用到另一个软件——Keepalived。

追风人聊Java·2024-02-08 01:51

ElasticSearch基本概念介绍

ElasticSearch：一个基于lucene的搜索服务器，提供一个高可用、分布式多用户能力、开源的全文检索引擎、分布式文档存储引擎、数据分析引擎。可以存储、搜索和实时快速的分析大量数据。

林深见鹿与·2024-02-07 23:31

1.0 Zookeeper 分布式配置服务教程

ZooKeeper的架构通过冗余服务实现高可用性。Zookeeper的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来，构成一个高效可靠的原语集，并以一系列简单易用的接口提供给用户使用。

二当家的素材网·2024-02-07 22:00

AIRFLOW 安装方式和方法及配置信息详细说明

AIRFLOW安装方式和方法ApacheAirflow可以通过多种方式进行安装，其中常见的方式包括本地安装、使用Docker运行Airflow容器、通过PyPI安装等。

weixin_41659546·2024-02-07 21:20

推荐频道

airflow高可用