airflow高可用第17页

feichang_notlike3·2024-01-22 06:06

同城双活与异地多活架构分析

本文首发于vivo互联网技术微信公众号链接：https://mp.weixin.qq.com/s/OjfFcjnGWV5kutxXndtpMg作者：vivo官网商城开发团队采用高可用系统架构支持重要系统

vivo互联网技术·2024-01-22 03:14

Apache Zeppelin结合Apache Airflow使用1

ApacheZeppelin结合ApacheAirflow使用1文章目录ApacheZeppelin结合ApacheAirflow使用1前言一、安装Airflow二、使用步骤1.目标2.编写DAG2.加载

旻璿gg·2024-01-22 01:45

MQ与RabbitMQ面试题（持续更新...）

(重要)如何保证高可用的？RabbitMQ的集群MQ的

心安成长·2024-01-21 23:17

解锁高性能工具etcd大牛们常用的命令

目录1.前言2.常用命令3.总结1.前言etcd简介：etcd是CoreOS团队于2013年6月发起的开源项目，它的目标是构建一个高可用的分布式键值(key-value)数据库。

北京-景枫·2024-01-21 20:25

深耕文档型数据库12载，SequoiaDB再开源

本次活动回顾了巨杉数据库深耕JSON文档型数据库12年的发展历程与技术演进，全面解读了SequoiaDB包括在高可用、安全、实时、易用性四个方向的技术特性，宣布了2024年面向技术社区的开源计划。

巨杉数据库SequoiaDB·2024-01-21 18:30

MySQL主从集群

当单机模式部署，不满足安全性、高可用、高并发等需求的时候，就需要考虑主从模式或者集群模式部署。什么是主从模式？

连不到蓝牙·2024-01-21 16:18

什么是中间件？

中间件生态漫谈数据库中间件读写分离分库分表引进数据库中间件MyCat服务端代理模式ShardingJDBC客户端代理模式总结IT系统从单体应用逐渐向分布式架构演变，高并发、高可用、高性能、分布式等话题变得异常火热

善守的大龙猫·2024-01-21 15:44

HBase节点故障的容错方案

HBase节点故障的容错方案1.Master高可用1.1选主和HA切换逻辑2.RS高可用2.1感知RS节点异常2.2异常DN上的数据处理4.疑问和思考5.参考文档本文主要探讨hbase集群的高可用容错方案和容错能力的探讨

李姓门徒·2024-01-21 14:31

【系统架构】消息中间件的架构和原理

消息中间件的作用就是用来异步化并发能力的一个载体，不仅如此，它仍然需要在架构上保证很多能力，高可用，高并发，可扩展，可靠性，完整性，保证顺序等，光是这些都已经让各种设计者比较头疼了；更有一些变态的需求，

禅与计算机程序设计艺术·2024-01-21 14:32

Nginx反向代理配置模块详解

Nginx反向代理配置模块详解一、前言随着互联网的发展，Web应用越来越广泛，随之而来的是对Web服务器的高并发、高可用、高性能等需求的日益增长。

M乔木·2024-01-21 13:00

【论文阅读】Non-blocking Lazy Schema Changes in Multi-Version

第二个是满足高可用，SaaS、PaaS要提供高可用的系统给用户，停机更新是不可以的。高可用且不牺牲一致性的系统要有以下特点：隔离级别：事务中不能发生

Tototototorres·2024-01-21 12:08

【征服Redis12】redis的主从复制问题

在实际应用中，为了保证Redis的高可用性，通常需要使用主从复制来进行数据备份和故障转移。本文将介绍Redis主从复制的概念、原理和实现方式，以及主从复

纵横千里，捭阖四方·2024-01-21 11:31

Centos7中KeepAlived&Nginx高可用

Centos7中KeepAlived&Nginx高可用一.部署前规划角色操作系统IPmasterCentos7.8192.168.56.101backupCentos7.8192.168.56.102二

冰之杍·2024-01-21 11:59

【redis13】集群前奏：sentinel模式

1.哨兵sentinel引入背景我们现在来思考一个问题：如何实现服务的高可用。

纵横千里，捭阖四方·2024-01-21 11:26

Zabbix分布式监控系统概述、部署、自定义监控项、邮件告警

目录前言（一）业务架构（二）运维架构一、Zabbix分布式监控平台（一）Zabbix概述（二）Zabbix监控原理（三）Zabbix6.0新特性1.Zabbixserver高可用2.Zabbix6.0LTS

江南字子川·2024-01-21 09:33

Redis持久化和集群架构

目录Redis持久化RDB快照（snapshot）RDB优点RDB缺点RDB的触发机制AOF持久化AOF文件重写AOF触发机制混合模式Redis主从架构Redis哨兵高可用架构RedisCluster架构槽位定位算法跳转重定位

山鸟与鱼！·2024-01-21 08:33

HDFS节点故障的容错方案

HDFS节点故障的容错方案1.NN高可用1.1选主逻辑1.2HA切换1.3注意点1.3.1fencing的处理1.3.2健康状态的定义1.3.3确保zk中的父节点存在1.3.4确保NN的ID与IP保持一致

李姓门徒·2024-01-21 07:06

YARN节点故障的容错方案

YARN节点故障的容错方案1.RM高可用1.1选主和HA切换逻辑2.NM高可用2.1感知NM节点异常2.2异常NM上的任务处理4.疑问和思考4,1RM感知NM异常需要10min，对于app来说是否太长了

李姓门徒·2024-01-21 07:06

关于常见分布式组件高可用设计原理的理解和思考

文章目录1.数据存储场景和存储策略1.1镜像模式-小规模数据1.2分片模式-大规模数据2.数据一致性和高可用问题2.1镜像模式如何保证数据一致性2.2镜像模式如何保证数据高可用2.2.1HA模式2.2.2

李姓门徒·2024-01-21 07:30

【数据库】聊聊InnoDB存储引擎结构

高可用、高性能等。本篇主要从InnoDB切入，了解，一行数据在InnoDB中是如何存储的。MySQL逻辑架构InnoDB架构从架构上可以看出，主要分的是内存结构和磁

qxlxi·2024-01-21 06:44

构建高可用消息队列系统 01

构建高可用消息队列系统01引言1.RabbitMQ简介介绍1.1什么是RabbitMQ1.2RabbitMQ的核心特性1.3RabbitMQ与AMQP2.安装RabbitMQ3.消息队列实践总结引言在当今互联网时代

叶秋∵·2024-01-21 06:43

RabbitMQ 消息队列入门

什么是RabbitMQMQ（MessageQueue）消息队列消息队列中间件，是分布式系统中的重要组件；主要解决异步处理、应用解耦、流量削峰等问题，从而实现高性能，高可用，可伸缩和最终一致性的架构。

RendaZhang·2024-01-21 05:01

【MySQL】索引

一、InnoDB存储引擎InnoDB是一种兼顾高可用、高性能的通用存储引擎。

小星星*·2024-01-21 00:09

Hologres V2.1版本发布，新增计算组实例构建高可用实时数仓

V2.1版本简介新增弹性计算组实例，解决实时数仓场景下分析性能、资源隔离、高可用、弹性扩缩容等核心问题，同时新增多种用户分析函数与实时湖仓Paimon格式支持，COUNTDISTINCT优化显著提升查询效率

阿里云大数据AI技术·2024-01-20 21:07

mysql主从,高可用复制原理（I）

1.简介mysql从3.23版本开始提供复制功能，复制是将主库的DDL（就是改变结构的语句createtable，droptable等）和DML（数据库操作语句增删改查）操作通过二进制日志传递到复制服务器（从库）上，然后从库对这些日志重新执行（重做），从而使得主库和从库保持数据一致。2.为什么要做主从复制？在业务复杂的系统中，有这么一个情景，有一句sql语句需要锁表，导致暂时不能使用读的服务，那么

Michaelwubo·2024-01-20 20:57

kubernetes (k8s) 二进制高可用安装

kubernetes(k8s)二进制高可用安装https://github.com/cby-chen/Kubernetes开源不易，帮忙点个star，谢谢了GitHub访问不通畅可以访问国内GitEEhttps

小陈运维·2024-01-20 17:14

etcd基本介绍

etcd基本介绍ETCD是SoreOs公司发布的一个分布式的、高可用的、key-value存储的数据库。基于Go语言实现，k8s中也使用了ETCD作为数据库。主要用于共享配置和服务发现。

连不到蓝牙·2024-01-20 17:44

seate分布式锁三种模式

2.高可用性：在分布式场景下，一

爱生活，更爱技术·2024-01-20 16:20

upstream这个模块在nginx配置文件中的作用

通过使用负载均衡算法，您可以将请求分配给多个服务器，以提高可用性和性能。在配

技术老男孩·2024-01-20 15:05

设计 Mint.com

Update整理transaction所有的手动目录由User覆盖没有自动化的重排机制·-通过目录分析月消费Service推荐budget允许user去手动设置budget没有自动化的重组目录Service有高可用作用域

李黎明·2024-01-20 12:13

设计社交网络的数据结构

1:确定UseCase和约束UseCasesUser搜索某人然后看到被搜索人的最短路径Service有高可用约束和假设状态假设Traffic不是平均分布的一些被搜索者是更加受欢迎的，某些被搜索者只会被搜索一次图数据不适用与单个机器图的分布是轻量级的一亿个

李黎明·2024-01-20 12:11

【Redis】三种集群模式（主从复制、哨兵模式、Cluster）

cluster模式是redis官方提供的集群模式，使用了Sharding技术，不仅实现了高可用、读写分离、也实现了真正的分布式存储。一、主从复制Redis的主从复制是一

hope笔记·2024-01-20 10:34

Redis深入理解、面试常问、疑难解答

6、Redis高可用的几种实现方式6.1主从复制6.2哨兵模式6.3分片集群7、Redis持久化方式7.1、RDB7.2、AOF8、Redis锁原理Redis常问面试题1、Redis支持哪几种数据类型？

北漂IT民工_程序员_ZG·2024-01-20 06:27

阿里云、腾讯云、华为云各家云服务器优势汇总

1、高可用性相较于普通的IDC机房以及服务器厂商，阿里云使用

阿里云最新优惠和活动汇总·2024-01-20 04:09

RocketMQ

文章目录一、初识RocketMQ二、NameServer三、消息发送3.1Topic路由机制3.2消息发送高可用设计3.3DefaultMQProducer3.4消息发送基本流程四、消息存储4.1存储文件的组织方式

解梦者·2024-01-20 00:35

linux运维工程师日常工作事务

2.操作系统故障排除依据操作系统故障日志分析出现该报警或报错的原因，从而解决问题，保证操作系统的高可用性。

zuo84526076·2024-01-19 23:37

linux运维工程师日常都是什么工作，请说的具体点

2.操作系统故障排除依据操作系统故障日志分析出现该报警或报错的原因，从而解决问题，保证操作系统的高可用性。

风轻云淡Toby·2024-01-19 23:32

k3s 搭建高可用rancher

注意：ubuntu20.0.4环境安装第一步安装k3sserver节点curl-sfLhttps://rancher-mirror.oss-cn-beijing.aliyuncs.com/k3s/k3s-install.sh|INSTALL_K3S_MIRROR=cn\K3S_KUBECONFIG_OUTPUT=/root/.kube/configINSTALL_K3S_VERSION=v1.20

品儿·2024-01-19 22:24

互联网系统架构演变

目录1.程序三高1）高并发2）高性能3）高可用2.传统架构2.1提高服务器性能（单机）2.2增加服务器数量（DNS负载均衡）2.3负载均衡负载均衡的功能总结负载均衡种类负载均衡——主流的软件解决方案Apache

浮生带你学Java·2024-01-19 21:46

Clickhouse安装部署及简单使用

它的设计目标是提供高性能、高可用性和可扩展性，同时保持简单易用的特点。在本教程中，我们将介绍如何安装和部署ClickHouse，并提供一些简单的使用示例。

蓝胖子的宝贝·2024-01-19 21:11

用 Hystrix 构建高可用服务架构（下）

7.基于本地缓存的fallback降级机制Hystrix出现以下四种情况，都会去调用fallback降级机制：1.断路器处于打开的状态。2.资源池已满（线程池+队列/信号量）。3.Hystrix调用各种接口，或者访问外部依赖，比如MySQL、Redis、Zookeeper、Kafka等等，出现了任何异常的情况。4.访问外部依赖的时候，访问时间过长，报了TimeoutException异常。两种最经

久伴_不离·2024-01-19 19:12

MMEMO的关键设计思路

MMEMO的关键设计思路是仅仅把最重要的信息——例如系统角色和智能合约——存储在高安全性，高可靠性和高可用性的区块链的主链上，同时把其他的不那么重要的信息存储在边缘设备中，以此来打破区块链潜在的性能瓶颈

WhatsMEMO·2024-01-19 19:10

PHP之秒杀设计

前言源自慕课网皮奇秒杀设计课程所做的笔记课程目标掌握秒杀系统的核心实现系统高可用的方法论学习高并发场景的通用解决思路学习原理知识介绍减而治之（CDN原理/nginx限流/异步队形）分而治之（nginx负载均衡

东东锵·2024-01-19 18:35

RabbitMQ超详细安装教程（Linux）

简介官网：https://www.rabbitmq.com/RabbitMQ是一个开源的遵循AMQP协议实现的基于Erlang语言编写，支持多种客户端（语言），用于在分布式系统中存储消息，转发消息，具有高可用高可扩性

bug搬运·2024-01-19 18:16

部署Zabbix代理服务器，部署 Zabbix 高可用集群

目录分布式监控的作用：部署zabbix代理服务器设置zabbix的下载源，安装zabbix-proxy部署数据库，要求MySQL5.7或Mariadb10.5及以上版本初始化数据库创建数据库并指定字符集创建zabbix数据库用户并授权导入数据库信息/修改zabbix-proxy配置文件启动zabbix-proxy在所有主机上配置hosts解析在Web页面配置agent代理编辑点击左边菜单栏【管理】

思华年^O^·2024-01-19 17:27

智慧校园大数据云平台介绍

依赖于其灵活的容量调配和高可用设计，集中存储实现了可共享的、更大的存储资源池，并且可以提供数据的保护能力。池化让存储资源得到更

shawn_song1212·2024-01-19 16:50

架构篇06-复杂度来源：可扩展性

文章目录预测变化应对变化小结复杂度来源前面已经讲了高性能和高可用，今天来聊聊可扩展性。

星猿杂谈·2024-01-19 14:22

架构篇07-复杂度来源：低成本、安全、规模

文章目录低成本安全规模小结关于复杂度来源，前面的专栏已经讲了高性能、高可用和可扩展性，今天我们来聊聊复杂度另外三个来源低成本、安全和规模。

星猿杂谈·2024-01-19 13:10

优雅停止 SpringBoot 服务，拒绝 kill -9 暴力停止

比如停止一些依赖的服务，输出一些日志，发一些信号给其他的应用系统，这个在保证系统的高可用是非常有必要的。那么咱么就来看一下几种停

Java爱好者·2024-01-19 12:21

推荐频道

airflow高可用

Redis相关知识