airflow高可用

DBA技术栈MongoDB：简介

MongoDB是一个可扩展、开源、表结构自由、用C++语言编写且面向文档的数据库，旨在为Web应用程序提供高性能、高可用性且易扩展的数据存储解决方案。
运维仙人·2024-01-19 11:29

大数据StarRocks(八)：集群扩缩容

建议部署3个Follower节点，以组成高可用部署（HA）模式。当FE集群已经为高可用部署模式时（即包含1个L
运维仙人·2024-01-19 11:50

浅聊雷池社区版（WAF）的tengine

旨在满足高并发、高可用性和高扩展性的需求Tengine的主要特点高性能：继承了Nginx的高性能特质，Tengine在处
云宝的黑客对抗日记·2024-01-19 10:06

K8s全套快速入门

K8s快速入门1介绍google开源的容器化管理工具机器数量十几台、上百台时，就可以考虑使用k8s高可用、自动容灾恢复、灰度更新、一键回滚历史版本、方便伸缩扩展等k8s集群架构：通常：一主多从master
NPE~·2024-01-19 08:48

14.云原生之三高系统

三高介绍从运维、后端、架构职能视角看待三高运维视角后端视角架构视角生产环境高可用的重要性如何实现三高系统云原生对三高系统的支持总结三高系统如何支撑？
野心与梦·2024-01-19 08:18

高可用架构 - 系统性能评估

性能评估的要点CPU主要工具：vmstat内存主要工具：free磁盘I/O主要工具：iostat、sar网络I/O主要工具：ifstat系统整体性能主要工具：topCPU评估imagevmstat命令结果分析：procsr运行和等待CPU时间片的进程数，。b等待资源的进程数。swapsi每秒从磁盘读入虚拟内存的大小。so每秒虚拟内存写入磁盘的大小。cpuus用户进程CPU使用率。sy系统CPU使用
SlowGO·2024-01-19 08:48

云原生微服务：现代化应用开发的支柱

传统的单块应用已经无法满足快速迭代、灵活扩展和高可用性的要求。而云原生微服务架构应运而生，为企业提供了一种优雅而灵活的解决方案。什么是云原生微服务？云原生微服务是一种现代化的应用架构模式，
工业甲酰苯胺·2024-01-19 07:40

云原生演进中的AI算力高效使用

01云原生技术的普及与发展云原生技术是一种基于容器技术的轻量级、高可用的应用架构，具有弹性扩展、快速部署、统一管理等特点。
virtaitech·2024-01-19 07:35

如何实现在Docker容器中运行Redis？

Redis是一个高可用的内存数据库。它的磁盘持久性键值数据存储是多种高可用性用途的理想选择。另一方面，Docker是一个用于容器化应用程序和服务的工具，隔离它们的环境，并允许它们单独运行。
WPHunter·2024-01-19 05:43

MySQL-05-存储引擎

1、简介相当于Linux文件系统，只不过比文件系统强大2、功能了解数据读写数据安全和一致性提高性能热备份自动故障恢复高可用方面支持等.3、存储引擎种类（笔试）3.1介绍(OracleMySQL)InnoDBMyISAMMEMORYARCHIVEFEDERATEDEXAMPLEBLACKHOLEMERGENDBCLUSTERCSV3.2
BJ天涯·2024-01-19 05:16

高并发大游戏如何选择阿里云服务器配置？

活动https://t.aliyun.com/U/bLynLC第七代云服务器采用第三代神龙架构，超高可用性，软硬协同的热升级、热迁移通道，让业务
暴富程序员·2024-01-19 04:25

非凸科技【社招/校招/实习生】长期招聘Rust工程师！Base北京/上海/成都

Base北京/上海/成都社招岗位：Rust工程师岗位职责：设计并开发基于Rust的高性能，低时延算法交易系统；设计并开发数据处理平台，监控运维平台；设计并开发面向客户的高可用交易工具等；设计并开发策略相关的回测平台
非凸科技·2024-01-19 04:44

Flink简介与应用场景

Flink是一个开源的分布式，高性能，高可用，准确的流处理框架。主要由Java代码实现，支持实时流处理和批处理，批数据只是流数据的一个极限案例。支持了迭代计算，内存管理和程序优化。
Real_man·2024-01-19 03:42

工作流管理框架airflow-安装部署教程

1概述Airflow是一个以编程方式编写，用于管理和调度工作流的平台。可以帮助你定义复杂的工作流程,然后在集群上执行和监控这些工作流。
Trisyp·2024-01-19 03:40

如何在MinIO存储服务中通过Buckets实现远程访问管理界面上传文件

它的优点包括高性能、高可用性、易于部署和管理、支持多租户等。Cpolar
日刷百题·2024-01-19 02:29

浅聊雷池社区版（WAF）的tengine

旨在满足高并发、高可用性和高扩展性的需求Tengine的主要特点高性能：继承了Nginx的高性能特质，Tengine在处
小名空鵼·2024-01-19 01:18

HBase第一章：集群搭建

系列文章目录HBase第一章：集群搭建文章目录系列文章目录前言一、环境准备二、上传HBase三、上传HBase四、配置参数五、分发测试六、高可用总结前言Hive的内容基本算是学完了，太深入的东西，现在没有必要死磕
超哥--·2024-01-19 00:57

Hbase高可用集群部署

Zookeeper集群的正常部署并启动Hadoop集群的正常部署并启动配置环境变量vi/etc/profile#Hbase-HAexportHBASE_HOME=/home/xyp9x/hbase-2.0.5-HAexportPATH=$PATH:$HBASE_HOME/binsource/etc/profilehbase-env.sh修改内容vihbase-env.shexportJAVA_HO
衡超越爱学习~·2024-01-19 00:21

Redis集群优化

文章目录前言集群完整性问题集群带宽问题前言集群虽然具备高可用特性，能实现自动故障修复，但是如果使用不当，也会存在一些问题集群完整性问题集群带宽问题数据倾泻问题客户端性能问题命令的集群兼容性问题Lua和事务问题集群完整性问题集群带宽问题
不会仅此而已·2024-01-18 23:49

25 - 高可用存储架构 - 双机架构

存储高可用存储高可用方案的本质都是通过将数据复制到多个存储设备，通过数据冗余的方式来实现高可用，其复杂性主要体现在如何应对复制延迟和中断导致的数据不一致问题对一个高可用存储方案，我们需要从以下几个方面去进行思考和分析
舍是境界·2024-01-18 23:09

HDFS使用QJM(Quorum Journal Manager)实现的高可用性以及备份机制

目录前言1.NameNode的启动和对edits和QJM相关配置文件的解析2.使用FSImage和FSEditLog类对image和editlog文件进行读写和管理3.EditsDoubleBuffer双缓存，让flush和write同时进行，互不干扰4.AsyncLoggerSetl类代理对QJM集群的读写6.QuorumCall封装了对基于paxos算法的QJM集群的异步操作7.StandBy
麦兜和小可的舅舅·2024-01-18 22:56

记一次公司的秒杀抢购活动

2、分析像这种秒杀抢购流量暴增的业务场景主要解决两个问题a、系统的稳定与高可用，简单来说你的系统不会被暴增的流量给击垮。b、数据一
coding丶life·2024-01-18 22:04

浅聊雷池社区版（WAF）的tengine

旨在满足高并发、高可用性和高扩展性的需求Tengine的主要特点高性能：继承了Nginx的高性能特质，Tengine在处
网盾实验室·2024-01-18 21:17

大游戏并发使用什么阿里云服务器配置？

活动https://t.aliyun.com/U/bLynLC第七代云服务器采用第三代神龙架构，超高可用性，软硬协同的热升级、热迁移通道，让业务
腮帮子疼·2024-01-18 20:49

多服务器对外提供一个浮动ip

主要是用来做高可用/灾备切换，同一时间只有一个服务器提供服务。
谷谷谷雨·2024-01-18 20:26

前后端分离必备的接口规范

前言  随着互联网的高速发展，前端页面的展示、交互体验越来越灵活、炫丽，响应体验也要求越来越高，后端服务的高并发、高可用、高性能、高扩展等特性的要求也愈加苛刻，从而导致前后端研发各自专注于自己擅长的领域深耕细作
独泪了无痕·2024-01-18 20:49

【Docker】Docker容器实战部署多个Nginx实现负载均衡和高可用

文章目录前言下载Nginx复制出配置文件第一步：启动容器修改配置nginx-lb里的nginx.conf启动容器启动nginx1启动nginx2启动nginx-lb演示效果前言Docker下部署多个Nginx进行负载均衡，我这次实操的思路是使用三个Nginx。其中一个Nginx起负载均衡的作用，叫做nginx-lb,单独一个配置文件。另外2个Nginx起真正的转发作用，叫做nginx1和nginx
杰肥啊·2024-01-18 20:46

Linux 探索系统时间对数据库的若干影响

00.背景最近工作的时候遇到一些与ntp时间同步相关的问题：ntp服务对数据库高可用架构的影响（高可用架构失效）ntp与linux系统时区，cputick的关系（对时间相关的进程执行有影响）ntp或系统时区调整后
Zhao.Mr·2024-01-18 19:29

消息中间件面试题

目录一.为什么使用消息队列二.RabbitMQ1.RabbitMQ如何保证消息不丢失2.RabbitMQ消息的重复消费问题3.RabbitMQ延迟队列4.RabbitMQ消息堆积5.RabbitMQ高可用机制三
黑暗对我避而远之·2024-01-18 18:47

Airflow大揭秘：如何让大数据任务调度变得简单高效？

介绍：Airflow是一个开源的、用于创建、调度和监控数据管道的工作流平台。
知识分享小能手·2024-01-18 17:59

架构篇05-复杂度来源：高可用

文章目录计算高可用存储高可用高可用状态决策小结今天，我们聊聊复杂度的第二个来源高可用。参考维基百科，先来看看高可用的定义。
星猿杂谈·2024-01-18 17:58

Kafka消息中间件保证消息不丢失

为避免上面类似情况的发生，除了做好补偿措施，更应该在系设计的时候充分考虑各种异常，设计一个稳定、高可用的消息系统。
long_c2b7·2024-01-18 15:13

ElasticSearch入门

1.简介ElasticSerach是一个分布式，高性能，高可用，可伸缩，RESTful风格的搜索和数据分析引擎。通常作为ElasticStack的核心来使用。ES是一个近实时的搜索引擎。
糖屋·2024-01-18 15:14

深度解析Elasticsearch索引数据量过大的优化与部署策略

目录引言1.分片和副本策略1.1分片策略1.1.1数据量1.1.2查询和写入负载1.1.3硬件资源1.1.4高可用性1.2.副本策略1.2.1冗余和可用性1.2.2查询性能1.2.3存储需求2.硬件和资源配置优化
喔的 喔的嘛呀·2024-01-18 15:40

mysql 容器化安装（docker）离线和在线

前言：在部署hive或airflow升级过程中，总需要一个对应的数据库存储元数据，一个轻量级的mysql容器刚刚好。轻量、可快速移植、具有隔离性。
yunpeng.zhou·2024-01-18 14:35

15.kubernetes部署Longhorn

Longhorn与Rancher结合使用，将帮助您在Kubernetes环境中轻松、快速和可靠地部署高可用性持久化块存储。
CodingDemo·2024-01-18 14:24

从集群数据库到oceanBase架构的演变

因为项目需求，用到了oceanBase数据库，特此一篇文章讲解数据库的演变史1.集群数据库商业关系数据库的架构早期都是集中式的，只有主备架构应对高可用和容灾。后来为了应对性能增长，发展出集群数据库。
寻烟的衣袖·2024-01-18 13:05

OceanBase集群技术架构

1.5数据持久化1.6智能路由PrimaryZone1.7TableGroup二动态扩容和缩容2.1动态水平扩展2.2动态扩容和缩容技术实现2.3扩容基本步骤2.4租户扩容2.5缩容基本步骤三数据可靠及高可用
缘友一世·2024-01-18 13:33

k8s资源介绍

Kubernetes系统最重要的设计因素之一是能够横向扩展，即调整应用程序的副本数以提高可用性。设计一套大型系统，且保证其运行时健壮、可扩展、可移植和非常具有挑
单某人是猪·2024-01-18 12:30

python爬虫登录网站_python爬虫之scrapy模拟登录

背景：初来乍到的pythoner，刚开始的时候觉得所有的网站无非就是分析HTML、json数据，但是忽略了很多的一个问题，有很多的网站为了反爬虫，除了需要高可用代理IP地址池外，还需要登录。
weixin_39827589·2024-01-18 11:26

MongoDB助力西门子数字化工厂构建下一代制造执行系统

数据库的高可用性是保障工厂不停工、连续生产的关键所在。
MongoDB 数据库·2024-01-18 09:59

MongoDB Atlas —— 多云开发者数据平台

MongoDBAtlas内建了MongoDB安全和运维最佳实践，可自动完成基础设施的部署、数据库的构建、高可用部署、数据的全球分发、备份等即费时又需要大量经验运维工作。让您
MongoDB 数据库·2024-01-18 09:28

MongoDB Atlas 常见问题及解答 —— 上篇

MongoDBAtlas内建了MongoDB安全和运维最佳实践，可自动完成基础设施的部署、数据库的构建、高可用部署、数据的全球分发、备份等即费时又需要大量经验运维工作。让您通过简单的界面和
MongoDB 数据库·2024-01-18 09:28

快速上手MongoDB Atlas

MongoDBAtlas内建了MongoDB安全和运维最佳实践，可自动完成基础设施的部署、数据库的构建、高可用部署、数据的全球分发、备份等即
MongoDB 数据库·2024-01-18 09:57

代理服务器（Broker）的Master-Slave 架构

在一些消息队列系统中，Broker可以采用Master-Slave架构来提高可用性和容错性。主要特点如下：Master负责写入：Master节点负责处理写入消息的操作。Slave负责
heartfluttering·2024-01-18 08:06

ElasticSearch 5. 搭建ES集群

提高负载能力提高存储容量上限实现高可用提高并发处理能力…2.数据分片（Shard）es集群把数据拆分成多份，每一份存储到不同节点（node），从而实现减少每个节点的数据量，减少单个服务器的压力，构成分布式搜索
自挂东南只·2024-01-18 08:13

ElasticSearch 集群高可用存储架构

master节点：主要职责是和集群操作相关的内容，如创建或删除索引，跟踪哪些节点是群集的一部分，并决定哪些分片分配给相关的节点。data节点：这个节点作为一个数据节点，数据节点主要是存储索引数据的节点，主要对文档进行增删改查操作，聚合操作等。数据节点对cpu，内存，io要求较高，在优化的时候需要监控数据节点的状态，当资源不够的时候，需要在集群中添加新的节点。协调节点：当node.master和no
LWD-824·2024-01-18 08:12

ElasticSearch学习之一：基础知识+单节点/集群搭建

1.可以在极短时间内存储、搜索和分析大量的数据2.通常作为具有复杂搜索场景下的核心发动机ES高可用且高扩展。一方面同升级硬件完成系统扩展，称为垂直或向上扩展，另一
HackQ_sxj·2024-01-18 08:39

【RabbitMQ】集群和运维

RabbitMQ集群模式主备模式远程模式普通集群模式镜像队列模式多活模式集群管理RabbitMQ镜像集群配置负载均衡-HAProxy监控集群方案原理对于无状态应用（如普通的微服务）很容易实现负载均衡、高可用集群
Ethan-running·2024-01-18 08:32

Jenkins for Kubernetes实现Slave动态伸缩

JenkinsforKubernetes的好处：Jenkins-Master的高可用。
程序员苟哥·2024-01-18 07:05
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他