集群&分布式

分布式架构的 CAP 定理、BASE 理论及其应用教程

分布式架构的CAP定理、BASE理论及其应用教程在构建分布式系统时，数据一致性、系统可用性和网络分区容忍性是三个核心关注点。CAP定理和BASE理论为我们提供了指导原则，帮助在系统设计中进行合理权衡。
宋发元·2025-03-14 02:05

Zookeeper性能优化与调优技巧精讲

ApacheZooKeeper是一个开源的分布式协调服务,为分布式应用程序提供高可用性和强一致性的协调服务。它主要用于解决分布式环境中的数据管理问题,如统一命名服务、配置管理、分布式锁、集群管理等。
AI天才研究院·2025-03-14 00:27

【k8s集群部署篇】在openEuler环境下部署多master高可用kubernetes集群详细教程（V1.30版本）

【k8s集群部署篇】在openEuler环境下部署多master高可用kubernetes集群详细教程（V1.30版本）一、相关名词介绍1.1k8s简介1.2Keepalived简介1.3HAProxy
江湖有缘·2025-03-13 23:17

分布式数据库OceanBase

三地五中心部署同步示例三地：城市A、城市B、城市C（3个不同的地理位置）。五中心：总共有5个数据中心（Zone），分布如下：城市A：Zone1（R/W）、Zone2（R/W）城市B：Zone3（R/W）、Zone4（R/W）城市C：Zone5（RO）一、读写副本（R/WZone）与只读副本（ROZone）的数量Zone类型数量角色说明R/WZone4参与写入投票，可成为主副本ROZone1仅支持异
HBryce24·2025-03-13 22:15

重磅推出！Highlight.io：开源全栈监控平台，让开发者轻松掌控应用性能！

Highlight.io是一个开源的全栈监控平台，提供用于错误监控、会话重放、日志记录、分布式跟踪等的综合工具。它旨在为开发人员提供用于监控应用程序的现代、有凝聚力的解决方案。
开源项目精选·2025-03-13 22:43

【Linux】-Pve下的Nginx安装

linuxpve系统安装nginxpve系统和普通系统的区别‌核心定位与功能差异‌‌PVE‌：是专为虚拟化场景设计的Linux发行版，内置KVM虚拟机和LXC容器管理功能，提供统一的Web界面及集群管理能力
前鼻音太阳熊·2025-03-13 22:43

NocoBase 本周更新汇总：双因素身份认证（2FA）

本周我们发布了NocoBase1.6.0版本，带来集群模式部署、安全策略优化和迁移管理等多项新特性。NocoBase目前更新包括的版本更新包括三个分支：main，next和develop。
·2025-03-13 20:31

CDN防御如何保护我们的网络安全？

内容分发网络（CDN）作为一种分布式网络架构，不仅能够提高网站的访问速度和用户体验，还能够在很大程度上增强网络安全防护能力。本文将探讨CDN防御如何保护我们的网络安全。
·2025-03-13 20:29

ClickHouse优化技巧实战指南：从原理到案例解析

目录ClickHouse优化核心思想表结构设计优化查询性能优化技巧数据写入优化方案系统配置调优实战高可用与集群优化真实案例解析总结与建议1.ClickHouse优化核心思想ClickHouse作为OLAP
AAEllisonPang·2025-03-13 19:48

HBase学习二：HBase的表结构

其实没那么高深，我们需要分两步来理解HBase,就能够理解为什么HBase能够“快速地”“分布式地”处理“大量数据”了。
hucs420109·2025-03-13 18:46

分布式存储—— HBase数据模型 详解

目录1.3HBase数据模型1.3.1两类数据模型1.3.2数据模型的重要概念1.3.3数据模型的操作1.3.4数据模型的特殊属性1.3.5CAP原理与最终一致性1.3.6小结本文章参考、总结于学校教材课本《HBase开发与应用》1.3HBase数据模型在开始学习HBase之前非常有必要先学习HBase的特性，因此本节将介绍HBase的逻辑模型、物理模型和访问HBase的方法等。和传统的关系型数据
Future_yzx·2025-03-13 18:14

分布式存储学习——HBase表结构设计

目录1.4.1模式创建1.4.2Rowkey设计1.4.3列族定义1.4.3.1可配置的数据块大小1.4.3.2数据块缓存1.4.3.3布隆过滤器1.4.3.4数据压缩1.4.3.5单元时间版本1.4.3.6生存时间1.4.4模式设计实例1.4.4.1实例1：动物分类1.4.4.2实例2：店铺与商品1.4.4.3实例3：网上商城用户消费记录1.4.4.4实例4：微博用户与粉丝1.4.4.5小结本文
Future_yzx·2025-03-13 18:41

技术分享连接汇总[201712]

基于Redis的限流系统的设计分布式环境下限流方案的
六月星空2011·2025-03-13 17:36

关于虚拟机的VMware和Ubuntu18之间的网络问题

在这里我记录一下最近遇到的问题，因为最近在虚拟机上配置了zookeeper集群，并且使用的网络是桥接网络。
海洋猿·2025-03-13 17:34

深度学习核心技术深度解析

深度学习的本质与核心思想定义：通过多层非线性变换，自动学习数据层次化表征的机器学习方法核心突破：表征学习：自动发现数据的内在规律，无需人工设计特征端到端学习：直接从原始输入到最终输出，消除中间环节的信息损失分布式表示
月落星还在·2025-03-13 16:26

Redis Sentinel (哨兵模式)深度解析：构建高可用分布式缓存系统的核心机制

一、传统主从复制的痛点在分布式系统架构中，Redis作为高性能缓存和数据存储解决方案，其可用性直接关系到整个系统的稳定性。
月落星还在·2025-03-13 16:25

云原生边缘计算：分布式智能的最后一公里革命

引言：从集中式云到边缘计算的范式演进阿里云ENS覆盖3000边缘节点，腾讯云ECM支持5ms内就近接入，特斯拉每辆车部署轻量K8s管理AI模型。KubeEdge管理百万边缘设备，AWSWavelength实现5G边缘数据处理延迟0{data:=es.diskQueue.Pop()ifcloud.IsConnected{cloud.Upload(data)}else{es.diskQueue.Ret
桂月二二·2025-03-13 14:12

分布式训练中的参数local_rank

local_rank是一个常用于分布式训练中的参数，用于指示当前进程的本地编号。它帮助在分布式环境中区分不同的进程。
挨打且不服66·2025-03-13 13:09

Kubernetes核心组件详解：从原理到实践

无论是小型创业公司还是全球性企业，都在使用它管理复杂的分布式系统。但你是否好奇过，这个强大的系统内部是如何运作的？
ivwdcwso·2025-03-13 12:58

【后端开发核心技术全景解读：从云原生到分布式架构的深度实践】

后端开发核心技术全景解读：从云原生到分布式架构的深度实践引言：后疫情时代的技术演进趋势在后疫情时代，全球数字化转型加速推进，Gartner最新报告显示：到2025年，70%的新应用将部署在云原生架构上。
蝉叫醒了夏天·2025-03-13 11:18

微电网管理 实现分布式能源的智能调度和管理

它通常包含分布式能源（如太阳能、风能、储能系统）和负载，通过智能调度和管理实现高效、可靠的能源供应。物联网（IoT）技术在微电网管理中发挥着关键作用，能够实现分布式能源的智能调度和管理。
小赖同学啊·2025-03-13 10:14

531以后，分布式该选什么组件？

随着“531新政”的实施，分布式光伏项目全面进入市场化交易阶段，主流模式转变为“自发自用+余电交易”。
唐天下文化·2025-03-13 10:44

Java中的分布式锁：原理、实现与最佳实践

引言在分布式系统中，多个服务实例或进程需要协调对共享资源的访问。例如，电商系统中库存扣减、金融交易中的余额操作等场景，都需要保证同一时刻只有一个客户端能执行关键操作。
Lill_bin·2025-03-13 10:42

分布式并行策略概述

数据并行（DataParallelism）内容：数据并行通过将训练数据分割成多个小批次，并在多个处理单元（如GPU）上同时训练模型的副本来工作。每个副本完成自己批次的前向和反向传播计算后，梯度被汇总并同步更新到所有模型副本。优势：易于实现和扩展。可以显著减少训练时间，尤其是当模型较小，而数据集较大时。缺点：随着模型大小的增加，每个处理单元需要的内存也增加，可能受限于单个GPU的内存容量。大规模时通
灵海之森·2025-03-13 10:11

Zookeeper（103）如何在生产环境中使用Zookeeper的命令行工具？

在生产环境中使用ZooKeeper的命令行工具是管理和调试ZooKeeper集群的重要手段。
辞暮尔尔-烟火年年·2025-03-13 08:26

【软件测试】- 公有云、私有云、混合云简介以及如何在公有云与私有云上分别搭建测试环境

3.混合云（HybridCloud）：4.他们的区别与联系：5.应用实例：二、公有云上搭建测试环境1.创建云服务器实例阿里云腾讯云2.安装Docker和Kubernetes3.配置Kubernetes集群
阿寻寻·2025-03-13 07:45

三、Docker 集群管理与应用

（一）项目案例1、准备主机（1）关闭防火墙，或者开放TCP端口2377（用于集群管理通信）、TCP/UPD端口7946（用于节点之间的通信）、UDP端口4789（用于overlay网络流量监控）（2）安装
阿无@_@·2025-03-13 06:43

[特殊字符] Elasticsearch 双剑合璧：HTTP API 与 Java API 实战整合指南

HTTPAPI与JavaAPI实战整合指南一、HTTPAPI定义与用途Elasticsearch的HTTPAPI是基于RESTful接口设计的核心交互方式，支持通过URL和JSON数据直接操作索引、文档、集群等资源
周小闯·2025-03-13 04:28

PyTorch分布式训练

本文结构：分布式训练概述环境设置数据并行（DDP）模型并行启动训练性能优化建议示例代码参考资料和相关问题以下是为您整理的PyTorch分布式训练教程指南：一、PyTorch分布式训练核心概念数据并行：通过分割数据集实现多
阳光明媚大男孩·2025-03-13 02:16

【K8s】使用Kubernetes的resources字段中的requests和limits字段控制Pod资源使用

在K8s集群中，合理控制Pod的资源使用对于确保集群的稳定性和性能至关重要。
ThisIsClark·2025-03-13 01:08

Kubernetes 部署 Nacos集群

Kubernetes部署Nacos集群官方文档无持久化存储下载nacos-quick-start.yaml修改nacos-quick-start.yaml中的ConfigMap为自己的数据库账号密码执行数据库初始化语句执行
fangling86·2025-03-13 01:34

Redis四种模式在Spring Boot框架下的配置

在SpringBoot框架下配置Redis的四种模式（单机模式、主从模式、哨兵模式、集群模式）可以通过以下方式实现：1.单机模式在application.properties或application.yml
m0_66323401·2025-03-12 23:25

使用 Node.js 和 Follow 模块监控 CouchDB 数据库变更

在现代分布式系统中，实时监控数据库变更并将数据推送到消息队列（如RabbitMQ）是一个常见需求。
田猿笔记·2025-03-12 23:54

在M4 Mac Mini集群上运行DeepSeek V3 671B

在M4MacMini集群上运行DeepSeekV3671B原创咖农小黄幻想发生器2024年12月30日10:50天津我们刚刚在苹果硅芯片上运行了最大的开源模型。
强化学习曾小健·2025-03-12 22:18

K8S中PV和PVC之间的关系

以下是详细解释：核心关系对象角色生命周期使用者PersistentVolume(PV)存储资源的实体（如NFS、云磁盘、本地磁盘等）独立于Pod和PVC，需手动或动态创建由集群管理员配置Persistent
沉默的八哥·2025-03-12 22:44

HarmonyNext实战案例：基于ArkTS12+的高效分布式任务调度系统开发

HarmonyNext实战案例：基于ArkTS12+的高效分布式任务调度系统开发引言在HarmonyNext生态系统中，分布式任务调度是一个关键的技术领域。
·2025-03-12 22:52

HarmonyNext 实战：基于 ArkTS 的分布式文件存储与同步方案

HarmonyNext实战：基于ArkTS的分布式文件存储与同步方案引言在分布式系统中，文件存储与同步是一个复杂且关键的任务。
·2025-03-12 22:51

HarmonyNext 实战：基于 ArkTS 的高性能图像处理与渲染方案

随着HarmonyNext的推出，开发者可以利用其强大的分布式能力和ArkTS语言的高效性，实现高性能的图像处理与渲染方案。
·2025-03-12 22:21

HarmonyNext 实战：基于 ArkTS 的分布式任务调度与资源优化方案

HarmonyNext实战：基于ArkTS的分布式任务调度与资源优化方案引言在现代分布式系统中，任务调度与资源优化是提升系统性能和效率的关键。
·2025-03-12 22:21

Docker-compose编排部署Kafka伪分布式集群(为后续实验搭建基础环境)

本实验参照官网http://kafka.apache.org/documentation/构建,为后续了解kafka应用做环境准备。搭建环境：MAC10.15docker19.03.4docker-composeversion1.24.1jdk1.8以上(对于kafka2.x以上版本已遗弃对jdk1.7的支持)zookeeper-3.4.14(这里没使用kafka自带zk,而使用外置zk,这里zk
F_Hello_World·2025-03-12 22:13

守护你的网络堡垒：Nginx限速策略对抗DDoS攻击

在当今互联网安全威胁日益严峻的背景下，分布式拒绝服务（DDoS）攻击已经成为许多网站和服务提供商的心头大患。
墨夶·2025-03-12 22:11

K8S日常问题优化

在实际工作中，优化Kubernetes的性能和成本通常需要结合资源利用率分析、集群配置调整以及自动化工具的整合。
沉默的八哥·2025-03-12 21:39

大数据学习（61）-Impala与Hive计算引擎

，请点赞+收藏⭐️+留言支持一下博主哦一、impala与yarn资源管理YARN是ApacheHadoop生态系统中的一个资源管理器，它采用了master/slave的架构，使得多个处理框架能够在同一集群上共享资源
viperrrrrrr·2025-03-12 21:38

大数据学习（62）- Hadoop-yarn

哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦一、YARN概述1.YARN简介Hadoop-YARN是ApacheHadoop生态系统中的一个集群资源管理器
viperrrrrrr·2025-03-12 21:38

大数据学习（60）-HDFS文件结构

大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦一、体系结构HDFS是一个标准的主从(Master/Slave)体系结构的分布式系统
viperrrrrrr·2025-03-12 21:08

DUBBO源码分析七---服务调用过程

"2021SC@SDUSC"1.简介在前面的文章中，我们分析了DubboSPI、服务导出与引入、以及集群容错方面的代码。经过前文的铺垫，本篇文章我们终于可以分析服务调用过程了。
qq_51562781·2025-03-12 20:04

Doris集群启停脚步

ApacheDoris是一个基于MPP（大规模并行处理）架构的高性能、实时的分析型数据库。在Doris中，FE（Frontend）、BE（Backend）和Broker组件有特定的启动和关闭顺序，下面详细介绍一下。一、启动顺序通常按照FE->BE->Broker的顺序启动，以下是对该顺序的详细解释：启动FEFE是Doris的前端节点，负责元数据管理、查询规划、权限管理等功能，是整个系统的核心控制节
江畔独步·2025-03-12 20:01

deepseek+ansible实现AI自动化集群部署

DeepSeek与Ansible协同配置Linux集群的完整机制方案，涵盖架构设计、工具调用链及Agent提示词体系：一、系统架构设计（四层联动）!
大囚长·2025-03-12 20:59

面试基础---分布式架构基础消息队列Kafka vs RabbitMQ vs RocketMQ 对比

分布式架构消息队列深度解析：KafkavsRabbitMQvsRocketMQ引言在高并发、高可用的分布式系统中，消息队列是实现异步通信、流量削峰、系统解耦的核心组件。
WeiLai1112·2025-03-12 19:27

Git 的基本概念和使用方式。

Git是一种分布式版本控制系统，用于跟踪文件和目录的变化。Git的基本概念和使用方式如下：仓库（Repository）：Git仓库是用来存储项目文件和历史记录的地方。
w2361734601·2025-03-12 18:47
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他