大型分布式服务器架构

如何在多个GPU中训练非常大的模型？

目录一、并行训练策略1.数据并行2.模型并行3.混合并行：4.上下文并行二、内存优化技术三、总结在多个GPU上训练超大规模模型（如千亿参数级语言模型）需要结合并行策略、内存优化技术、分布式框架。
Mr终游·2025-03-25 07:00

基于CopyOnWriteArraySet的高并发在线用户状态收集器架构设计

CopyOnWriteArraySet的高并发在线用户状态收集器架构设计》本文将通过一个电商平台实时在线用户监测系统的完整案例，详细讲解如何利用CopyOnWriteArraySet实现线程安全的用户状态收集，包含会话超时自动清理、分布式环境扩展
猿享天开·2025-03-25 07:00

模型量化的原因和方法

优化模型参数以适应有限内存环境为了使具有大量参数（例如Llama3.1的4050亿个参数）的大型语言模型在合理内存的设备上高效运行，需要对模型进行一系列优化。
潇湘馆记·2025-03-25 06:27

一文理解前端工程化、模块化和组件化

一、假设你正在组织一个大型聚会：前端工程化：就像你计划整个聚会的流程，从邀请客人、准备食物、布置场地到确保一切顺利进行。这涉及到很多细节，你需要确保每个环节都井然有序。
cc.ChenLy·2025-03-25 06:23

‌HarmonyOS Next 架构深度解析

‌HarmonyOSNext架构深度解析‌一、分布式架构核心设计1.‌跨设备虚拟化（VirtualSuperDevice）‌‌核心概念‌：将多设备硬件能力抽象为统一资源池，通过分布式软总线（D-Bus）
小_铁·2025-03-25 04:12

区块链智能合约实训室解决方案

一、建设背景与趋势区块链，这一融合了分布式储存、信息传输、密码学、匿名技术和经济学等多领域学科的创新技术，自诞生以来便引发了全球范围内的广泛关注。
武汉唯众智创·2025-03-25 04:37

第7章：实践项目7.2 大型项目实战

目录第7章：实践项目7.2大型项目实战一、桌面应用1.跨平台任务管理器二、网络服务2.在线图书管理系统三、嵌入式系统3.智能家居控制系统四、分布式系统4.分布式文件系统五、机器学习与AI5.图像识别系统六
xiaoheshang_123·2025-03-25 03:30

SpringCloud 面试备战指南

答：SpringCloud是一套微服务架构工具集，基于SpringBoot简化分布式系统开发。它整合了服务发现、配置中心、熔断器、网关等组件，解决微服务中的服务协调、容错、
宋发元·2025-03-25 02:27

Kafka 面试备战指南

答：Kafka是分布式流处理平台，核心设计目标为高吞吐、低延迟、高扩展性。采用发布-订阅模型，适用于实时数据管道、流处理等场景。Kafka核心组件有哪些？
宋发元·2025-03-25 02:26

如何让 MGR 不从 Primary 节点克隆数据？

问题MGR中，新节点在加入时，为了与组内其它节点的数据保持一致，它会首先经历一个分布式恢复阶段。在这个阶段，新节点会随机选择组内一个节点（Donor）来同步差异数据。
MySQL实战·2025-03-25 01:48

Mysql8官方分布式数据库MGR最佳实践_please check that group_replication_recovery chann

skip-name-resolvemax_connections=1000max_user_connections=800max_allowed_packet=512Mmax_connect_errors=100000datadir=/data/mysql/mysql8/data/3309socket=/data/mysql/mysql8/run/3309/mysql.sockpid_file=/
2401_85111836·2025-03-25 01:17

SFT和RLHF是什么意思？

是什么意思解决方案：SFT（SupervisedFine-Tuning，监督微调）和RLHF（ReinforcementLearningfromHumanFeedback，基于人类反馈的强化学习）是两种用于改进大型语言模型
玩人工智能的辣条哥·2025-03-25 00:15

HarmonyOS NEXT中SQLite数据库存储实践指南

HarmonyOSNEXT中SQLite数据库存储实践指南一、引言HarmonyOSNEXT作为华为自主研发的分布式全场景操作系统，为开发者提供了丰富的数据管理框架，其中ArkData框架支持SQLite
·2025-03-25 00:04

《鸿蒙携手AI：解锁智慧出行底层逻辑》

分布式架构：构建智慧出行的坚实基础鸿蒙系统的分布式架构是其一大技术亮点，它打破了设备之间的界限，实现了多设备的无缝协同。在智慧出行场景中，车辆不再是孤立的个体，而
·2025-03-25 00:30

《鸿蒙携手AI：解锁智慧出行底层逻辑》

分布式架构：构建智慧出行的坚实基础鸿蒙系统的分布式架构是其一大技术亮点，它打破了设备之间的界限，实现了多设备的无缝协同。在智慧出行场景中，车辆不再是孤立的个体，而
程序猿阿伟·2025-03-25 00:39

YashanDB yasrman恢复

分布式部署模式下，需要保证待恢复的集群部署状态与备份前节点部署状态一致，包括节点类型、节点监听IP、节点个数、节
·2025-03-24 20:52

JNPF.java前后端分离框架，SpringBoot+SpringCloud开发微服务

前后端分离已成为互联网项目开发的业界标准开发方式，通过nginx+tomcat等方式有效的进行解耦合，并且前后端分离会为以后的大型分布式架构、弹性计算架构、微服务架构、多端化服务打下坚实的基础。
「已注销」·2025-03-24 20:37

前端框架入门：Vue 基础

结合Vuex（状态管理）和VueRouter（路由）开发大型应用。2.Vue模板语法Vue
风亦辰739·2025-03-24 20:36

Hadoop安装

Hadoop的安装方式有三种，分别是单机模式，伪分布式模式，分布式模式。单机模式：单机模式：Hadoop默认模式为非分布式模式（本地模式），无需进行其他配置即可运行。
Cindy_0124·2025-03-24 19:59

如何使用API接口对接电商系统？

无论是大型电商平台还是小型电商创业公司，通过API接口实现数据的无缝对接，可以大大提高运营效率，优化用户体验。本文将详细介绍如何使用API接口对接电商系统，并提供具体的代码示例。
API小爬虫·2025-03-24 18:53

RocketMQ新消费者加入后的队列一致性保障机制详解

RocketMQ新消费者加入后的队列一致性保障机制详解RocketMQ作为一个高性能的分布式消息中间件，其消费者负载均衡机制是保障系统可扩展性和稳定性的关键。
慢德·2025-03-24 18:52

服务器负载均衡是什么意思？

这种群集技术可以用最少的出资取得接近于大型
lddfff_3a·2025-03-24 14:26

NestJS（基于 Express 的现代化框架）

它结合了面向对象编程（OOP）、函数式编程（FP）和响应式编程（RxJS），提供了一个高度模块化、可扩展且易于维护的开发环境，非常适合构建大型企业级应用。
getapi·2025-03-24 14:22

【监控系列】open-falcon

Open-Falcon是一款由小米开源的分布式监控系统，具备高性能、高可用性和易扩展的特点。以下从多个维度对其进行详细解析：1.核心特点分布式架构：模块化设计，各组件独立部署，支持水平扩展。
yunqi1215·2025-03-24 13:18

Elasticsearch 搜索引擎原理与实践

作者：禅与计算机程序设计艺术1.简介Elasticsearch是开源分布式搜索引擎，提供搜素、分析、数据可视化等功能。
AI天才研究院·2025-03-24 13:16

R.E.D.算法：革新文本分类的半监督学习新范式

随着大型语言模型（LLMs）在解决问题方面的应用进入新时代，只有少数问题仍然存在不尽如人意的解决方案。
真智AI·2025-03-24 13:43

spring +kotlin 配置redis 和redis的常用方法

在SpringBoot+Kotlin项目中，可以同时使用RedissonClient（提供分布式对象和高级功能）和RedisTemplate（SpringDataRedis的标准操作）。
LCY133·2025-03-24 13:43

Operating System Concepts读书笔记——操作系统本质、类型与发展【1】

文章目录一、操作系统基础概念1.操作系统功能2.计算机系统组成部分3.用户角度对操作系统的需求4.系统角度二、各类型操作系统1.大型机系统1.1批处理系统1.2多道程序系统1.3分时系统2.桌面系统3.
墨汁儿·2025-03-24 12:10

大模型提示词工程师的自我修养-应用二（RAG数据合成与数据多样性问题的解决） -（专题4）

1.生成数据大型语言模型（LLMs）具有生成连贯文本的强大能力。通过有效的提示策略，可以引导模型生成更好、一致且更有事实依据的响应。LLMs也特别适用于生成数据，这对于进行各种实验和评估非常有用。
AI专题精讲·2025-03-24 11:28

探索NebulaGraph：一个开源分布式图数据库的技术解析

1.介绍NebulaGraph的定位和用途NebulaGraph是一款开源的分布式图数据库，专注于存储和处理大规模图数据。
一休哥助手·2025-03-24 11:26

【AI大模型】搭建本地大模型GPT-NeoX：详细步骤及常见问题处理

搭建本地大模型GPT-NeoX：详细步骤及常见问题处理GPT-NeoX是一个开源的大型语言模型框架，由EleutherAI开发，可用于训练和部署类似GPT-3的大型语言模型。
qzw1210·2025-03-24 09:13

我与DeepSeek读《大型网站技术架构》- 总结

文章目录读后感一、总结二、反思三、创新四、展望当代大型网站架构一、架构分层模型二、关键组件与技术选型三、架构演进策略四、架构突破口读后感一、总结架构演化优先于设计大型网站架构不是预先设计的产物，而是通过反复迭代和试错演化形成的
诺亚凹凸曼·2025-03-24 09:11

如何设计一个高可用的 Seata 集群？

——从零搭建永不宕机的分布式事务协调系统一、为什么需要高可用Seata集群？在分布式系统中，事务协调器TC是全局事务的“大脑”。
码农技术栈·2025-03-24 08:33

SpringCloud框架下的注册中心比较：Eureka与Consul的实战解析

摘要在探讨SpringCloud框架中的两种注册中心之前，有必要回顾单体架构与分布式架构的特点。单体架构将所有业务功能集成在一个项目中，优点是架构简单、部署成本低，但耦合度高。
耶耶Norsea·2025-03-24 08:29

Spring Cloud Config 快速介绍与实例

SpringCloudConfig是一个用于分布式系统的配置管理工具，提供集中化的外部配置支持。
oscar999·2025-03-24 08:26

Seata分布式事务框架及四种模式原理解析

一、Seata核心概念Seata（SimpleExtensibleAutonomousTransactionArchitecture）是阿里开源的分布式事务解决方案，核心思想是通过事务协调器（TC）统一管理全局事务分支的状态
Cloud_.·2025-03-24 07:23

Spring Boot 整合 RabbitMQ：注解声明队列与交换机详解

RabbitMQ作为一款高性能的消息中间件，在分布式系统中广泛应用。
Cloud_.·2025-03-24 07:23

云原生工程师必修课：如何揪出“假忙真闲”的应用元凶

开始介绍在分布式系统和高并发场景中，高负载（HighLoad）与低使用率（LowUtilization）的共存矛盾是运维和开发者的常见挑战。这种问题往往隐蔽性强，传统监控指标难以直接定位根因。
YAMLMaster·2025-03-24 06:08

基于Redis分布锁+事务补偿解决数据不一致性问题

基于Redis的分布式设备库存服务设计与实现概述本文介绍一个基于Redis实现的分布式设备库存服务方案，通过分布式锁、重试机制和事务补偿等关键技术，保证在并发场景下库存操作的原子性和一致性。
yiridancan·2025-03-24 05:37

http协议与https协议

HTTP（HyperTextTransferProtocol：超文本传输协议）是一种用于分布式、协作式和超媒体信息系统的应用层协议。
网络文化·2025-03-24 05:32

使用Couchbase实现高效的AI应用缓存与数据存储

Couchbase作为一款分布式NoSQL云数据库，其性能、可扩展性以及对AI、边缘计算应用的支持能力，使其成为优秀的选择。
scaFHIO·2025-03-24 04:54

使用GitHub API进行智能文档加载

它采用Git软件，增强了分布式版本控制，同时提供了访问控制、错误跟踪、软件功能请求、任务管理、持续集成和项目的wiki等功能。
fgayif·2025-03-24 02:07

探秘高并发网络编程：从基础原理到实战优化

一、引言在当今数字化时代，高并发应用无处不在，从大型电商平台的抢购活动，到热门在线游戏的多人实时对战，这些场景背后都离不开高效的高并发网络编程技术。
拉姆样子·2025-03-24 01:28

Java架构师成长之路

原理剖析日志机制解析2.框架源码掌握Spring底层原理带你手写一个Spring解析IOC、AOP源码、以及事务原理3.并发编程剖析Java底层锁机制CAS、JUC工具使用、AQS源码分析以及并发的集合类的讲解4.分布式开发剖析分布式中使用
hweiyu00·2025-03-24 00:50

【读点论文】Chain Replication for Supporting High Throughput and Availability

在分布式系统中，强一致性往往和高可用、高吞吐是矛盾的。比如传统的关系型数据库，其保证了强一致性，但往往牺牲了可用性和吞吐量。
寻雾&启示·2025-03-24 00:46

【自建分布式数据库详细指南】（五）使用：常见API及使用问题

延续前几篇文章，下面着重从一些基本的API讲讲从入门到习惯的常用方法，后续更新。USAGE1节点管理设置主节点，又成为协调节点SELECTcitus_set_coordinator_host('coord.example.com',5432);step1.创建节点select*frommaster_add_node('new-node',12345);step2.删除节点step3.新增节点后重新
大板牙花生·2025-03-24 00:43

Rust + 时序数据库 TDengine：打造高性能时序数据处理利器

Rust作为一门系统级编程语言，近年来在数据库、嵌入式系统、分布式服务等领域迅速崛起，以其内存安全、高性能著称，与TDengine的高效特性天然契合，适合构建高可靠、高
涛思数据（TDengine）·2025-03-23 20:44

SMT焊接常见的工艺缺陷

3.大型器件、散热器周围的小型贴片式元器件焊盘两端会出现温度不均匀。解决办法：调整焊盘的设计与整体的布局。问题2：焊
沙滩小绵羊·2025-03-23 19:05

向量数据库技术系列三-Chroma介绍

一、前言Chroma是一个开源的AI原生向量数据库，旨在帮助开发者更加便捷地构建大模型应用，将知识、事实和技能等文档整合进大型语言模型（LLM）中。
恰恰虎·2025-03-23 16:43

Windows程式开发设计指南（二十三）领略Internet

23.领略InternetInternet－全世界电脑透过不同协定交换资讯的大型连结体－近几年重新定义了个人计算的几个领域。
干了这一碗BUG·2025-03-23 16:40
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他