大规模分布式训练第21页

分布式消息中间件（十三）——RocketMQ延时消息

作者简介：大家好，我是码炫码哥，前中兴通讯、美团架构师，现任某互联网公司CTO，兼职码炫课堂主讲源码系列专题代表作：《jdk源码&多线程&高并发》，《深入tomcat源码解析》，《深入netty源码解析》，《深入dubbo源码解析》，《深入springboot源码解析》，《深入spring源码解析》，《深入redis源码解析》等联系qq：184480602，加我进群，大家一起学习，一起进步，一起对

码炫课堂-码哥·2025-02-22 07:58

YOLOv11快速上手：如何在本地使用TorchServe部署目标检测模型

本文将详细介绍如何使用YOLOv11训练你的第一个目标检测模型，并通过TorchServe在本地进行部署，实现模型的快速推理。

SYC_MORE·2025-02-22 07:57

RocketMQ消息队列

RocketMQ是由阿里巴巴集团开发的一款分布式消息中间件。它是基于主题（Topic）的发布/订阅模式构建的，支持高并发、高可靠性的消息传递。它

@喵咪老师·2025-02-22 07:25

DeepSeek的架构设计

DeepSeek的架构设计一、基础架构层1.超大规模算力集群跨地域异构计算:南京/临港等多地超算中心构建混合集群，10万+GPU卡规模（含H100/A100等），通过自研RDMA网络实现μs级延迟能效优化

程序猿000001号·2025-02-22 06:24

一文了解AI大模型相关知识点（含资料分享）

一、AI大模型的定义和背景AI大模型指具有庞大规模和复杂计算结构的机器学习模型，这些模型通常由深度神经

大模型研究院·2025-02-22 06:54

18、《SpringBoot+Redis整合、分布式缓存与Session共享方案》

SpringBoot+Redis整合、分布式缓存与Session共享方案一、开篇：当SpringBoot遇见Redis在微服务架构盛行的今天，分布式缓存已成为高并发系统的核心组件。

wolf犭良·2025-02-22 06:54

SD模型微调之LoRA

好评笔记·2025-02-22 06:22

RocketMQ（一）：消息中间件缘起，一览整体架构及核心组件

一览整体架构及核心组件消息队列MessageQueue，简称MQ在队列的基础上，加入生产者与消费者模型，使用队列作为载体就能够组成简单的消息队列，在队列中“运输”的数据被称为消息消息队列可以在单节点内存中使用，也可以作为分布式存储的中间件来使用由于项目的架构组织

菜菜的后端私房菜·2025-02-22 06:50

MATLAB之相似性度量的二分类实验

实验内容将MIT室内场景数据库中卧室、浴室作为正负样本，利用留出法完成训练集与测试集的划分（比例1：2），并使用测量夹角余弦的方式进行二分类（0为负，1为正），最后给出分类错误率和准确率，并绘制ROC曲线

TU不秃头·2025-02-22 05:44

分布式NAS集群+ceph+CTDB

分布式存储系统中，分布式NAS、CTDB和Ceph常常被结合使用以提供高性能、高可用性和灵活扩展的存储解决方案。

Comedy_宁·2025-02-22 05:09

前沿科技：改变生活的十大趋势

它通过分布式账本，以透明和不可篡改的方式记录创作信息，从而创作者的权益。每次创作和修改都会被记录在链上，确保信息的真实性和完整性。区块链的去中心化特性使得创作者可以直接与消费者互动。

火龙果wa·2025-02-22 04:32

讲讲Mysql主从复制原理与延迟

希望对大家有帮助；讲讲Mysql主从复制原理与延迟1000道互联网大厂Java工程师精选面试题-Java资源分享网MySQL主从复制是一种常见的分布式数据库架构，用于实现数据的备份、负载均衡和高可用性。

java1234_小锋·2025-02-22 03:25

Python爬虫实战——模拟登录爬取数据

然而，作为数据分析师或开发者，有时我们需要从这些平台上自动化地爬取用户数据，进行大规模的数据分析。为了实现这一目标，我们通常需要绕过这些登录机制，模拟登录过程，获取登录后的用户数据。

Python爬虫项目·2025-02-22 03:25

Java 毕业设计：让你“低调”完成毕业，轻松走上职场巅峰

想做分布式系统、微服务架构，还是高并发的企业级应用？我有一手好“架构设计”武功，带你快速搭建系统架构，性能稳如老狗

Hello毕设之家（专业接毕设）·2025-02-22 03:52

Go语言开发Web应用实战——这本书介绍了如何用Golang开发Web应用，涵盖从基础概念到实践应用等内容

Golang作为新一代的编程语言，非常适合用来开发复杂的分布式系统，但同时它也非常简单易懂，可

AI天才研究院·2025-02-22 03:50

分布式控制算法——第二部分：分布式控制算法（附带Python示例代码）

分布式控制算法文章目录分布式控制算法第二部分：分布式控制算法设计5.分布式控制算法的设计与实现分布式控制算法的设计流程常见的分布式控制策略分布式控制系统的建模与仿真6.分布式协调与一致性算法领导者选举算法分布式一致性算法

快乐的向某·2025-02-22 03:48

探秘PSPider：一款强大的Python爬虫框架

探秘PSPider：一款强大的Python爬虫框架pspider一个简单的分布式爬虫框架项目地址:https://gitcode.com/gh_mirrors/pspi/pspider项目简介是一个基于

马冶娆·2025-02-22 02:46

Git通讲-第四章：Git的未来与我的感悟

Git的未来Git不仅是一个强大且灵活的分布式版本控制系统，而且在过去的十几年中不断发展。其未来发展方向体现在两大方面：核心功能的改进和与生态系统中其他工具的整合。

焦糖酒·2025-02-22 02:41

深度学习笔记之自然语言处理(NLP)

自然语言处理部分将包含《动手学深度学习》这本书的第十四章，自然语言处理预训练和第十五章，自然语言处理应用。并且参考原书提供的jupyternotebook资源。

电棍233·2025-02-22 02:10

科普：“git“与“github“

具体来说：一、Git定义：Git是一个开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目版本管理。它由LinusTorvalds开发，最初是为了帮助管理Linux内核开发。

人工干智能·2025-02-22 02:39

RPC：分布式系统的通信桥梁

在当今的软件开发领域，分布式系统已成为处理大规模、高并发业务的主流架构。

r_martian·2025-02-22 01:00

马斯克发布的Grok3如何,大家如何评价

技术特点与性能计算能力：Grok3的训练使用了约10万块GPU卡，计算能力是上一代Grok2的10倍。这种大规模的计算资源投入使得Grok3在推理能力和逻辑一致性方面表现出色。多模态与实时数据处

魔王阿卡纳兹·2025-02-22 01:30

Oracle 12c 并发统计信息收集功能：技术解析与实践指南

对于大规模数据库或数据仓库环境，这种串行模式可能导致统计信息收集耗时过长，影响维护窗口效率。

安呀智数据·2025-02-22 01:28

基于深度学习进行呼吸音检测的详细示例

整个流程包括数据加载、预处理、模型构建、训练和评估。步骤1：安装必要的库在开始之前，确保你已经安装了以下库：pipinstalltensorflowlibrosanumpypandas

go5463158465·2025-02-22 01:57

计算机学报论文字数要求,常见EI学报综述类文章分析

题目：(1)直接描述研究内容(48,58.5%)a)MIMO多跳无线网b)标识路由关键技术c)车用自组网信息广播d)复杂嵌入式实时系统体系结构设计与分析语言-AADLe)高速长距离网络传输协议f)广域网分布式

文艺范理工生·2025-02-22 00:53

一文看常见的消息队列对比

一、核心特性对比表维度KafkaRabbitMQRocketMQPulsar架构设计分布式日志系统，依赖ZooKeeper基于AMQP协议的代理模型主从架构+NameServer协调分层架构（Broker

蚂蚁在飞-·2025-02-22 00:49

雪花算法应用

雪花算法是由Twitter开源的分布式ID生成算法，用于生成64位的长整型唯一ID。

蚂蚁在飞-·2025-02-22 00:19

AI 模型的优化与应用：大模型本体、蒸馏、量化与 GGUF

引言近年来，大型语言模型（LLM）在人工智能领域取得了突破性的进展，但其计算需求高昂，训练和推理成本巨大。因此，如何优化大模型，使其在不同设备和应用场景下更高效地运行，成为了AI研究的重要课题。

CCSBRIDGE·2025-02-21 23:15

【深度学习】预训练和微调概述

预训练和微调概述1.预训练和微调的介绍1.1预训练（Pretraining）1.2微调（Fine-Tuning）2.预训练和微调的区别预训练和微调是现代深度学习模型训练中的两个关键步骤，它们通常是一个预训练

CS_木成河·2025-02-21 22:35

【深度学习大模型实例教程：Transformer架构、多模态模型与自监督学习】

Transformer架构、多模态模型与自监督学习1.深度学习基础概述1.1深度学习的核心概念1.2常见深度学习模型1.3大模型的挑战与解决方案2.数据准备2.1数据处理示例：CIFAR-103.构建深度学习模型4.训练模型

生活De°咸鱼·2025-02-21 22:34

SpringClould项目中，如何使用Redis实现分布式布隆过滤器？

1.单体布隆过滤器在分布式环境会出现的问题？

小南AI学院·2025-02-21 22:34

深度学习模型：原理、架构与应用

深度学习的核心是通过大量数据的训练，学习到数据的内在结构和模式，并且具备自动从复杂的输入中提取特征的能力。

一ge科研小菜菜·2025-02-21 22:00

基于深度学习的钢材表面缺陷检测系统：UI界面 + R-CNN + 数据集

内容涵盖从数据准备、R-CNN模型训练到UI界面设计

深度学习&目标检测实战项目·2025-02-21 21:30

鸿蒙OS系统技术架构特性解析 - 探索新技术HarmonyOS

鸿蒙OS（HarmonyOS）是华为公司为各类设备开发的全场景分布式操作系统，它具备强大的技术架构特性。本文将深入探讨鸿蒙OS的技术架构，并通过相应的源代码示例来解释其特性。

JfdCoding·2025-02-21 21:29

[HarmonyOS]简单说一下鸿蒙架构

鸿蒙操作系统（HarmonyOS）是由华为公司开发的一款面向全场景的操作分布式系统。它旨在提供一个统一的操作系统平台，支持多种设备，包括智能手机、平板电脑、智能电视、可穿戴设备、智能家居等。

郝晨妤·2025-02-21 21:28

2025年最新整理，RAID级别对比大全，建议收藏！

它像一支训练有素的“数据护卫队”，通过多硬盘协作，在速度、容量和安全性之间找到完美平衡⚡。本文将深入解析RAID的奥秘，从技

wljslmz·2025-02-21 20:25

【Kafka专栏 12】实时数据流与任务队列的较量：Kafka与RabbitMQ有什么不同

致力于探索技术的边界，分享前沿的实践和洞见文章专栏：夏之以寒-kafka专栏专栏介绍：本专栏旨在以浅显易懂的方式介绍Kafka的基本概念、核心组件和使用场景，一步步构建起消息队列和流处理的知识体系，无论是对分布式系统感兴趣

夏之以寒·2025-02-21 20:25

基于ThinkPHP 5~8兼容的推荐算法类实现，

本文将介绍如何基于ThinkPHP实现一个高性能的推荐系统，结合显性反馈（如兴趣选择）、隐性反馈（如观看时长、评论、点赞、搜索等）、行为序列分析和关键词拆分（支持中文）等功能，并通过优化方案支持大规模用户场景

极梦网络无忧·2025-02-21 20:24

Spark MLlib中的机器学习算法及其应用场景

SparkMLlib是ApacheSpark框架中的一个机器学习库，提供了丰富的机器学习算法和工具，用于处理和分析大规模数据。

Java资深爱好者·2025-02-21 20:47

蓝耘科技上线 DS 满血版，500万tokens免费送！

立志在坚不欲说，成功在久不在速欢迎关注：点赞⬆️留言收藏欢迎使用：小智初学计算机网页AI蓝耘元生代智算云架构蓝耘元生代智算云平台是一个现代化的、基于Kubernetes的云平台，专为大规模GPU加速工作负载而构建

Lethehong·2025-02-21 19:16

什么是语料清洗、预训练、指令微调、强化学习、内容安全；什么是megatron，deepspeed，vllm推理加速框架

什么是语料清洗、预训练、指令微调、强化学习、内容安全目录什么是语料清洗、预训练、指令微调、强化学习、内容安全语料清洗预训练指令微调强化学习内容安全什么是megatron，deepspeed，vllm推理加速框架语料清洗语料清洗是对原始文本数据进行处理的过程

ZhangJiQun&MXP·2025-02-21 19:45

解析Python网络爬虫：核心技术、Scrapy框架、分布式爬虫（选择题、填空题、判断题）（第1、2、3、4、5、6、7、10、11章）

第一章【填空题】网络爬虫又称网页蜘蛛或（网络机器人）网络爬虫能够按照一定的（规则），自动请求万维网站并提取网络数据。根据使用场景的不同，网络爬虫可分为（通用爬虫）和（聚焦爬虫）两种。爬虫可以爬取互联网上（公开）且可以访问到的网页信息。【判断题】爬虫是手动请求万维网网站且提取网页数据的程序。×爬虫爬取的是网站后台的数据。×通用爬虫用于将互联网上的网页下载到本地，形成一个互联网内容的镜像备份。√聚焦爬

一口酪·2025-02-21 19:41

媒体声音｜专访阿里云数据库周文超博士：AI就绪的智能数据平台设计思路

大模型在实际业务场景的落地过程中，必须有海量数据的支撑：经过训练、推理和分析等一系列复杂的数据处理过程，才能最终产生业务价值。

·2025-02-21 19:41

2024年国内人工智能大模型汇总

此外，文心一言还可以通过学习和训练，不断提高自己的

kiiy2·2025-02-21 18:02

高并发技巧-redis热key问题处理技巧

热key问题，简单来说就是对某一资源的访问量过高问题，再简单一点来说就是对某个资源访问的qps过高，而解决访问量高的问题通常我们使用分布式缓存，最常见的就是redis，这个资源对应redis的一个key

小二上酒8·2025-02-21 18:59

Python爬虫：分布式爬虫架构与Scrapy-Redis实现

摘要在面对大规模的数据爬取任务时，单台机器的爬虫往往效率低下且容易受到性能瓶颈的限制。分布式爬虫通过利用多台机器同时进行数据爬取，可以显著提高爬取效率和处理能力。

挖掘机技术我最强·2025-02-21 17:26

ELK技术栈：从入门到实践指南

二、核心组件详解Elasticsearch定位：分布式搜索与分析引擎，基于ApacheLucene构建。特性：实时

点点喜欢·2025-02-21 17:25

HUSTOJ随笔4-建立分布式判题系统

HUSTOJ支持一台数据库服务器，多台web服务器和多台判题服务器，以承担较高的访问负荷。首先，需要创建用于从远程连接数据库的帐号。GRANTALLPRIVILEGESONjol.*TO'judge'@'%'IDENTIFIEDBY'judge_pass'WITHOUTGRANTOPTION;flushprivileges复制代码其中jol为数据库，judge为帐号，judge_pass为密码。注

歪嘴鱼·2025-02-21 17:24

ssd训练自己的数据集

基于SSD算法实现对自己数据集的训练与检测。

reset2021·2025-02-21 17:22

深入理解 ZooKeeper：分布式协调服务的核心与应用

一、引言随着互联网技术的飞速发展，分布式系统的规模和复杂性不断增加。在分布式环境中，各个节点之间需要进行高效的协调和通信，以确保系统的正常运行。

一叶飘零_sweeeet·2025-02-21 16:47

推荐频道

大规模分布式训练