pytorch模型训练实用教程

使用Python实现深度学习模型：知识蒸馏与模型压缩

目录引言知识蒸馏概述模型压缩概述实现步骤数据准备教师模型训练学生模型训练（知识蒸馏）模型压缩代码实现结论1.引言在实际应用中，深

Echo_Wish·2025-02-17 04:34

深度学习框架探秘｜TensorFlow vs PyTorch：AI 框架的巅峰对决

在深度学习框架中，TensorFlow和PyTorch无疑是两大明星框架。前面两篇文章我们分别介绍了TensorFlow（点击查看）和PyTorch（点击查看）。

紫雾凌寒·2025-02-17 04:34

KTransformers：告别天价显卡！国产框架让单卡24G显存跑DeepSeek-R1 671B大模型：推理速度飙升28倍

❤️如果你也关注AI的发展现状，且对AI应用开发感兴趣，我会每日分享大模型与AI领域的开源项目和应用，提供运行实例和实用教程，帮助你快速上手AI技术！

蚝油菜花·2025-02-17 00:32

根据deepseek模型微调训练自动驾驶模型及数据集的思路

本流程假设你已有自动驾驶领域的数据集（如驾驶指令、传感器数据等），并基于PyTorch框架实现。

ywfwyht·2025-02-16 19:28

如何使用DeepSeek训练模型

目录准备工作硬件要求软件环境数据收集与预处理数据收集数据预处理模型构建与训练模型构建模型训练模型评估与调优评估指标调优方法部署与应用部署方式应用集成✍️相关问答DeepSeek模型在医疗领域的具体应用案例有哪些

LCG元·2025-02-16 18:17

本地DeepSeek模型GGUF文件转换为PyTorch格式

今天我们就反其道而行之，将GGUF文件转换为PyTorch格式再训练。前提：已经部署好了Deep

搏博·2025-02-16 14:48

labelme转YOLOv8、YOLOv5 标签格式标注数据

前言本文分析将labelme的标签，转为YOLOv8、YOLOv5的格式，实现模型训练。首先了解YOLOv8和YOLOv5标签格式，然后了解labelme标签格式，最近实现数据格式转换。

一颗小树x·2025-02-16 10:20

字节跳动实习生和校招生内推

机器学习算法实习生-平台治理1、2026届硕士及以上学位在读，计算机等相关专业优先；2、有扎实的代码能力，熟悉深度学习/图神经网络/机器学习框架，如Pytorch、Tensorflow、DGL、Pyg、

飞300·2025-02-16 10:15

MNIST Examples for GGML - Fully connected network

MNISTExamplesforGGML2.1.Obtainingthedata2.2.Fullyconnectednetwork2.2.1.TotrainafullyconnectedmodelinPyTorchandsaveitasaGGUFfile2.2.2

Yongqiang Cheng·2025-02-16 09:06

GitHub 热点项目介绍

可通过pip安装并使用CRI命令进行模型训练、评估和推理。项目中还提供了详细的not

tomlone·2025-02-16 08:34

Python调用C语言动态库（DLL）结构体/指针/变量的方法

文章目录前言一、如何生成C语言动态库DLL第一步：安装编译工具第二步：设计C代码第三步：编译成C语言动态库DLL二、如何使用C语言动态库第一步：python/pytorch调入DLL接口第二步：Python

ENOCH_Q·2025-02-16 08:29

动手学深度学习V2.0(Pytorch)——25. 使用块的网络 VGG

文章目录P1讲解1.1基本介绍1.2总结P2代码实现2.1报错解决2.2windows下专用/共享GPU内存P3Q&AP4.其他4.1ImageNetClassificationLeaderboard4.2VGG其它讲解P1讲解1.1基本介绍视频地址：https://www.bilibili.com/video/BV1Ao4y117Pd教材文档：https://zh-v2.d2l.ai/chapt

吨吨不打野·2025-02-16 04:58

【Python】解决PyTorch报错：PytorchStreamReader failed reading zip archive: failed finding central的解决方案

在使用PyTorch时，遇到“PytorchStreamReaderfailedreadingziparchive:failedfindingcentral”错误通常是由于损坏的模型文件或不兼容的文件版本导致的

I'mAlex·2025-02-16 03:27

大模型参数高效微调（PEFT）技术解析及微调加速实践

2023年，大模型如雨后春笋般爆发，58同城TEG-AILab作为AI平台部门，紧跟大语言模型技术发展步伐，打造了大语言模型平台，支持大语言模型训练和推理部署，并基于大语言模型平台构建了58同城生活服务领域

AI产品经理·2025-02-16 03:53

【python语言应用】最新全流程Python编程、机器学习与深度学习实践技术应用（帮助你快速了解和入门 Python）

特别是PyTorch，凭借其灵活性和高效性，成为科研人员和工程师的首选工具。

赵钰老师·2025-02-15 14:20

ML.NET库学习006：成人人口普查数据分析与分类预测

文章目录ML.NET库学习006：成人人口普查数据分析与分类预测概述数据集数据字段解释为何数据准备很重要主要功能与模块数据准备机器学习工作流代码结构说明数据准备模块机器学习工作流数据加载与分割特征工程与模型训练模型评估与预测实现细节与注意事项数据准备模块机器学习工作流性能优化项目优势

North_D·2025-02-15 14:18

Python深度学习代做目标检测NLP计算机视觉强化学习

Python中的深度学习框架（如TensorFlow、PyTorch）和计算机视觉

matlabgoodboy·2025-02-15 10:43

PyTorch入门实战：从零搭建你的第一个神经网络

目录一、PyTorch简介：为什么选择它？

不打滑的西瓜皮·2025-02-15 08:58

基于YOLOv5深度学习的木材表面缺陷检测系统：UI界面 + YOLOv5 + 数据集详细教程

本博客将详细介绍如何构建一个基于YOLOv5的木材表面缺陷检测系统，包括数据集准备、模型训练、UI界面开发及完整代码实现。目录目

深度学习&目标检测实战项目·2025-02-15 04:27

PyTorch Lightning LightningDataModule 介绍

LightningDataModule是PyTorchLightning提供的数据模块，用于统一管理数据加载流程（包括数据准备、预处理、拆分、批量加载等）。

qq_27390023·2025-02-14 23:21

【笔记】使用 Pytorch 进行分布式训练

本文原文以CCBY-NC-SA4.0许可协议发布于技术相关｜使用Pytorch进行分布式训练，转载请注明出处。

LittleNyima·2025-02-14 23:49

实验随记2-Pytorch Lightning多机多卡训练

本文章主要收录笔者在阅读时发现的一些比较优质的多机多卡训练教程~~，由于pytorchLightning多机多卡示例很少，因此需要等笔者最近做完实验验证后才能更新示例。

晓岚和雪·2025-02-14 23:48

PyTorch Lightning多GPU分布式日志介绍

PyTorchLightning提供了一些分布式日志控制工具，确保日志仅在rank0进程打印，防止重复输出。lightning_utiliti

qq_27390023·2025-02-14 23:48

Pytorch学习之路（3）

数据预处理：数据格式统一、异常数据消除、必要数据转换，划分训练集、验证集、测试集2.选择模型3.设定损失函数、优化方法、对应的超参数4.用模型拟合训练集数据，在验证集/测试集上计算模型表现二.数据读入pytorch

AAAx1anyu·2025-02-14 21:28

PyTorch 与 TensorFlow 的深度解析：全面比较两大深度学习框架，助你选择最适合的工具

PyTorch和TensorFlow作为其中的佼佼者，各自拥有庞大的用户群体和强大的社区支持。但它们在设计理念、使用体验和应用场景上有着显著的差异。

BuluAI·2025-02-14 19:10

一个AI应用的开发、上线流程解析

目录1.模型文件格式1.1CheckPoint(ckpt)文件格式1.2.pth文件格式1.3.mindir文件格式1.4.onnx文件格式2.推理（Inference）2.1.pth(PyTorch模型格式

終不似少年遊*·2025-02-14 17:03

使⽤MATLAB进⾏⽬标检测

Pytorch在深度学习领域占据了半壁江⼭，最主要的原因是⽣态完善，⽽且api直观易⽤。但谁能想到现在MATLAB⽤起来⽐Pytorch还好⽤。

唐BiuBiu·2025-02-14 15:13

9、深度学习-自学之路-损失函数、梯度下降、学习率、权重更新的理解

我们先来讲一下损失函数，e_dn=(p_dn-ture)**2#损失值的计算p_dn：预测值ture：真实值e_dn：损失值我们在第7章说了，我们的预测值和真实值相差越小（也就是损失值越小），说明我们模型训练的越好

小宇爱·2025-02-14 11:16

基于PyTorch的生成对抗网络入门（5）——利用PyTorch搭建条件生成对抗网络（CGAN）超详解

目录一、案例描述二、代码详解2.1构建真实数据集2.2创建生成虚假数据2.3构建判别器2.3.1创建生成虚假标签2.3.2判别器类2.3.3测试判别器2.4构建生成器2.4.1生成器类2.4.2测试生成器2.5训练GAN2.6测试生成器的生成效果一、案例描述本文介绍利用条件生成对抗网络（CGAN）进行手写数字生成。比如说，要求生成不同的，但是都代表某一个数字的图像。二、代码详解2.1构建真实数据集

wendy_ya·2025-02-14 08:56

Pytorch的自动求导模块

文章目录torch.autograd.backward()基本用法非标量张量的反向传播保留计算图指定输入张量高阶梯度计算与y.backward()的区别torch.autograd.grad()基本用法非标量张量的梯度高阶梯度计算多输入、多输出的梯度计算未使用的输入张量保留计算图与backward()的区别torch.autograd.backward()该函数实现自动求导梯度，函数如下：torc

zoujiahui_2018·2025-02-14 05:57

Python 中如何 import 绝对路径的模块

importsyssys.path.append('模块所在路径')import路径下需要的模块使用场景：importsyssys.path.append('/Users/feishuoren/Projects/pytorch_learning

斐硕人·2025-02-14 04:16

华为 MindStudio 安装指南

它支持模型训练、推理、算子开发、性能优化等AI任务，并依赖CANN（ComputeArchitectureforNeuralNetworks）作为计算架构基础。

丰年稻香·2025-02-14 03:01

DeepClaude：结合 DeepSeek R1 和 Claude AI 各自优势开发的 AI 应用平台，支持 API 调用和零延迟的即时响应

❤️如果你也关注AI的发展现状，且对AI应用开发感兴趣，我会每日分享大模型与AI领域的开源项目和应用，提供运行实例和实用教程，帮助你快速上手AI技术！

蚝油菜花·2025-02-14 02:25

AI Agent智能应用从0到1定制开发Langchain+LLM全流程解决方案与落地实战

指令微调、开源大模型微调、对齐与垂直领域应用29套AI全栈大模型项目实战，人工智能视频课程-多模态大模型，微调技术训练营，大模型多场景实战，AI图像处理，AI量化投资，OPenCV视觉处理，机器学习，Pytorch

AI知识分享官·2025-02-14 00:41

DeepSeek使用手册，其中一份是清华大学出品

DeepSeek（深度求索）是一款由杭州深度求索人工智能基础技术研究有限公司开发的人工智能平台，专注于提供高效易用的AI模型训练与推理能力。

cpa007·2025-02-13 20:45

conda 装tensorboardx_【工欲善其事】TensorboardX的使用

经过社区的努力，目前PyTorch也可以使用tensorboard了。在训练过程中实时地观察loss/accuracy曲

weixin_39719042·2025-02-13 19:08

Pytorch实现一个简单DeepSeek中的MLA多头潜在注意力架构

首先，MLA是什么？可能是指Multi-HeadLocalAttention，即多头局部注意力，这种机制通常用于减少计算量，特别是在处理长序列时，每个头只关注局部区域。比如每个token只注意其周围的一定窗口内的其他token，而不是全局。这可能与传统的Transformer中的滑动窗口或局部注意力类似。接下来，我需要考虑如何将局部注意力与多头机制结合。每个注意力头可能有不同的局部窗口，或者共享相

DukeYong·2025-02-13 19:38

Deepseek的MOE架构中ColumnParallelLinear()是怎么实现的

我记得在PyTorch中，模型并行通常涉及到将模型的层分布到不同的GPU上。ColumnParallelLinear可能指的是将线性层的列（即输出神经元）分布在多个设备上。

DukeYong·2025-02-13 18:00

如何避免交叉验证中的数据泄露？

什么是数据泄露数据泄露是指在模型训练过程中，模型不恰当地接触到了与验证集或

奋进小青·2025-02-13 17:25

小白零基础学习深度学习之张量

1.张量PyTorch中的张量（Tensor）就是一种用来存储数据的“盒子”，这个盒子可以有不同的形状和大小，里面可以装各种数字。

爱理科的小王子·2025-02-13 17:53

深度学习-情感分析

以下将分别使用PyTorch和TensorFlow框架实现基于深度学习的情感分析，这里以影评的情感分析为例，数据集使用IMDB影评数据集。

小赖同学啊·2025-02-13 17:52

神经网络常见激活函数 9-CELU函数

文章目录CELU函数+导函数函数和导函数图像优缺点pytorch中的CELU函数tensorflow中的CELU函数CELU连续可微指数线性单元：CELU（ContinuouslyDifferentiableExponentialLinearUnit

亲持红叶·2025-02-13 15:37

大语言模型LLM代码：PyTorch库与ChatGLM模型

文章目录通过阅读大语言模型的代码，熟悉并理解PyTorch大语言模型LLM代码：PyTorch库与ChatGLM模型大语言模型中的PyTorchChatGLM3-6B模型代码ChatGLMModel类总览

North_D·2025-02-13 12:48

基于深度学习的半导体检测与预测算法研究(二)

本文详细探讨了深度学习在半导体缺陷检测、工艺参数预测等方面的应用原理和方法，介绍了常见的深度学习模型如卷积神经网络（CNN）、循环神经网络（RNN）及其变体在半导体数据处理中的应用，分析了模型训练与优化的关键技术

埃菲尔铁塔_CV算法·2025-02-13 12:45

基于深度学习的半导体算法原理及应用

埃菲尔铁塔_CV算法·2025-02-13 12:44

使用亚马逊针对 PyTorch 和 MinIO 的 S3 连接器进行模型检查点处理

2023年11月，Amazon宣布推出适用于PyTorch的S3连接器。适用于PyTorch的AmazonS3连接器提供了专为S3对象存储构建的PyTorch数据集基元（数据集和数据加载器）的实现。

MinIO分布式存储·2025-02-13 11:37

JSP实用教程(3)——Tag文件和Tag标记

文章目录Tag文件与Tag标记Tag文件Tag文件的结构Tag文件的保存Tag标记Tag标记Tag标记的使用Tag文件中的常用指令tag指令variable指令taglib指令Tag文件与Tag标记Tag文件可以被JSP页面动态加载调用，实现代码的复用Tag文件Tag文件的结构普通的HTML标记符某些特殊的指令标记成员变量声明和方法的定义Java程序片Java表达式例：oddNumberSum.t

不归路(T＿T)·2025-02-13 05:52

【python 机器学习】sklearn转换器与预估器

通俗介绍：学术解释：3.转换器与预估器的共同点4.转换器与预估器的区别5.使用`sklearn`中的转换器与预估器5.1示例：数据标准化（转换器）5.2示例：模型训练与预测（预估器）6.使用`Pipeline

人才程序员·2025-02-13 03:04

大模型笔记：pytorch实现MOE

0导入库importtorchimporttorch.nnasnnimporttorch.nn.functionalasF1专家模型#一个简单的专家模型，可以是任何神经网络架构classExpert(nn.Module):def__init__(self,input_size,output_size):super(Expert,self).__init__()self.fc=nn.Linear(i

UQI-LIUWJ·2025-02-12 23:37

mnist数据集下载及使用

#mnist数据集在百度云盘里#链接：https://pan.baidu.com/s/1ca2rL2-0_JLtnH1YQ3otvA#提取码：uq3d#pytorch自带数据集的使用importtorchvisionfromtorchvision.datasetsimportMNISTmnist

小句·2025-02-12 21:21

推荐频道