torch杂记

【Stable Diffusion部署至Google Colab】

pipinstalltorch==1.13.1+cu116torchvision==0.14.1+cu116tor

星星点点洲·2025-02-16 21:40

根据deepseek模型微调训练自动驾驶模型及数据集的思路

本流程假设你已有自动驾驶领域的数据集（如驾驶指令、传感器数据等），并基于PyTorch框架实现。

ywfwyht·2025-02-16 19:28

本地DeepSeek模型GGUF文件转换为PyTorch格式

今天我们就反其道而行之，将GGUF文件转换为PyTorch格式再训练。前提：已经部署好了Deep

搏博·2025-02-16 14:48

字节跳动实习生和校招生内推

机器学习算法实习生-平台治理1、2026届硕士及以上学位在读，计算机等相关专业优先；2、有扎实的代码能力，熟悉深度学习/图神经网络/机器学习框架，如Pytorch、Tensorflow、DGL、Pyg、

飞300·2025-02-16 10:15

MNIST Examples for GGML - Fully connected network

MNISTExamplesforGGML2.1.Obtainingthedata2.2.Fullyconnectednetwork2.2.1.TotrainafullyconnectedmodelinPyTorchandsaveitasaGGUFfile2.2.2

Yongqiang Cheng·2025-02-16 09:06

Python调用C语言动态库（DLL）结构体/指针/变量的方法

文章目录前言一、如何生成C语言动态库DLL第一步：安装编译工具第二步：设计C代码第三步：编译成C语言动态库DLL二、如何使用C语言动态库第一步：python/pytorch调入DLL接口第二步：Python

ENOCH_Q·2025-02-16 08:29

deepseek+python,离线api，持续对话

，exit退出程序，并且可持续对话代码fromtransformersimportAutoModelForCausalLM,AutoTokenizer,BitsAndBytesConfigimporttorch

守着黎明看日出·2025-02-16 05:43

第2节下：线性表示代码带写【带注释】

importtorchimportmatplotlib.pyplotasplt#画图用的importrandom#随机#生成数据，w表示权重，是一维向量（张量），b表示偏置值，是一个标量defcreate_data

人间普通饼饼·2025-02-16 04:37

第三章回归训练实战（以预测新冠感染人数为例）

fromsklearn.feature_selectionimportSelectKBestfromsklearn.feature_selectionimportchi2importcsv#读CSVimportnumpyasnpimporttimeimportmatplotlib.pyplotaspltimportpandasaspdfromtorchimp

不吃香菜（扣1复活版）·2025-02-16 04:03

动手学深度学习V2.0(Pytorch)——25. 使用块的网络 VGG

文章目录P1讲解1.1基本介绍1.2总结P2代码实现2.1报错解决2.2windows下专用/共享GPU内存P3Q&AP4.其他4.1ImageNetClassificationLeaderboard4.2VGG其它讲解P1讲解1.1基本介绍视频地址：https://www.bilibili.com/video/BV1Ao4y117Pd教材文档：https://zh-v2.d2l.ai/chapt

吨吨不打野·2025-02-16 04:58

【Python】解决PyTorch报错：PytorchStreamReader failed reading zip archive: failed finding central的解决方案

在使用PyTorch时，遇到“PytorchStreamReaderfailedreadingziparchive:failedfindingcentral”错误通常是由于损坏的模型文件或不兼容的文件版本导致的

I'mAlex·2025-02-16 03:27

【python语言应用】最新全流程Python编程、机器学习与深度学习实践技术应用（帮助你快速了解和入门 Python）

特别是PyTorch，凭借其灵活性和高效性，成为科研人员和工程师的首选工具。

赵钰老师·2025-02-15 14:20

Python深度学习代做目标检测NLP计算机视觉强化学习

Python中的深度学习框架（如TensorFlow、PyTorch）和计算机视觉

matlabgoodboy·2025-02-15 10:43

PyTorch入门实战：从零搭建你的第一个神经网络

目录一、PyTorch简介：为什么选择它？

不打滑的西瓜皮·2025-02-15 08:58

关于pip Install与conda install

我个人感觉比较好的实践是conda创建虚拟环境，装torch/tensorflow等比较难装的包，基础环境配好以后，后面装包一律用pip。

ClaNNEd@·2025-02-15 08:27

PyTorch Lightning LightningDataModule 介绍

LightningDataModule是PyTorchLightning提供的数据模块，用于统一管理数据加载流程（包括数据准备、预处理、拆分、批量加载等）。

qq_27390023·2025-02-14 23:21

【笔记】使用 Pytorch 进行分布式训练

本文原文以CCBY-NC-SA4.0许可协议发布于技术相关｜使用Pytorch进行分布式训练，转载请注明出处。

LittleNyima·2025-02-14 23:49

实验随记2-Pytorch Lightning多机多卡训练

本文章主要收录笔者在阅读时发现的一些比较优质的多机多卡训练教程~~，由于pytorchLightning多机多卡示例很少，因此需要等笔者最近做完实验验证后才能更新示例。

晓岚和雪·2025-02-14 23:48

PyTorch Lightning多GPU分布式日志介绍

PyTorchLightning提供了一些分布式日志控制工具，确保日志仅在rank0进程打印，防止重复输出。lightning_utiliti

qq_27390023·2025-02-14 23:48

Pytorch学习之路（3）

数据预处理：数据格式统一、异常数据消除、必要数据转换，划分训练集、验证集、测试集2.选择模型3.设定损失函数、优化方法、对应的超参数4.用模型拟合训练集数据，在验证集/测试集上计算模型表现二.数据读入pytorch

AAAx1anyu·2025-02-14 21:28

PyTorch 与 TensorFlow 的深度解析：全面比较两大深度学习框架，助你选择最适合的工具

PyTorch和TensorFlow作为其中的佼佼者，各自拥有庞大的用户群体和强大的社区支持。但它们在设计理念、使用体验和应用场景上有着显著的差异。

BuluAI·2025-02-14 19:10

一个AI应用的开发、上线流程解析

目录1.模型文件格式1.1CheckPoint(ckpt)文件格式1.2.pth文件格式1.3.mindir文件格式1.4.onnx文件格式2.推理（Inference）2.1.pth(PyTorch模型格式

終不似少年遊*·2025-02-14 17:03

使⽤MATLAB进⾏⽬标检测

Pytorch在深度学习领域占据了半壁江⼭，最主要的原因是⽣态完善，⽽且api直观易⽤。但谁能想到现在MATLAB⽤起来⽐Pytorch还好⽤。

唐BiuBiu·2025-02-14 15:13

基于PyTorch的生成对抗网络入门（5）——利用PyTorch搭建条件生成对抗网络（CGAN）超详解

目录一、案例描述二、代码详解2.1构建真实数据集2.2创建生成虚假数据2.3构建判别器2.3.1创建生成虚假标签2.3.2判别器类2.3.3测试判别器2.4构建生成器2.4.1生成器类2.4.2测试生成器2.5训练GAN2.6测试生成器的生成效果一、案例描述本文介绍利用条件生成对抗网络（CGAN）进行手写数字生成。比如说，要求生成不同的，但是都代表某一个数字的图像。二、代码详解2.1构建真实数据集

wendy_ya·2025-02-14 08:56

rk3588部署yolov8视频目标检测教程

训练部分（电脑端执行）2.1训练脚本（电脑端执行）3.onnx转rknn（电脑端执行）1.环境配置1.1训练和导出onnx环境（电脑端执行）#使用conda创建一个python环境condacreate-ntorchpython

今夕是何年，·2025-02-14 05:58

Pytorch的自动求导模块

文章目录torch.autograd.backward()基本用法非标量张量的反向传播保留计算图指定输入张量高阶梯度计算与y.backward()的区别torch.autograd.grad()基本用法非标量张量的梯度高阶梯度计算多输入

zoujiahui_2018·2025-02-14 05:57

Python 中如何 import 绝对路径的模块

importsyssys.path.append('模块所在路径')import路径下需要的模块使用场景：importsyssys.path.append('/Users/feishuoren/Projects/pytorch_learning

斐硕人·2025-02-14 04:16

AI Agent智能应用从0到1定制开发Langchain+LLM全流程解决方案与落地实战

指令微调、开源大模型微调、对齐与垂直领域应用29套AI全栈大模型项目实战，人工智能视频课程-多模态大模型，微调技术训练营，大模型多场景实战，AI图像处理，AI量化投资，OPenCV视觉处理，机器学习，Pytorch

AI知识分享官·2025-02-14 00:41

conda 装tensorboardx_【工欲善其事】TensorboardX的使用

经过社区的努力，目前PyTorch也可以使用tensorboard了。在训练过程中实时地观察loss/accuracy曲

weixin_39719042·2025-02-13 19:08

Pytorch实现一个简单DeepSeek中的MLA多头潜在注意力架构

首先，MLA是什么？可能是指Multi-HeadLocalAttention，即多头局部注意力，这种机制通常用于减少计算量，特别是在处理长序列时，每个头只关注局部区域。比如每个token只注意其周围的一定窗口内的其他token，而不是全局。这可能与传统的Transformer中的滑动窗口或局部注意力类似。接下来，我需要考虑如何将局部注意力与多头机制结合。每个注意力头可能有不同的局部窗口，或者共享相

DukeYong·2025-02-13 19:38

Deepseek的MOE架构中ColumnParallelLinear()是怎么实现的

我记得在PyTorch中，模型并行通常涉及到将模型的层分布到不同的GPU上。ColumnParallelLinear可能指的是将线性层的列（即输出神经元）分布在多个设备上。

DukeYong·2025-02-13 18:00

小白零基础学习深度学习之张量

1.张量PyTorch中的张量（Tensor）就是一种用来存储数据的“盒子”，这个盒子可以有不同的形状和大小，里面可以装各种数字。

爱理科的小王子·2025-02-13 17:53

深度学习-情感分析

以下将分别使用PyTorch和TensorFlow框架实现基于深度学习的情感分析，这里以影评的情感分析为例，数据集使用IMDB影评数据集。

小赖同学啊·2025-02-13 17:52

神经网络常见激活函数 9-CELU函数

文章目录CELU函数+导函数函数和导函数图像优缺点pytorch中的CELU函数tensorflow中的CELU函数CELU连续可微指数线性单元：CELU（ContinuouslyDifferentiableExponentialLinearUnit

亲持红叶·2025-02-13 15:37

大语言模型LLM代码：PyTorch库与ChatGLM模型

文章目录通过阅读大语言模型的代码，熟悉并理解PyTorch大语言模型LLM代码：PyTorch库与ChatGLM模型大语言模型中的PyTorchChatGLM3-6B模型代码ChatGLMModel类总览

North_D·2025-02-13 12:48

使用亚马逊针对 PyTorch 和 MinIO 的 S3 连接器进行模型检查点处理

2023年11月，Amazon宣布推出适用于PyTorch的S3连接器。适用于PyTorch的AmazonS3连接器提供了专为S3对象存储构建的PyTorch数据集基元（数据集和数据加载器）的实现。

MinIO分布式存储·2025-02-13 11:37

大模型笔记：pytorch实现MOE

0导入库importtorchimporttorch.nnasnnimporttorch.nn.functionalasF1专家模型#一个简单的专家模型，可以是任何神经网络架构classExpert(nn.Module

UQI-LIUWJ·2025-02-12 23:37

用Llama Factory单机多卡微调Qwen2.5时报torch.OutOfMemoryError: CUDA out of memory的解决办法

接着上一篇博客：在Ubuntu上用LlamaFactory命令行微调Qwen2.5的简单过程_llamafactory微调qwen2.5-CSDN博客如果需要微调比较大的模型，例如Qwen2.5-32B，那么在两个3090上可能不够用，这里我用A6000×4的服务器。但如果仿照上篇博客，直接运行：llamafactory-clitrainexamples/train_qlora/qwen_lora

蛐蛐蛐·2025-02-12 22:27

torch.rand(2,3,4,5)

a8=torch.rand(2,3,4,5)print(a8)#Outtensor([[[[0.3639,0.1432,0.1801,0.4668,0.6552],[0.3435,0.7637,0.8160,0.1193,0.5253

小句·2025-02-12 21:21

mnist数据集下载及使用

#mnist数据集在百度云盘里#链接：https://pan.baidu.com/s/1ca2rL2-0_JLtnH1YQ3otvA#提取码：uq3d#pytorch自带数据集的使用importtorchvisionfromtorchvision.datasetsimportMNISTmnist

小句·2025-02-12 21:21

pytorch笔记：mm VS bmm

1bmm(batchmatrixmultiplication)批量矩阵乘法，用于同时处理多个矩阵的乘法bmm的输入是两个3D张量（batchofmatrices），形状分别为(batch_size,n,m)和(batch_size,m,p)bmm输出的形状是(batch_size,n,p)2mmmm是标准的矩阵乘法操作，用于两个二维矩阵相乘mm仅适用于2D张量，输入的形状分别是(n,m)和(m,p

UQI-LIUWJ·2025-02-12 20:13

神经网络常见激活函数 7-ELU函数

文章目录ELU函数+导函数函数和导函数图像优缺点pytorch中的ELU函数tensorflow中的ELU函数ELU指数线性单元：ELU（ExponentialLinearUnit）函数+导函数ELU函数

亲持红叶·2025-02-12 19:30

【PyTorch】transpose() 和 permute() 函数：交换张量维度

在PyTorch中，transpose和permute都是用于调整张量维度的函数。它们在很多深度学习任务中非常有用，尤其是在处理张量维度和进行矩阵操作时。

彬彬侠·2025-02-12 15:38

【ai】李沐动手深度学学v2 环境安装：anaconda3、pycharm、d2

cuda-toolkitcuda_12.5.0_windows_network.exe官方课程网站第二版资源下载release版本pycharm版本李沐【动手学深度学习v2PyTorch版】课程笔记CUDA

等风来不如迎风去·2025-02-12 15:05

【权重小技巧(2)】模型权重文件总结: .bin、.safetensors、.pt的保存、加载方法一览

.bin文件通常是通过torch.save(state_dict)来保存的，因此需要使用torch.load()进行加载。

多恩Stone·2025-02-12 11:14

多个tensor合并成一个——四个三维tensor合成一个四维tensor——四个[3,512,1024]变成[4,3,512,1024]

四个[3,512,1024]变成[4,3,512,1024]：——先将[3,512,1024]用torch.unsqueeze()，变成[1,3,512,1024]——用for循环，分别对四个三维tensor

captain飞虎大队·2025-02-12 11:43

pytorch深度学习模型推理和部署、pytorch&ONNX&tensorRT模型转换以及python和C++版本部署

目录1.采用pytorch进行推理2.采用onnx进行推理2.1pytorch转换为onnx2.2onnx推理3.采用tensorrt进行推理（python环境）3.1onnx转engine文件3.2tensorrt

机械心·2025-02-12 10:40

大模型中 .safetensors 文件、.ckpt文件和.pth以及.bin文件区别、加载和保存以及转换方式

目录模型格式介绍加载以及保存-加载.safetensors文件：-保存/加载.pth文件：-保存/加载.ckpt文件：-处理.bin文件：模型之间的互相转换pytorch-lightning和pytorchckpt

telllong·2025-02-12 10:38

基于PyTorch框架实现，展示如何使用ResNet50进行特征提取，并结合MMD用于领域适应，迁移学习在轴承故障诊断中的应用

基于PyTorch框架实现，展示如何使用ResNet50进行特征提取，并结合MMD用于领域适应，迁移学习在轴承故障诊断中的应用_迁移学习轴承诊断DAN:ResNet50-MMD以下文字及代码仅供参考。

QQ_767172261·2025-02-12 07:15

torch.nn.LSTM介绍

torch.nn.LSTM是PyTorch提供的一个高级封装，用于构建长短时记忆网络（LSTM）。

qq_27390023·2025-02-11 17:02

推荐频道