dataloader

day39

先继续之前的代码importtorchimporttorch.nnasnnimporttorch.optimasoptimfromtorch.utils.dataimportDataLoader,Dataset#DataLoader
心落薄荷糖·2025-06-28 21:40

Python打卡：Day38

知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解@浙大疏锦行
剑桥折刀s·2025-06-28 00:18

DAY 39 图像数据与显存

先继续之前的代码importtorchimporttorch.nnasnnimporttorch.optimasoptimfromtorch.utils.dataimportDataLoader,Dataset#DataLoader
小白菜333666·2025-06-26 02:01

60天python训练营打卡day38

学习目标：60天python训练营打卡学习内容：DAY38Dataset和Dataloader类知识点回顾：1.Dataset类的__getitem__和__len__方法（本质是python的特殊方法
tan90�=·2025-06-25 13:53

Pytorch学习 day06（torchvision中的datasets、dataloader）

torchvision的datasets使用torchvision提供的数据集API，比较方便，如果在pycharm中下载很慢，可以URL链接到迅雷中进行下载（有些URL链接在源码里）用来告诉程序，数据集存储的位置，共有多少样本等代码如下：importtorchvision#导入torchvision库#使用torchvision的datasets模块，模块中包含CIFAR10、CIFAR100、
丿罗小黑·2025-06-24 07:19

Python打卡训练营-Day38-Dataset和Dataloader类

@浙大疏锦行知识点回顾Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业了解下cifar数据集，尝试获取其中一张图片
traMpo1ine·2025-06-24 07:18

【Python打卡Day38】Dataset和Dataloader类 @浙大疏锦行

Dataset和Dataloader类在遇到大规模数据集时，显存常常无法一次性存储所有数据，所以需要使用分批训练的方法。
可能是猫猫人·2025-06-24 07:18

Python_day38Dataset和Dataloader类

为此，PyTorch提供了DataLoader类，该类可以自动将数据集切分为多个批次batch，并支持多线程加载数据。此外，还存在Dataset类，该类可以定义数据集的读取方式和预处理方式。
且慢.589·2025-06-24 06:46

DAY 38 Dataset和Dataloader类

知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业：了解下cifar数据集，尝试获取其中一张图片
weixin_51766214·2025-06-23 17:17

PyTorch：让深度学习像搭积木一样简单有趣！

文章目录一、张量：PyTorch世界的万能积木块⚡二、动态计算图：你的神经网络"乐高说明书"三、神经网络模块化：像堆积木一样建模型四、训练三板斧：优化器/损失函数/数据加载1.数据管道（Dataset+DataLoader
pythonpapaxia·2025-06-13 00:56

Python60日基础学习打卡D37

为此，PyTorch提供了DataLoader类，该类可以自动将数据集切分为多个批次batch，并支持多线程加载数据。此外，还存在Dataset类，该类可以定义数据集的读取方式和预处理方式。
哈基米同志·2025-06-12 23:16

GPU显存占用率过低的解决方案

一个可能的原因是dataloader的num_workers=0,只有一个主进程。为避免这种情况可以根据机器设置合适的num_workers，一般设置为8或16。
myccver·2025-06-12 08:24

python打卡day38@浙大疏锦行

知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业：了解下cifar数据集，尝试获取其中一张图片一
风逸hhh·2025-06-08 01:54

5.27 打卡

知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业：了解下cifar数据集，尝试获取其中一张图片
分散406·2025-06-05 04:03

python训练营打卡第38天

Dataset和Dataloader类知识点回顾：1.Dataset类的__getitem__和__len__方法（本质是python的特殊方法）2.Dataloader类3.minist手写数据集的了解
ppdkx·2025-06-05 04:02

python第39天打卡

先继续之前的代码importtorchimporttorch.nnasnnimporttorch.optimasoptimfromtorch.utils.dataimportDataLoader,Dataset#DataLoader
zdy1263574688·2025-06-04 17:05

Python----目标检测（训练YOLOV8网络）

二、制作数据集在data目录的同目录下，新建dataset目录，以存放制作好的YOLO的数据集，执行以下代码，完成数据划分（dataloader.py）importosimportrandomimportshutil
蹦蹦跳跳真可爱589·2025-06-03 19:49

DAY 38 Dataset和Dataloader类

对应5.27作业知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业：了解下cifar数据集，尝试获取其中一张图片
MasterLLL0228·2025-05-31 17:00

Python打卡训练营day38——2025.05.27

尝试获取其中一张图片importtorchimporttorch.nnasnnimporttorch.optimasoptimfromtorch.utils.dataimportDataLoader,Dataset#DataLoader
莱茵菜苗·2025-05-31 12:29

Python打卡训练营day38——2025.05.27

知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业：了解下cifar数据集，尝试获取其中一张图片
莱茵菜苗·2025-05-31 12:29

打卡day40

先继续之前的代码importtorchimporttorch.nnasnnimporttorch.optimasoptimfromtorch.utils.dataimportDataLoader,Dataset#DataLoader
文莉wenliii·2025-05-31 10:43

Python打卡DAY38

知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业：了解下cifar数据集，尝试获取其中一张图片
chicpopoo·2025-05-29 22:47

Python打卡day38！！！

DAY38Dataset和Dataloader类对应5.27作业知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist
dragon0907·2025-05-29 22:16

python打卡day38

Dataset和Dataloader类Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业：了解下cifar
ZHPEN1·2025-05-29 22:43

5.29打卡

@浙大疏锦行DAY38Dataset和Dataloader类知识点回顾：1.Dataset类的__getitem__和__len__方法（本质是python的特殊方法）2.Dataloader类3.minist
丁值心·2025-05-29 19:31

Python打卡 DAY 38

知识点回顾：Dataset类的__getitem__和__len__方法（本质是python的特殊方法）Dataloader类minist手写数据集的了解作业：了解下cifar数据集，尝试获取其中一张图片
冰轮a·2025-05-28 06:03

第P10周：PyTorch实现车牌识别

PyTorch实现车牌识别本文为365天深度学习训练营中的学习记录博客原作者：K同学啊在之前的案例中，我们多是使用datasets.ImageFolder函数直接导入已经分类好的数据集形成Dataset，然后使用DataLoader
失眠航行器·2025-05-28 01:52

机器学习dataloader中shuffle=True及使用随机种子控制随机性

我们首先来看如下代码：train_loader=DataLoader(train_dataset,batch_size=batch_size,shuffle=True)val_loader=Dataloader
行至568·2025-05-26 04:21

pytorch深度学习框架基本介绍

基础概念3.1张量(Tensor)3.1.1创建张量3.1.2张量的类型转换3.2自动微分(Autograd)4.构建神经网络4.1定义网络结构4.2使用nn.Module5.数据加载与处理5.1使用DataLoader5.2
一九11111·2025-05-26 04:19

pytorch运行卡住，即不报错也不停止

程序运行到加载数据时卡住for_,(support,query)inenumerate(eval_dataset)把dataloader里的num_workers=0也没用，但是把eunmerate去掉有用了
酷暑冷冰·2025-05-23 01:27

深度学习笔记12-mnist手写数字识别(Pytorch)

编写训练函数3.编写测试函数4.正式训练编辑四、结果可视化编辑五、总结1.Pytorch自带数据库：torchvision.dataset2.Pytorch自带数据加载器：torch.utils.data.DataLoader3
m0_67869333·2025-05-17 15:27

从代码学习深度学习 - 目标检测前置知识(二) PyTorch版

多尺度目标检测1.1多尺度锚框1.2绘图工具函数(`utils_for_huitu.py`)1.3可视化多尺度锚框1.4多尺度检测（理论）二、自定义目标检测数据集2.1读取数据2.2创建Dataset类2.3创建DataLoader2.4
飞雪白鹿€·2025-05-05 16:01

PyTorch中Dataset和DataLoader的使用介绍

本文总结一下PyTorch中Dataset和DataLoader的使用流程：首先假设存在一批数据格式如下：[{"answer":"hat","question":"Whatisthemanwearingonhishead
pyx1212·2025-04-25 14:37

PyTorch中Dataset和DataLoader的使用

二、`DataLoader`是什么？
GL_Rain·2025-04-25 14:04

Pytorch中的Dataset和DataLoader

torch.utils.data.DataLoader：负责批量加载数据、打乱数据、并行加载等。1.1为什么需要Dataset和DataLoader？
爱看烟花的码农·2025-04-25 14:03

pytorch dataloader 中collate_fn是什么

collate_fn（collatefunction）是在PyTorch中DataLoader中使用的一个参数，用于自定义数据加载和批处理的方式。
zhaoyqcsdn·2025-04-20 19:31

AdamW 是 Adam 优化算法的改进版本； warmup_steps：学习率热身的步数

`total_steps=len(dataloader)*num_epochs`warmup_steps：学习率热身的步数，学习率会从一个较小的值逐渐增加到初始学习
ZhangJiQun&MXP·2025-04-17 09:04

PyTorch学习DAY2transforms各种操作

人民币二分类数据数据收集-->Img，Label数据划分-->trainvalidtest数据读取-->DataLoader(Sampler-->Index，Dataset-->Img，Label)数据预处理
沙鳄鱼·2025-04-16 13:53

土堆pytorch教程学习笔记 （所有代码笔记超详细完整版）

目录一.read_data二.dataloader三.transforms四。
staozigege·2025-04-12 12:21

PyTorch DataLoader 参数详解

在使用PyTorch的DataLoader时，有许多参数可以调整，这些参数能够帮助我们平衡数据加载效率、内存使用和训练过程的稳定性。
AIGC_增益·2025-04-09 17:23

流式处理以及背后的哲学

主要特点：数据以"流"的形式连续处理处理是实时或近实时的每条数据只需通过管道一次系统能够无限期运行，处理源源不断的数据在PyTorch中，DataLoader和Dataset的组
AI Agent首席体验官·2025-04-08 12:50

NLP任务之文本分类(情感分析)

目录1加载预训练模型对应的分词器2加载数据集3数据预处理4构建数据加载器DataLoader5定义下游任务模型6测试代码7训练代码#做（中文与英文的）分类任务，Bert模型比较合适，用cls向下游任务传输数据
Hiweir ··2025-04-06 19:57

ComplexE的代码注释

目录dataloader.pymodel.pyrun.py先安装软件，配置环境，搞了一周。再看代码写注释搞了一周。中间隔了一周。再安装环境跑代码又一周。最后结果是没结果。自己电脑内存带不动。
水深00安东尼·2025-04-02 07:06

机器学习与深度学习4：数据集处理Dataset，DataLoader，batch_size

深度学习中，我们能看到别人的代码中都有一个继承Dataset类的数据集处理过程，这也是深度学习处理数据集的的基础，下面介绍这个数据集的定义和使用：1、数据集加载1.1通用的定义Bach：表示每次喂给模型的数据Epoch：表示训练一次完整数据集数据的过程解释：当一个数据集的大小为10时，设定batch大小为5，那么这个数据就会分为2份，每份大小为5，依次投入到模型中进行训练。训练完所有数据后，就叫做
爱打代码的小高·2025-03-28 12:33

pytorch的使用：卷积神经网络模块

1.读取数据分别构建训练集和测试集（验证集）DataLoader来迭代取数据使用transforms将数据转换为tensor格式#定义超参数input_size=28#图像的总尺寸28*28num_classes
樱花的浪漫·2025-03-18 00:11

pytorch中的DataLoader

在PyTorch中，DataLoader是一个工具类，用于高效地加载数据并准备数据输入到模型中。它支持数据的批量加载、随机打乱、并行加载和迭代操作，是训练深度学习模型的关键组件之一。
朋也透william·2025-03-17 21:48

Pytorch Dataloader入门

PytorchDataloadercode：torch/utils/data/dataloader.py#L71PytorchDatasettutorial:tutorials/beginner/basics
gy-7·2025-03-17 21:16

PyTorch中，将`DataLoader`加载的数据高效传输到GPU

一、数据加载到GPU的核心步骤数据预处理与张量转换若原始数据为NumPy数组或Python列表，需先转换为PyTorch张量：X_tensor=torch.from_numpy(X).float()#转换为浮点张量y_tensor=torch.from_numpy(y).long()#分类任务常用长整型显式指定设备：通过.to(device)将数据移至GPU（需提前定义device对象）：devi
大霸王龙·2025-03-17 20:42

第N3周：NLP中的数据集构建

其中包括Dataset和DataLoader两个类，它们通常结合使用来加载和处理数据。1.Datasettorch.u
OreoCC·2025-03-12 01:43

深度学习PyTorch之数据加载DataLoader

深度学习pytorch之简单方法自定义9类卷积即插即用文章目录数据加载基础架构1、Dataset类详解2、DataLoader核心参数解析3、数据增强数据加载基础架构核心类关系图torch.utils.data
@Mr_LiuYang·2025-03-11 18:49
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他