pytorch踩坑

在Ubuntu中编译含有JSON的文件出现报错

芝麻糊76·2024-09-16 08:41

[实践应用] 深度学习之优化器

常见的优化函数有很多种，下面是几种主流的优化器及其特点、原理和PyTorch实现：1.随机梯度下降（SGD）原理:随机梯度下降通过

YuanDaima2048·2024-09-16 04:38

个人学习笔记7-6：动手学深度学习pytorch版-李沐

#人工智能##深度学习##语义分割##计算机视觉##神经网络#计算机视觉13.11全卷积网络全卷积网络（fullyconvolutionalnetwork，FCN）采用卷积神经网络实现了从图像像素到像素类别的变换。引入l转置卷积（transposedconvolution）实现的，输出的类别预测与输入图像在像素级别上具有一一对应关系：通道维的输出即该位置对应像素的类别预测。13.11.1构造模型下

浪子L·2024-09-16 00:45

【安装环境】配置MMTracking环境

先安装numpy，因为pytorch的安装会自动配置高版本numpy。

xuanyu22·2024-09-15 18:53

Python(PyTorch)和MATLAB及Rust和C++结构相似度指数测量导图

要点量化检查图像压缩质量低分辨率多光谱和高分辨率图像实现超分辨率分析图像质量图像索引/多尺度结构相似度指数和光谱角映射器及视觉信息保真度多种指标峰值信噪比和结构相似度指数测量结构相似性图像分类PNG和JPEG图像相似性近似算法图像压缩，视频压缩、端到端优化图像压缩、神经图像压缩、GPU变速图像压缩手术机器人深度估计算法重建三维可视化推理图像超分辨率算法模型三维实景实时可微分渲染算法MATLAB结构

亚图跨际·2024-09-15 18:20

【深度学习】训练过程中一个OOM的问题，太难查了

pytorch爆内存了，然后journald假死了，在journald被watchdog干掉之后，系统就崩溃了。这种规模的爆内存一般，即使被oomkill了，也要卡半天的，确实会这样，能不能配

weixin_40293999·2024-09-15 17:16

Pyorch中 nn.Conv1d 与 nn.Linear 的区别

即一维卷积层和全联接层的区别nn.Conv1d和nn.Linear都是PyTorch中的层，它们用于不同的目的，主要区别在于它们处理输入数据的方式和执行的操作类型。

迪三·2024-09-15 14:00

图片中的上采样，下采样和通道融合(up-sample, down-sample, channel confusion)

前言以conv2d为例（即图片），Pytorch中输入的数据格式为tensor，格式为:[N,C,W,H,W]第一维N.代表图片个数，类似一个batch里面有N张图片第二维C.代表通道数，在模型中输入如果为彩色

迪三·2024-09-15 14:00

注册中心 Nacos 异常实例需要30s才能剔除 Nacos心跳时间设置（踩坑）

instance.setPort(9999);Mapmetadata=newHashMap();//设置心跳的周期，单位为秒，这里将心跳间隔设置为3秒：metadata.put(PreservedMetadataKeys.HEART_BEAT_INTERVAL,“3000”);//设置心跳超时时间，单位为秒，这里将心跳超时时间设为6秒，//即服务端6秒收不到客户端心跳，会将该客户端注册的实例设为不

2401_84046645·2024-09-15 08:35

深度学习：怎么看pth文件的参数

.pth文件是PyTorch模型的权重文件，它通常包含了训练好的模型的参数。要查看或使用这个文件，你可以按照以下步骤操作：1.确保你有模型的定义你需要有创建这个.pth文件时所用的模型的代码。

奥利给少年·2024-09-15 03:31

每天五分钟玩转深度学习PyTorch：模型参数优化器torch.optim

在pytorch中定义了优化器optim，我们可以使用它调用封装好的优化算法，然后传递给它神经网络模型参数，就可以对模型进行优化。

幻风_huanfeng·2024-09-14 23:32

【Webpack 踩坑】CSS加载缓慢

问题：使用webpack5，单独index.scss在assets/css目录下，但是不管是production还是development环境下，都会出现dom加载完后再渲染样式本意是想要将样式单独打包到一个文件夹，还有压缩css于是用了mini-css-extract-plugin这个loader（前提要先安装）//webpack.config.jsconstMiniCssExtractPlug

①条咸鱼·2024-09-14 17:49

【深度学习】【OnnxRuntime】【Python】模型转化、环境搭建以及模型部署的详细教程

环境搭建以及模型部署的详细教程提示:博主取舍了很多大佬的博文并亲测有效,分享笔记邀大家共同学习讨论文章目录【深度学习】【OnnxRuntime】【Python】模型转化、环境搭建以及模型部署的详细教程前言模型转换--pytorch

牙牙要健康·2024-09-14 14:34

vllm在线推理踩坑记

最近在《AI大模型全栈工程师》课程里看老师推荐使用vllm部署大模型，优点就不详细介绍了，这里摘抄一段来自于Qwen2上手指南对于它的简单介绍：它易于使用，且具有最先进的服务吞吐量、高效的注意力键值内存管理（通过PagedAttention实现）、连续批处理输入请求、优化的CUDA内核等功能。至于原理就先不看了，直接上手部署，以后再来补理论知识。一、vLLM在线推理在Qwen2的上市指南里介绍了v

懂点投资的码农·2024-09-14 12:14

Swift基础语法学习

Swift基础语法学习0前言--Swift特点优势(忽悠点)1环境搭建1.1Xcode安装1.2离线安装踩坑指南2Swift语言2.1基本数据类型2.1.1申明常量和变量2.1.2整数类型2.1.3浮点数

中古传奇·2024-09-14 09:59

怎样避免踩坑

怎样避免踩坑小白在购买莆田鞋时有很多不懂的问题，而且莆田鞋商家卖的货又良莠不齐，为了避免踩坑今天我就把经验分享给大家，记住最重要的一点就是找到一个比较实在的良心商家购买，因为真正做生意的诚信商家是不会为了一点蝇头小利去坑人的

芒果不芒·2024-09-14 05:29

PyTorch官方免CUDA加速推理，Triton时代要来？

在做大语言模型（LLM）的训练、微调和推理时，使用英伟达的GPU和CUDA是常见的做法。在更大的机器学习编程与计算范畴，同样严重依赖CUDA，使用它加速的机器学习模型可以实现更大的性能提升。虽然CUDA在加速计算领域占据主导地位，并成为英伟达重要的护城河之一。但其他一些工作的出现正在向CUDA发起挑战，比如OpenAI推出的Triton，它在可用性、内存开销、AI编译器堆栈构建等方面具有一定的优势

诗者才子酒中仙·2024-09-14 04:56

pytorch安装(windows)

（1）下载pycharmPyCharm:thePythonIDEforProfessionalDevelopersbyJetBrains(2)下载anacondaAnaconda|TheWorld'sMostPopularDataSciencePlatform(3)创建一个新环境：torchcondacreate-ntorch-y(4)进入新环境condaactivatetorch(5)加入清华源

m0_62244898·2024-09-14 03:19

深度学习入门篇：PyTorch实现手写数字识别

在众多的深度学习框架中，PyTorch以其动态计算图、易用性强和灵活度高等特点，受到了广泛的喜爱。本篇文章将带领大家使用PyTorch框架，实现一个手写数字识别的基础模型。

AI_Guru人工智能·2024-09-14 02:43

每日踩坑之前后端时间格式转换

时间格式转换1.在后台进行格式处理今天在做管理员显示用户信息的时候发现，数据库里面保存的Date类取出后的格式是这样的：MonMar0911:36:53CST2020。我们都知道平时显示的时间格式都是2020-03-0911:36:53，而这个显示的是Date类默认格式。原模原样的返回给用户看肯定是不行的。话不多说，上代码：Datedate=newDate();SimpleDateFormatsd

孤心人·2024-09-13 23:49

dubbo整合nacos（狠狠踩坑之自己淋过雨不想让别人也一起）

我是看了网上的代码，狠狠踩坑，这个东西搞了好久~~~2.消费服务和提供服务都加上依赖org.apache.dubbodubbo3.0.9com.alibaba.nacosnacos-client2.1.03

程序员-珍·2024-09-13 22:48

【ShuQiHere】小白也能懂的 TensorFlow 和 PyTorch GPU 配置教程

然而，对于许多刚刚入门的小白来说，如何在TensorFlow和PyTorch中指定使用GPU进行训练可能会感到困惑。

ShuQiHere·2024-09-13 15:08

解决ModuleNotFoundError: No module named ‘torch的方法

torch是PyTorch深度学习框架的核心库，如果你的Python环境中没有安装这个库，尝试导入时就会遇到这个错误。

梅菊林·2024-09-13 14:30

gitlab的下载和安装教程&我的踩坑经验

#######这里就记录一下内网的安装包形式的安装过程############1、下载过程和安装过程1）进入gitlab官网，platform>Install.--gitlab有极狐版，CE(社区版)和EE(企业版)。下面以CE版进行研究和学习。2）也可以进入官网镜像网站或者其它各大镜像网站下载gitlab-ce的rpm包--官网镜像网站：https://packages.gitlab.com/g

o762·2024-09-13 13:52

Python中item()和items()的用处

item()区别一:在pytorch训练时，一般用到.item()。比如loss.item()。

~|Bernard|·2024-09-13 07:48

python apscheduler、任务可以是死循环吗_flask_apscheduler 定时任务踩坑记录

背景由于需要再flask做一个定时任务，然后发现了这个库flask_apscheduler.使用很简单，就是可能由于某种情况，会有一些意外，下面是我的使用记录。首先按照官方文档跑一个示例fromflaskimportFlaskfromflask_apschedulerimportAPSchedulerclassConfig(object):JOBS=[{'id':'job1','func':'jo

weixin_39564605·2024-09-13 07:47

SpringCloud-Alibaba之Seata入门以及踩坑

前言上一篇文章：➣SpringCloudAlibaba之Seata入门以及踩坑（一）老顾介绍了seata相关的准备工作，以及版本的选择；今天老顾就来介绍一下seata的使用。

DN金猿·2024-09-13 06:05

GPU版pytorch安装

由于经常重装系统，导致电脑的环境需要经常重新配置，其中尤其是cudatorch比较难以安装，因此记录一下安装GPU版本torch的过程。1）安装CUDAtoolkit这个可以看做是N卡所有cuda计算的基础，一般都会随驱动的更新自动安装，但是不全，仍然需要安装toolkit，并不需要先看已有版本是哪个，反正下载完后会自动覆盖原有的cuda。下载网站两个：国内网站：只能下载最新的toolkit，但是

普通攻击往后拉·2024-09-13 03:13

轻松升级：Ollama + OpenWebUI 安装与配置【AIStarter】

安装必要的依赖库，如TensorFlow或PyTorch等。更新步骤克隆项目：使用Git命令行工具克隆最新的Ollama和OpenWebUI仓库到本地。更新代码：确保你正在使

ai_xiaogui·2024-09-13 02:36

conda环境管理

来看一看使用conda来进行环境管理的基本命令创建环境创建一个名为test的python环境，指定python版本是3.7.3，并在test环境中安装pytorchcondacreate--nametestpython

Johnson0722·2024-09-12 23:49

R-Drop pytorch实现

Pytorch实现了R-Drop，可以用于训练分类模型。

warpin·2024-09-12 21:39

避坑指南：ECS 与 RDS 选购的那些“坑”，你踩了几个？

然而，许多人在选购和配置这两者时容易踩坑，比如在VPC、可用区等关键配置上的选择。这篇文章将结合我踩过的坑，分享选购ECS和RDS的最佳实践，帮助大家避免那些隐藏的“地雷”。️

吃面不喝汤66·2024-09-12 18:20

Transformer模型：WordEmbedding实现

前言最近在学Transformer，学了理论的部分之后就开始学代码的实现，这里是跟着b站的up主的视频记的笔记，视频链接：19、Transformer模型Encoder原理精讲及其PyTorch逐行实现

Galaxy.404·2024-09-12 17:42

如何使用Pytorch-Metric-Learning？

文章目录如何使用Pytorch-Metric-Learning？

鱼儿也有烦恼·2024-09-12 17:12

每天五分钟玩转深度学习框架PyTorch：获取神经网络模型的参数

本文重点当我们定义好神经网络之后，这个网络是由多个网络层构成的，每层都有参数，我们如何才能获取到这些参数呢？我们将再下面介绍几个方法来获取神经网络的模型参数，此文我们是为了学习第6步（优化器）。获取所有参数Parametersfromtorchimportnnnet=nn.Sequential(nn.Linear(4,2),nn.Linear(2,2))print(list(net.paramet

幻风_huanfeng·2024-09-12 16:37

一维数组 list 呢，怎么转换成 (批次句子长度特征值 )三维向量 python pytorch lstm 编程人工智能

一、介绍对于一维数组，如果你想将其转换成适合深度学习模型（如LSTM）输入的格式，你需要考虑将其扩展为三维张量。这通常涉及到批次大小（batchsize）、序列长度（sequencelength）和特征数量（numberoffeatures）的维度。以下是如何将一维数组转换为这种格式的步骤：###1.确定维度-**批次大小（BatchSize）**：这是你一次处理的样本数量。-**序列长度（Seq

zhangfeng1133·2024-09-12 16:34

每天五分钟玩转深度学习框架PyTorch：将nn的神经网络层连接起来

本文重点前面我们学习pytorch中已经封装好的神经网络层，有全连接层，激活层，卷积层等等，我们可以直接使用。

幻风_huanfeng·2024-09-12 16:34

记录word转xml文件踩坑

word文件另存为xml文件后，xml文件乱码解决方法：1.用word打开.docx文件2.另存为xml文件3.点击工具->Web选项->编码，选择UTF-84.点击确定5.使用notpad++打开xml文件6.使用xmltool进行xml格式化即可。

DebugDiver代码深处潜水员·2024-09-12 14:22

qt执行终端命令_Qt模拟Linux终端Terminal与系统交互(QProcess)

但其中遇到的一些问题网上查了很久才最后解决，由于网上的答案并不是现成的，需要自己理解后才能有思路解决，所以在这里把我的思路过程分享出来，避免后人再踩坑。认识真实的gnome-ternimal

知乎视频·2024-09-12 13:50

项目实训十四

将pytorch模型封装成接口由于前面对于模型的构建、训练、评估都以完成，接下来要做的就是将按照项目要求，将模型封装成接口，供后端直接调用。

qq_51946537·2024-09-12 11:37

pytorch矩阵乘法

一、torch.bmminput1shape:(batch_size,seq1_len,emb_dim)input2shape:(batch_size,emb_dim,seq2_len)outputshape:(batch_size,seq1_len,seq2_len)注意：torch.bmm只适合三维tensor做矩阵运算特别地，torch.bmm支持tenso广播运算input1shape:(

weixin_45694975·2024-09-12 10:59

pytorch矩阵乘法总结

1.element-wise（*）按元素相乘，支持广播，等价于torch.mul()a=torch.tensor([[1,2],[3,4]])b=torch.tensor([[2,3],[4,5]])c=a*b#等价于torch.mul(a,b)#tensor([[2,6],#[12,20]])a*torch.tensor([1,2])#广播,等价于torch.mul(a,torch.tensor

chenxi yan·2024-09-12 10:26

推荐开源项目：PyTorch-Metric-Learning

潘惟妍·2024-09-12 09:53

pytroch2.4 提示到不到fbgemm.dll

#python/pytorch/问题记录```>>>importtorchTraceback(mostrecentcalllast):File"",line1,inFile"C:\Users\95416

bziyue·2024-09-12 03:44

基于Pytorch框架的CIFAR-10图像分类任务（附带完整代码）

本文主要实现在pytorch框架下，训练CIFAR数据集，通过观察训练和验证的误差、准确率图像来进一步改善。保存最好的模型。

难得北窗高卧·2024-09-12 01:00

Pytorch深度学习- Tensorboard的使用以及图像变换transform的使用（小土堆）

Tensorboard中的SummaryWriter使用导入数据包fromtorch.utils.tensorboardimportSummaryWriter构造函数方法#那么生成的数据文件都存在于logs文件夹下writer=SummaryWriter("logs")add_scalar代码示例'''tag:数据标题global_step:x轴数据scalar_value:y轴数据'''#运行结

Mr chenxizhi·2024-09-12 00:23

动手学深度学习（pytorch土堆）-03常见的Transforms

Composetransforms.Compose是PyTorch中的一个函数，用于将多个图像变换操作组合在一起，形成一个变换流水线。

#include<菜鸡>·2024-09-12 00:51

探秘3D UNet-PyTorch：高效三维图像分割利器

探秘3DUNet-PyTorch：高效三维图像分割利器在医学影像处理、计算机视觉和自动驾驶等领域，三维图像的理解与分析至关重要。而是一个基于PyTorch实现的深度学习模型，专为三维图像分割任务设计。

鲍凯印Fox·2024-09-12 00:18

使用C++编写接口调用PyTorch模型，并生成DLL供.NET使用

一、将PyTorch模型保存为TorchScript格式1）构造一个pytorch2TorchScript.py，示例代码如下：importtorchimporttorch.nnasnnimportargparsefromnetworks.seg_modelingimportmodelasViT_segfromnetworks.seg_modelingimportCONFIGSasCONFIGS

编程日记✧·2024-09-11 23:17

动手学深度学习（pytorch土堆）-02TensorBoard的使用

1.可视化代码使用了torch.utils.tensorboard将数据记录到TensorBoard以便可视化。具体来说，它将标量数据记录到目录logs中，使用的是SummaryWriter类。代码分解如下：SummaryWriter("logs")：初始化一个TensorBoard的写入器，日志会保存到"logs"目录。writer.add_scalar("y=x",i,i)：在循环的每一次迭代

#include<菜鸡>·2024-09-11 23:15

推荐频道