pytorch之旅

Pytorch实现一个简单DeepSeek中的MLA多头潜在注意力架构

首先，MLA是什么？可能是指Multi-HeadLocalAttention，即多头局部注意力，这种机制通常用于减少计算量，特别是在处理长序列时，每个头只关注局部区域。比如每个token只注意其周围的一定窗口内的其他token，而不是全局。这可能与传统的Transformer中的滑动窗口或局部注意力类似。接下来，我需要考虑如何将局部注意力与多头机制结合。每个注意力头可能有不同的局部窗口，或者共享相
DukeYong·2025-02-13 19:38

Deepseek的MOE架构中ColumnParallelLinear()是怎么实现的

我记得在PyTorch中，模型并行通常涉及到将模型的层分布到不同的GPU上。ColumnParallelLinear可能指的是将线性层的列（即输出神经元）分布在多个设备上。
DukeYong·2025-02-13 18:00

小白零基础学习深度学习之张量

1.张量PyTorch中的张量（Tensor）就是一种用来存储数据的“盒子”，这个盒子可以有不同的形状和大小，里面可以装各种数字。
爱理科的小王子·2025-02-13 17:53

深度学习-情感分析

以下将分别使用PyTorch和TensorFlow框架实现基于深度学习的情感分析，这里以影评的情感分析为例，数据集使用IMDB影评数据集。
小赖同学啊·2025-02-13 17:52

【C++指南】解锁C++ STL：从入门到进阶的技术之旅

博客主页：倔强的石头的CSDN主页Gitee主页：倔强的石头的gitee主页⏩文章专栏：《C++指南》期待您的关注目录一、STL是什么二、STL的核心组件2.1容器（Containers）2.2算法（Algorithms）2.3迭代器（Iterators）2.4其他组件三、STL的优势3.1高效开发3.2高性能3.3泛型与可扩展性3.4代码简洁与可维护性3.5跨平台兼容性四、结语一、STL是什么S
倔强的石头_·2025-02-13 16:15

AI前端开发学习资源与途径：开启你的智能化前端之旅

随着人工智能技术的飞速发展，AI写代码工具已经不再是遥不可及的梦想，它正深刻地改变着前端开发的模式。AI赋能前端开发，不仅提高了开发效率，也降低了学习门槛，为更多开发者打开了通往智能化前端世界的大门。然而，学习AI前端开发也面临着诸多挑战，需要系统学习和持续实践。本文将为你详细介绍AI前端开发的学习途径、资源以及实践经验，助你开启这段精彩的旅程。AI前端开发的兴起及重要性近年来，人工智能技术在各个
·2025-02-13 15:31

神经网络常见激活函数 9-CELU函数

文章目录CELU函数+导函数函数和导函数图像优缺点pytorch中的CELU函数tensorflow中的CELU函数CELU连续可微指数线性单元：CELU（ContinuouslyDifferentiableExponentialLinearUnit
亲持红叶·2025-02-13 15:37

手把手教你Linux内核编译：从零开始编写

如今，我们即将踏上一场激动人心的冒险之旅——一步步解锁Linux内核，开启从零开始的编程征程。一、简介Linux内核作为操作系统的核心，其魅力在于多方面。首先，它负责资源管理和设备驱动等重要任务。
深度Linux·2025-02-13 13:59

大语言模型LLM代码：PyTorch库与ChatGLM模型

文章目录通过阅读大语言模型的代码，熟悉并理解PyTorch大语言模型LLM代码：PyTorch库与ChatGLM模型大语言模型中的PyTorchChatGLM3-6B模型代码ChatGLMModel类总览
North_D·2025-02-13 12:48

使用亚马逊针对 PyTorch 和 MinIO 的 S3 连接器进行模型检查点处理

2023年11月，Amazon宣布推出适用于PyTorch的S3连接器。适用于PyTorch的AmazonS3连接器提供了专为S3对象存储构建的PyTorch数据集基元（数据集和数据加载器）的实现。
MinIO分布式存储·2025-02-13 11:37

DeepSeek深度探索：从新手到高手的蜕变之旅

引言在当今数字化与智能化的浪潮中，人工智能（AI）技术正以前所未有的速度改变着我们的生活和工作方式。DeepSeek，作为一款由杭州深度求索人工智能基础技术研究有限公司开发的人工智能模型，凭借其强大的功能和灵活的应用场景，成为了众多企业和专业人士的得力助手。本文将带你深入了解DeepSeek，从新手入门到高手进阶，掌握其核心功能与使用技巧，实现个人能力的蜕变。一、初识DeepSeek：人工智能的“
古龙飞扬·2025-02-13 10:30

Adobe软件全家桶：从平面到视频再到音频的创意之旅

在创意设计的广阔天地里，Adobe公司旗下的系列软件无疑是设计师们手中的魔法棒，它们串联起平面设计、视频剪辑直至音频处理的每一个环节，成为跨越视觉创意门槛的必备工具集。本文将深入浅出地介绍这些软件的应用场景、特色功能及其相互间的协作关系，助力您在创意道路上畅通无阻。AdobePhotoshop(PS)-图像处理大师作为Adobe的明星产品，Photoshop几乎是图像处理的代名词。它擅长处理像素构
垚哥说·2025-02-13 08:16

大模型笔记：pytorch实现MOE

0导入库importtorchimporttorch.nnasnnimporttorch.nn.functionalasF1专家模型#一个简单的专家模型，可以是任何神经网络架构classExpert(nn.Module):def__init__(self,input_size,output_size):super(Expert,self).__init__()self.fc=nn.Linear(i
UQI-LIUWJ·2025-02-12 23:37

mnist数据集下载及使用

#mnist数据集在百度云盘里#链接：https://pan.baidu.com/s/1ca2rL2-0_JLtnH1YQ3otvA#提取码：uq3d#pytorch自带数据集的使用importtorchvisionfromtorchvision.datasetsimportMNISTmnist
小句·2025-02-12 21:21

pytorch笔记：mm VS bmm

1bmm(batchmatrixmultiplication)批量矩阵乘法，用于同时处理多个矩阵的乘法bmm的输入是两个3D张量（batchofmatrices），形状分别为(batch_size,n,m)和(batch_size,m,p)bmm输出的形状是(batch_size,n,p)2mmmm是标准的矩阵乘法操作，用于两个二维矩阵相乘mm仅适用于2D张量，输入的形状分别是(n,m)和(m,p
UQI-LIUWJ·2025-02-12 20:13

《黑马程序员2023年新版Linux零基础快速入门到精通》学习笔记总目录：开启你的Linux之旅...

《黑马程序员2023年新版Linux零基础快速入门到精通》学习笔记总目录：开启你的Linux之旅黑马程序员2023年新版Linux零基础快速入门到精通学习笔记总目录项目地址:https://gitcode.com
魏杨晴Vivian·2025-02-12 20:11

Python酷库之旅-第三方库Pandas(051)

目录一、用法精讲186、pandas.Series.is_monotonic_increasing属性186-1、语法186-2、参数186-3、功能186-4、返回值186-5、说明186-6、用法186-6-1、数据准备186-6-2、代码示例186-6-3、结果输出187、pandas.Series.is_monotonic_decreasing属性187-1、语法187-2、参数187-3
神奇夜光杯·2025-02-12 19:39

神经网络常见激活函数 7-ELU函数

文章目录ELU函数+导函数函数和导函数图像优缺点pytorch中的ELU函数tensorflow中的ELU函数ELU指数线性单元：ELU（ExponentialLinearUnit）函数+导函数ELU函数
亲持红叶·2025-02-12 19:30

【PyTorch】transpose() 和 permute() 函数：交换张量维度

在PyTorch中，transpose和permute都是用于调整张量维度的函数。它们在很多深度学习任务中非常有用，尤其是在处理张量维度和进行矩阵操作时。
彬彬侠·2025-02-12 15:38

【ai】李沐 动手深度学学v2 环境安装：anaconda3、pycharm、d2

cuda-toolkitcuda_12.5.0_windows_network.exe官方课程网站第二版资源下载release版本pycharm版本李沐【动手学深度学习v2PyTorch版】课程笔记CUDA
等风来不如迎风去·2025-02-12 15:05

【LangChain学习之旅】—（14）代理（下）：结构化工具对话、Self-Ask with Search以及Plan and execute代理

【LangChain学习之旅】—（14）代理（下）：结构化工具对话、Self-AskwithSearch以及Planandexecute代理什么是结构化工具什么是PlaywrightPlaywright
之墨_·2025-02-12 14:30

pytorch深度学习模型推理和部署、pytorch&ONNX&tensorRT模型转换以及python和C++版本部署

目录1.采用pytorch进行推理2.采用onnx进行推理2.1pytorch转换为onnx2.2onnx推理3.采用tensorrt进行推理（python环境）3.1onnx转engine文件3.2tensorrt
机械心·2025-02-12 10:40

大模型中 .safetensors 文件、.ckpt文件和.pth以及.bin文件区别、加载和保存以及转换方式

目录模型格式介绍加载以及保存-加载.safetensors文件：-保存/加载.pth文件：-保存/加载.ckpt文件：-处理.bin文件：模型之间的互相转换pytorch-lightning和pytorchckpt
telllong·2025-02-12 10:38

基于PyTorch框架实现，展示如何使用ResNet50进行特征提取，并结合MMD用于领域适应，迁移学习在轴承故障诊断中的应用

基于PyTorch框架实现，展示如何使用ResNet50进行特征提取，并结合MMD用于领域适应，迁移学习在轴承故障诊断中的应用_迁移学习轴承诊断DAN:ResNet50-MMD以下文字及代码仅供参考。
QQ_767172261·2025-02-12 07:15

ESP8266开发之旅 小程序篇③ 基于腾讯物联网平台的配网小程序（smartConfig）

文章目录1、前言2、文档入口3、SmartConfig配网开发3.1基本原理3.2腾讯小程序SDK4、小程序开发指南4.1小程序SDK5、改造小程序5.1小程序代码结构6、总结授人以鱼不如授人以渔，目的不是为了教会你具体项目开发，而是学会学习的能力。希望大家分享给你周边需要的朋友或者同学，说不定大神成长之路有博哥的奠基石。。。快速导航单片机菜鸟的博客快速索引(快速找到你要的)重点说一下，麻烦三连点
单片机菜鸟哥·2025-02-12 03:19

Java 进阶之路：探索更强大的编程世界

当我们掌握了Java的基础知识后，进阶之旅便悄然开启。一、面向对象的深入理解封装、继承与多态封装不仅仅是将数据隐藏起来，更是一种对代码的保护和组织方式。通过合理的封装，可以提高代码的可维护性和安全性。
m0_74824170·2025-02-11 20:21

torch.nn.LSTM介绍

torch.nn.LSTM是PyTorch提供的一个高级封装，用于构建长短时记忆网络（LSTM）。
qq_27390023·2025-02-11 17:02

旅游计划新篇章：兴趣为风，目的地为帆

确定目的地：开启梦想之旅的起点旅行的第一步，是确定那个令你心驰神往的目的地。它可能是你一直梦寐以求的远方，也可能是偶然间在某篇游记、某部电影中邂逅的地方。在选择时，我们需要综合考虑多个因素。
·2025-02-11 16:31

面向价值编程：高ROI工程之旅

版本日期备注1.02023.3.6文章首发1.12023.4.2错别字修复本文首发于泊浮目的掘金:https://juejin.cn/user/14686032646653350.前言在前面的系列文章中，我提到了相关的理论，实操，以及一段工作经历。在这篇文章中，我会用我自己和团队的经历来作为例子，诠释面向价值编程，并通过两个例子说明高ROI工程的打造过程。ROI一般指投资回报率。是指通过投资而应返
·2025-02-11 16:53

Spring Cloud远程调用：HTTP vs. RPC

超萌技术攻略，轻松晋级编程高手技术宝库已备好，就等你来挖掘订阅墨瑾轩，智趣学习不孤单即刻启航，编程之旅更有趣嗨喽小伙伴们！
墨瑾轩·2025-02-11 15:17

Pytorch学习之路（2）

（PS：请先阅读Pytorch学习之路（1）开篇注释）【因为我也是小菜鸟】Pytorch基础知识1.张量（1）简介0维张量——标量（数字）1维张量——向量2维张量——矩阵3维张量——时间序列数据股价文本数据单张彩色图片
AAAx1anyu·2025-02-11 14:40

使用rknn进行facenet部署

文章目录开源仓库pth转onnxnetron可视化onnx转rknnC++实现开源仓库https://github.com/bubbliiiing/facenet-pytorchpth转onnx修改facenet
点PY·2025-02-11 08:58

【Python】成功解决ModuleNotFoundError: No module named ‘openpyxl‘

博主档案：广东某985本硕，SCI顶刊一作，深耕深度学习多年，熟练掌握PyTorch框架。
高斯小哥·2025-02-11 07:14

Java 的 OkHttp 高级进阶：HTTP 请求的艺术

超萌技术攻略，轻松晋级编程高手技术宝库已备好，就等你来挖掘订阅墨瑾轩，智趣学习不孤单即刻启航，编程之旅更有趣嘿，小伙伴们！
墨瑾轩·2025-02-11 03:14

Delphi语言的数据可视化

Delphi语言的数据可视化之旅数据可视化是现代数据分析的重要组成部分，能够帮助我们更直观、有效地理解数据的内在规律和趋势。
霍璟琅·2025-02-11 02:35

C#与ASP.NET Core：构建现代Web服务

超萌技术攻略，轻松晋级编程高手技术宝库已备好，就等你来挖掘订阅墨瑾轩，智趣学习不孤单即刻启航，编程之旅更有趣构建现代Web服务是一个既有趣又充满挑战的任务，尤其是在C#和ASP.NETCore这样的强大工具的帮助下
墨瑾轩·2025-02-10 23:46

神经网络常见激活函数 6-RReLU函数

文章目录RReLU函数+导函数函数和导函数图像优缺点pytorch中的RReLU函数tensorflow中的RReLU函数RReLU随机修正线性单元：RandomizedLeakyReLU函数+导函数RReLU
亲持红叶·2025-02-10 22:40

Python酷库之旅-第三方库Pandas(146)

目录一、用法精讲661、pandas.Timestamp.value属性661-1、语法661-2、参数661-3、功能661-4、返回值661-5、说明661-6、用法661-6-1、数据准备661-6-2、代码示例661-6-3、结果输出662、pandas.Timestamp.week属性662-1、语法662-2、参数662-3、功能662-4、返回值662-5、说明662-6、用法662
神奇夜光杯·2025-02-10 22:07

pytorch 人脸修复_修复pytorch数据加载器

pytorch人脸修复黑客数据科学工作流程(Hackingdatascienceworkflows)Icameacrossaninterestingproblemrecently.AteammateandIwereworkingonaseriesofDeepLearningexperimentsthatinvolvedanimagedatasetthatspannedhundredsofgigab
weixin_26729375·2025-02-10 19:18

【Pytorch函数】PyTorch随机数生成全解析 | torch.rand()家族函数使用指南

PyTorch随机数生成全解析|torch.rand()家族函数使用指南一、核心函数参数详解PyTorch提供多种随机数生成函数（注意：无直接torch.random()函数），以下是常用函数及参数：1️⃣torch.rand
深度求索者·2025-02-10 18:09

深度学习-医学影像诊断

以下以使用深度学习进行医学影像（如X光片）的肺炎诊断为例，为你展示基于PyTorch框架的代码实现。我们将构建一个简单的卷积神经网络（CNN）模型，使用公开的肺炎X光影像数据集进行训练和评估。
小赖同学啊·2025-02-10 18:37

动手学深度学习：3.9 多层感知机的从零开始实现

importtorchimportnumpyasnpimportsyssys.path.append("..")importd2lzh_pytorchasd2lCopytoclipboardErrorCopied3.9.1
AI_Younger_Man·2025-02-10 17:36

[特殊字符]AI电销系统：解锁销售潜能，引爆业绩狂潮！

它运用深度学习算法，精准捕捉客户每一个细微的意图，让你的销售之旅如虎添翼。‌精准营销，直击客户痛点‌传统电销如同盲人摸象，
lxdh18899777856·2025-02-10 13:00

Groovy语言的游戏开发

Groovy语言的游戏开发之旅引言随着游戏产业的飞速发展，越来越多的开发者开始寻找更高效、更灵活的编程语言来实现他们的创意。Groovy作为一种动态的JVM语言，近些年来逐渐受到开发者的关注。
霍璟琅·2025-02-10 10:06

C++ STL迭代器完全指南：从新手到高手的奇幻之旅

一、迭代器：数据世界的万能遥控器1.1为什么需要迭代器？想象你有一个装满玩具的箱子（容器），你想：逐个查看所有玩具（遍历）找到特定的玩具熊（查找）✨把玩具按大小排列（排序）如果每个箱子的打开方式都不同（数组用下标、链表要指针、文件流特殊操作），你会疯掉的！迭代器就是解决这个问题的万能遥控器，它让所有容器都有了统一的操作接口！vectorvec{1,2,3};listlst{"A","B","C"}
灰灰的C旅程·2025-02-10 10:04

C 语言关键字全解析：从简单到复杂，一文读懂

今天咱们来一场C语言关键字的趣味之旅。C语言的关键字就像是构建程序的魔法砖块，每一个都有着独特的功能和用途。为了让大家更容易理解，我将这些关键字分为两组：简单易懂的和稍微复杂一点的。
晚风る·2025-02-10 10:33

开源架构师的非凡之旅：探索开源世界的魅力与无限可能

亲爱的技术伙伴们！我是开源架构师，一位对开源架构满怀热忱的执着探索者。在当今这个科技浪潮汹涌澎湃、创新火花不断迸发的时代，开源技术宛如一颗璀璨至极的超新星，以其耀眼光芒照亮了各个领域的创新之路。而我，作为开源架构领域的坚定追梦人，怀揣着对技术的炽热之爱与不懈追求，满心欢喜地踏上CSDN这片充满无限可能的技术交流圣地。我渴望在这里与诸位一同分享我在开源架构之路上的珍贵经验、深邃见解以及那些令人心潮澎
开源架构师·2025-02-10 10:01

【Golang学习之旅】Go + Redis 缓存设计与优化（项目实战）

文章目录业务需求1.缓存设计2.Go+Redis代码实现3.代码解析4.性能优化在本节中，我们将通过一个实际的项目案例，演示如何在Go中使用Redis实现高效的缓存设计与优化。业务需求假设我们正在开发一个电商平台，需要缓存商品信息以提高页面加载速度。商品信息经常被查询，但修改频率较低，因此使用Redis作为缓存会大大减少数据库的查询压力。1.缓存设计缓存粒度：我们将每个商品的信息作为一个缓存项进行
程序员林北北·2025-02-10 07:00

代码星辰：探索 benchmark 构建的奥秘之旅

当夜幕降临，程序员们仰望着闪烁的屏幕，仿佛看见了无尽星辰。代码世界也是如此，每一行代码，每一个测试样例，都像是天际间的星辰耀动。而在这片“代码星海”中，如何评估大语言模型（LLMs）在编程任务上的表现，就像天文学家借助望远镜探索宇宙奥秘一般关键。近日，一篇题为《HowShouldIBuildABenchmark?RevisitingCode-RelatedBenchmarksForLLMs》的研究
步子哥·2025-02-10 07:56

Spring Boot 接收参数的 19 种方式 —— 深度解

超萌技术攻略，轻松晋级编程高手技术宝库已备好，就等你来挖掘订阅墨瑾轩，智趣学习不孤单即刻启航，编程之旅更有趣SpringBoot接收参数的19种方式——深度解析嘿，小伙伴们！
墨瑾轩·2025-02-10 03:28
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他