半精度训练第28页

pytorch基于 Transformer 预训练模型的方法实现词嵌入（tiansz/bert-base-chinese）

以下是一个完整的词嵌入（WordEmbedding）示例代码，使用modelscope下载tiansz/bert-base-chinese模型，并通过transformers加载模型，获取中文句子的词嵌入。frommodelscope.hub.snapshot_downloadimportsnapshot_downloadfromtransformersimportBertTokenizer,Be

纠结哥_Shrek·2025-02-01 15:05

LLM-预训练：深入理解 Megatron-LM（2）原理介绍

最近在基于Megatron-LM的代码来训练大语言模型，本人觉得Megatron的代码很具有学习意义，于是大量参考了网上很多对Megatron代码的解读文章和NVIDAMegatron团队公开发布的2篇论文

u013250861·2025-02-01 15:05

【51单片机实验笔记】中断篇（二）定时器与中断

目录前言晶振概述时序概述定时器概述工作方式寄存器（TMOD）定时器配置流程初值的简便算法微秒级定时中断的注意事项T2定时器概述定时器2控制寄存器（T2CON）定时器2模式寄存器（T2MOD）定时器2配置软件实现1.定时器测试延时精度

悬铃木下的青春·2025-02-01 15:03

机器学习-期末复习题

给人脸打上标签再让模型进行学习训练的方法，属于()强化学习B.半监督学习C.监督学习D.无监督学习在机器学习中，用计算机处理一副图像，维度是：上万维B.二维C.三维D.一维‎以下关于降维的说法不正确的是

泡椒鸡jo·2025-02-01 15:32

pytorch基于GloVe实现的词嵌入

PyTorch实现GloVe（GlobalVectorsforWordRepresentation）的完整代码，使用中文语料进行训练，包括共现矩阵构建、模型定义、训练和测试。

纠结哥_Shrek·2025-02-01 15:31

三相PWM整流器有限集模型预测电流控制Simulink仿真模型

⛳️座右铭：行百里者，半于九十。

科研_G.E.M.·2025-02-01 13:47

深度学习-笔记1

：网址：https://gitee.com/paddlepaddle/PaddleNLPpaddle-nlp是一个自然语言处理NLP方面的工具包(代码库)ERNIEERNIE是百度基于BERT改进的预训练大模型

·2025-02-01 12:15

编程语言中的常见Bug及解决方案

一、JavaScript中小数相加精度不准确的Bug在JavaScript中，进行小数相加时，由于浮点数的精度问题，可能会导致结果不准确。例如：letadd1=0.1+0.2;conso

李游Leo·2025-02-01 10:55

自学记录鸿蒙API 13：实现人脸比对Core Vision Face Comparator

我决定整一整，也就是对HarmonyOSNext最新版本API13中的CoreVisionFaceComparatorAPI的学习，这项技术能够对人脸进行高精度比对，并给出相似度评分，判断是否为同一人。

李游Leo·2025-02-01 10:54

双线性函数的紧凑超平面散列（Compact Hyperplane Hashing with Bilinear Functions）阅读笔记

存在问题：不幸的是，现有的随机方法需要长哈希码才能达到合理的搜索精度，因此会降低搜索速度和内存开销。

Legend105CC·2025-02-01 10:49

AI 计算的未来：去中心化浪潮与全球竞争格局重塑

引言人工智能（AI）正以前所未有的速度发展，尤其是大模型训练和推理效率的提升，使得AI计算成本迅速下降，呈现出向去中心化演进的趋势。

智识微光Intelligence·2025-02-01 09:16

聊聊AI中的“蒸馏”技术

1.知识蒸馏的过程教师模型（TeacherModel）训练先训练一个大规模基础模型，这个模型能力很强，但计算开销大。生

自由鬼·2025-02-01 09:15

AI协助探索AI新构型的自动化创新概念

训练AI自生成输出模块化代码，生成元代码级别的AI功能单元代码，然后再由AI组织为另一个AI，实现AI开发AI的能力；用AI协助探索迭代新构型AI将会出现，并成为一种新的技术路线潮流。

liron71·2025-02-01 09:15

三维激光扫描-用智能检测系统提升效率

传统的检测方法往往难以满足高精度、快速响应的需求。三维激光扫描技术结合智能检测系统，为工业检测带来了革命性的变革。

CASAIM·2025-02-01 09:44

大模型蒸馏与大模型微调技术有啥差别?

通过训练学生模型模仿教师模型的行为，实现模型压缩和性能保留的目标。蒸

kcarly·2025-02-01 08:37

从 0 到 1，DEEPseek 大模型瞬间 “霸榜” AI 赛道的秘密

deepseek官网传送门：DeepSeek下面就对本文标题来剖析一下：目录一·本篇背景：二.技术实力：突破创新的基石:2.1强大的模型能力:2.1.1高效的训练方法:2.2.2优化的推理速度:三·市场策略

羑悻的小杀马特.·2025-02-01 08:36

基于深度学习的大规模模型训练

基于深度学习的大规模模型训练涉及训练具有数百万甚至数十亿参数的深度神经网络，以处理复杂的任务，如自然语言处理、计算机视觉和语音识别。

SEU-WYL·2025-02-01 07:56

「DeepSeek接班OpenAI」，最新开源的R1推理模型，让AI圈爆了

多阶段训练：创新的模型架构DeepSeek-R1的训练方式采用了多阶段循环的策略，具体包括基础训练、强化学习（RL）、微调等多个阶段。这

人工智能学家·2025-02-01 06:23

【学习心得】Python好库推荐——PEFT

这种技术主要应用于大型预训练模型的微调过程中，目的是在保持模型性能的同时减少所需的计算资源和时间。通过PEFT，可以有效地调整模型以适应特定任务或数据集，而无需对整个模型的所有参数进行全面微调。

小oo呆·2025-02-01 06:48

深度学习训练模型损失Loss为NaN或者无穷大（INF）原因及解决办法

文章目录一、可能原因==1.学习率过高====2.batchsize过大==3.梯度爆炸4.损失函数不稳定5.数据预处理问题6.数据标签与输入不匹配7.模型初始化问题8.优化器设置问题9.数值问题==10.模型结构设计缺陷==二、调试步骤三、常见预防措施一、可能原因1.学习率过高原因：学习率过高可能导致梯度爆炸，权重更新幅度过大，导致模型参数变为无穷大或NaN。学习率设置过大是常见问题，它会让参数

余弦的倒数·2025-02-01 05:17

AI大模型在智能客服系统中的应用

目录引言1.基于大模型的智能客服系统架构2.对话生成与上下文管理对话生成上下文管理3.提高客服系统响应精度的策略1.使用专门训练的数据集2.引入实体识别和意图分类3.反馈循环和持续优化4.AI大模型在企业中的优化与调优策略

季风泯灭的季节·2025-02-01 04:33

通过TenSorRT转换后的engine引擎文件进行验证的脚本

YOLOv8算法验证pt文件的精度脚本一般都很常见，工程项目里面一般会有importwarningswarnings.filterwarnings('ignore')fromultralyticsimportYOLOif

薇憨·2025-02-01 03:28

yolov8使用Python训练识别

环境要求:根据《yolov8训练环境搭建》搭建好运行环境参考文献:1、yolo官方文档python版本：https://docs.ultralytics.com/usage/python/2、github

枫林古月·2025-02-01 03:58

对抗训练对模型性能有何影响？

关注我，持续分享逻辑思维&管理思维&面试题；可提供大厂面试辅导、及定制化求职/在职/管理/架构辅导；推荐专栏《10天学会使用asp.net编程AI大模型》，目前已完成所有内容。一顿烧烤不到的费用，让人能紧跟时代的浪潮。从普通网站，到公众号、小程序，再到AI大模型网站。干货满满。学成后可接项目赚外快，绝对划算。不仅学会如何编程，还将学会如何将AI技术应用到实际问题中，为您的职业生涯增添一笔宝贵的财富

借雨醉东风·2025-02-01 01:12

（3-5）文生图模型架构：扩散模型

3.5.1扩散模型的基本概念扩散模型是一种基于随机过程的生成模型，通过逐步添加和去除噪声，实现从随机噪声到高质量数据的转化，其独特的训练和生成机制使其在图像生成领域表现出色。1.扩散过程扩

码农三叔·2025-02-01 01:08

机器学习笔记 - 将音频转换为图像进行分类的机器学习模型

4.模型训练：在特征提取完

坐望云起·2025-02-01 00:32

面向算网的数字孪生关键技术研究及应用探讨

摘要为了解决算网运营中面临的感知实时精度高、融合管控智能程度高、系统场景复杂度高、新技术部署难度高等问题，从宏观政策、行业标准化及运营商实践等方面对数字孪生网络发展现状进行分析，提出面向算网的数字孪生网络体系架构

罗伯特之技术屋·2025-02-01 00:30

Python 占位符详细笔记

`str.format()`方法（较新格式化）2.1基本用法2.2位置和关键字参数2.3格式化数字2.4对齐和填充2.5字符串长度和精度3.f-strings(格式化字符串字面量)3.1基本用法3.2格式化数字

浮生_Lee·2025-02-01 00:59

A3C（Asynchronous Advantage Actor-Critic）算法

A3C主要解决了传统深度强化学习中的一些问题，如训练稳定性和数据效率问题。A3C算法的关键点A

C7211BA·2025-01-31 23:25

AI计算的未来：中心化与去中心化的博弈

因此，本文将探讨人工智能训练成本的降低、推

智识微光Intelligence·2025-01-31 23:51

DeepSeek 推出全新推理模型 R1-Lite 预览版

R1系列模型采用强化学习训练，推理过程中包含大量反思和验证，思维链长度可达数万字。该系列模型在数学、代码以及各种复杂逻辑推理任务上，取得了媲美o1-preview的推理效果。

三花AI·2025-01-31 22:47

PyQt5教程——介绍（1）

有需要翻译精度的朋友可以自行阅读英文文档。如果本系列博文侵犯了您的合法权益，请在博客中留下评论或联系：[email protected]。我会及时修改和删除。

weixin_34195546·2025-01-31 22:16

微信小程序上传图片到服务器总是失败_微信小程序压缩图片并上传到服务器（拿去即用）...

这里注意一下，图片压缩后的宽度是画布宽度的一半canvasToTempFilePath创建画布的时候会有一定的时间延迟容易失败，这里加setTimeout来缓冲一下这是单张图片压缩，多张的压缩暂时还没有成功

weixin_39665847·2025-01-31 21:39

深度学习篇---深度学习框架

简介特点动态计算图易于上手强大的社区支持与Python的集成度高核心组件2.TensorFlow简介特点静态计算图跨平台强大的生态系统Keras集成核心组件3.PaddlePaddle简介特点易于使用高性能工业级应用丰富的预训练模型核心组件第二部分

Ronin-Lotus·2025-01-31 21:05

YOLOv10：面向下一代目标检测模型的创新探索

YOLO（YouOnlyLookOnce）系列作为实时目标检测的代表性模型，自发布以来便因其速度与精度的平衡性得到了广泛关注和应用。

AgriTube·2025-01-31 20:31

DeepSeek-V3 技术报告

为了实现高效的推理和经济高效的训练，DeepSeek-V3采用了多头潜在注意力（MLA）和DeepSeekMoE架构，这些架构在DeepSeek-V2中得到了充分验证。

mingo_敏·2025-01-31 20:01

YOLOv5：目标检测新星，解锁高性能实时识别

YOLOv5：目标检测新星，解锁高性能实时识别【下载地址】yolov5改进策略案例分析资源合集YOLOv5，作为目标检测领域的一颗明星，基于经典的YOLOv4算法进行了一系列创新性优化，显著提升了检测速度与精度

殷连靖Harlan·2025-01-31 20:28

原创prompt：员工加班助手

本文原创作者：姚瑞南AI-agent大模型运营专家，先后任职于美团、猎聘等中大厂AI训练专家和智能运营专家岗；多年人工智能行业智能产品运营及大模型落地经验，拥有AI外呼方向国家专利与PMP项目管理证书。

姚瑞南·2025-01-31 19:45

修改训练配置记录

修改影响:调整此值可以显著影响模型的训练速度和最终性能。

positive546·2025-01-31 18:42

特征选择（机器学习）

伪代码示例）：2.3嵌入式（EmbeddedMethods）小示例（Lasso伪代码示例）：3.实践建议4.小结1.为什么需要特征选择在机器学习任务中，经常会遇到以下问题：特征（变量）数量过多，导致计算量大、训练速度

赵孝正·2025-01-31 18:10

YOLO系列之训练环境（GPU）搭建篇

YOLOv8专栏导航：点击此处跳转Pytorch环境配置（Windows）Anaconda安装此处下载安装即可⭐温馨提示：安装路径

w94ghz·2025-01-31 17:01

【大模型入门必看】LLM大语言模型导读

本章将简要梳理大语言模型的技术要点以及构建过程，并且列举了可用于预训练以及微调模型的常用数据集，介绍了目前开发大语言模型常用的代码库、预训练大语言模型的步骤以及涉及的关键技术，包括数据准备阶段、模型

古-月·2025-01-31 16:24

python 使用Whisper模型进行语音翻译

多尺寸预训练模型：官方提供了5个不同大小的模型（tiny,

哦里哦里哦里给·2025-01-31 15:16

带小数的高精度加减法运算（C++）

题目如下：输入数据：4+1,111,111,111,111,111,111,111,111,111,111,111,111222,222,222,222,222,222,222,222,222,222,222,222+-12,345,678,901,234,567,890,123,456,789,012,345,678,901,234,567,89098,765,432,198,765,432,1

橙意满满的西瓜大侠·2025-01-31 15:45

python 阴暗图像亮度增强对比度增强去雾

解决时，可以在训练样本中加入类似的图像，或者手动把相关图像进行颜色变化。这里主要介绍手工颜色变化。

weixin_37763484·2025-01-31 14:06

DeepSeek优势方法策略

DeepSeek优势方法策略目录DeepSeek优势方法策略DeepSeek在训练阶段压缩时间空间复杂度的方法DeepSeek和ChatGPT在压缩时间空间复杂度上的不同之处DeepSeek能降低显卡使用的原因

ZhangJiQun&MXP·2025-01-31 14:03

基于YOLOv11无人机视角船舶检测系统：项目概述与技术实现

**实时处理能力**数据准备与模型训练1.**数据集构建**2.**模型训练**系统功能与使用方法1.**实时目标检测**2.**静态图片检测**3.**视频文件处理**4.

qq1309399183·2025-01-31 14:03

以智能驾驶为例，谈谈在AI时代GIS的发展

1.高精度地图与实时动态更新发展方向：高精度地图是智能驾驶的核心组成部分之一，自动驾驶系统需要利用这些地

匹马夕阳·2025-01-31 13:53

【C语言基础习题】C语言练习题——bite 寒假班作业（２）

GPT-5一年半后发布？对此你有何期待？

拾贰_C·2025-01-31 12:20

LabVIEW透镜多参数自动检测系统

本文介绍了一个基于LabVIEW的透镜多参数自动检测系统，该系统能够在单一工位上完成透镜的多项质量参数检测，并实现透镜的自动搬运与分选，极大地提升了检测效率和精度。

LabVIEW开发·2025-01-31 12:47

推荐频道

半精度训练