模型训练

Apache Airflow 全面解析

其核心设计理念是“WorkflowsasCode”，通过编程方式定义、调度和监控复杂的数据流水线（Pipeline），适用于ETL、机器学习模型训练、数据湖管理、报表生成等场景。
由数入道·2025-01-30 18:20

基于CNN-GRU-Attention混合神经网络的负荷预测方法（Python代码实现）

本文目录如下：目录1概述一、引言二、模型结构三、数据预处理四、模型训练与评估五、实验结果与分析六、结论与展望2运行结果3参考文献4Python代码实现及数据1概述基于CNN-GRU(convolutionalneuralnetworks-gaterecurrentunit
宇哥预测优化代码学习·2025-01-30 16:22

Transformer架构的GPU并行和之前的NLP算法并行有什么不同？

在深度学习中，GPU并行计算被广泛应用于训练神经网络，加速模型训练过程。在2017年之前，自然语言处理（NLP）领域的研究者们通常会从头开始训练模型，那时能够利用GPU进行
AI大模型学习不迷路·2025-01-30 07:49

PyTorch 框架实现线性回归：从数据预处理到模型训练全流程

系列文章目录Pytorch基础篇01-PyTorch新手必看：张量是什么？5分钟教你快速创建张量！02-张量运算真简单！PyTorch数值计算操作完全指南03-Numpy还是PyTorch？张量与Numpy的神奇转换技巧04-揭秘数据处理神器：PyTorch张量拼接与拆分实用技巧05-深度学习从索引开始：PyTorch张量索引与切片最全解析06-张量形状任意改！PyTorchreshape、tra
大模型铲屎官·2025-01-30 03:17

【DeepSeek】大模型强化学习训练GRPO算法，你学会了吗？

如果你还不知道GRPO，你可以先看这篇帖子：【DeepSeek】一文详解GRPO算法——为什么能减少大模型训练资源？看了论文跟没看一样？做两道题练练！曾经最痛恨的应试教育，却能让你深深记住这知识点。
FF-Studio·2025-01-29 21:56

详解三种常用标准化：Batch Norm、Layer Norm和RMSNorm

在深度学习中，标准化技术是提升模型训练速度、稳定性和性能的重要手段。
yyytucj·2025-01-29 13:57

scikit-learn基本功能和示例代码

scikit-learn（简称sklearn）是一个广泛使用的Python机器学习库，提供了丰富的工具和算法，涵盖了数据预处理、模型训练、评估和优化等多个方面。
weixin_30777913·2025-01-29 02:02

遥感深度学习过程中图像分割的尺寸对模型训练结果的影响

1.计算资源与显存占用大尺寸图像：需要更高的显存和计算资源，可能限制训练时的批大小（batchsize），甚至导致无法训练。解决方案：通常将大图裁剪为小尺寸的补丁（patches），例如256x256或512x512。小尺寸图像：显存占用低，但可能丢失全局上下文信息（如大面积地物分布），影响模型对复杂场景的理解。2.模型感受野与上下文信息小尺寸输入：模型感受野受限，可能无法捕捉大范围地物（如河流、
司南锤·2025-01-28 08:18

预训练语言模型

1.1预训练过程数据收集与处理：收集大规模的数据，并对数据进行预处理，以便模型训练使用
Algorithm_Engineer_·2025-01-28 04:51

使用 PyTorch 实现逻辑回归：从数据到模型保存与加载

本文将通过一个简单的示例，展示如何使用PyTorch框架实现逻辑回归模型，从数据准备到模型训练、保存和加载，最后进行预测。1.数据准备逻辑回归的核心是通过学习数据中的特征与标签之间的关系来进行分类。
弥树子·2025-01-28 02:29

AI语言模型竞争加剧：新秀崛起 格局生变

模型训练成本呈现类摩尔定律式下降，每年降低75%。MoE架构在计算效率和性能
XianxinMao·2025-01-27 14:11

pytorch单机多卡训练_数据并行DataParallel

1.单机多卡概述单卡多级的模型训练，即并行训练，可分为数据并行和模型并行两种.数据并行是指，多张GPUs使用相同的模型副本，但采用不同batch的数据进行训练.模型并行是指，多张GPUs使用同一batch
Major Tom _·2025-01-27 13:03

2025年美赛数学建模 Problem C: Models for Olympic Medal Tables 问题 C：奥运奖牌榜模型 详细解析和代码（持续更新中，2025美赛）

目录Python代码MATLAB代码2.模型框架2.1回归分析模型2.2集成学习方法2.3时间序列预测2.4模型不确定性估计3.数据处理与模型训练4.预测2028年奥运奖牌5.预测区间和不确定性6.哪些国家可能提高或下降
2025年数学建模美赛·2025-01-27 06:46

Python支持向量机（SVM）算法：面向对象的实现与案例详解

1.1支持向量机的基本思想1.2SVM的分类问题1.3SVM的优化目标二、面向对象的SVM实现2.1类的设计2.2Python代码实现2.3代码详解三、案例分析3.1案例一：鸢尾花分类问题描述数据准备模型训练与预测输出结果
闲人编程·2025-01-26 08:01

基于Python的自然语言处理系列（2）：Word2Vec（负采样）

负采样是一种优化Skip-gram模型训练效率的技术，它能在大规模语料库中显著减少计算复杂度。接下来，我们将通过详细的代码实现和理论讲解，帮助你理解负采样的工作原理及其在Word2Vec中的应用。
会飞的Anthony·2025-01-25 15:51

YOLOV11改进1-检测头篇

文章目录前言一、YAML修改二、模型训练1.数据集准备2.环境准备3.训练3.1原结构训练3.2更改后的模型三.效果对比1.原始结构2.修改后的结果3.详细对比总结前言    目标检测领域里，小目标一直是一个难点问题
~啥也不会~·2025-01-25 08:00

【Lora微调】提高模型效率的创新方法

前言在自然语言处理（NLP）和机器学习的研究和应用中，随着模型规模的不断扩大，模型训练的计算成本和存储需求也不断攀升。
@fishv·2025-01-25 07:19

《数据孤岛：AI模型训练之殇，精度与泛化的双重困境》

在人工智能飞速发展的当下，数据就是模型的“燃料”。从医疗影像诊断到智能交通调度，从电商推荐系统到金融风险预测，AI模型的精准度与泛化能力，决定了其在实际应用中的价值。然而，一个棘手的问题正阻碍着AI前行的步伐——数据孤岛。数据孤岛，是指在组织内部或不同组织之间，由于系统、管理或流程的原因，数据被孤立存储在不同的数据库、应用程序或部门中，彼此之间缺乏有效的连接和整合。据权威机构调研，在高度信息化的企
·2025-01-25 06:27

基于Python和TensorFlow/Keras框架的大模型实战教程

这个教程将涵盖从数据准备到模型训练、评估和部署的整个流程。我们将以一个简单的图像分类任务为例进行说明。目标通过本教程，您将学会如何使用TensorFlow/K
小蘑菇二号·2025-01-24 12:26

自动检测和机器审核系统实现

目录一、自动检测和机器审核实现步骤1.文本预处理步骤细节：2.关键词检测步骤细节：3.情感分析与情境理解步骤细节：4.机器学习模型训练步骤细节：5.深度学习模型步骤细节：6.多模态审查步骤细节：7.用户行为分析与违规预测步骤细节
╰つ゛木槿·2025-01-24 05:55

Alluxio在数据索引和模型分发中的核心价值与应用

这些任务通常涉及从用户行为数据和社交网络数据中提取大量信息，进行模型训练和推理。这一过程需要强大的数据分发能力，尤其是在多个服务器同时拉取同一份数据时，更是考验基础设施的性能。
·2025-01-23 22:34

QAT与PTQ模型量化方法的区别

1.QAT（QuantizationAwareTraining）定义：QAT是在模型训练过程中引入量化操作，使模型在训练时就能感知到量化带来的影响，从而更好地适应量化后的精度损失。流程：在训练
old_power·2025-01-23 17:28

WebRover ：一个功能强大的 Python 库，用于从 Web 内容生成高质量的数据集。

数据集地址：WebRoverDataset|自然语言处理数据集|AI模型训练数据集一、让我们一起来看一下WebRoverWebRover通过智能网络爬虫技术，自动从网络中提取与特定主题相关的内容，并支持多种输入格式
·2025-01-23 05:58

WebRover： 专为训练大型语言模型和 AI 应用程序而设计的 Python 库

数据集地址：WebRoverDataset|自然语言处理数据集|AI模型训练数据集一、让我们一起来看一下WebRoverWebRover通过智能网络爬虫技术，自动从网络中提取与特定主题相关的内容，并支持多种输入格式
·2025-01-23 01:54

【在 PyTorch 中使用 tqdm 显示训练进度条，并解决常见错误TypeError: ‘module‘ object is not callable】

在PyTorch中使用tqdm显示训练进度条，并解决常见错误TypeError:'module'objectisnotcallable在进行深度学习模型训练时，尤其是在处理大规模数据时，实时了解训练过程中的进展是非常重要的
weixin_48705841·2025-01-22 20:50

深度学习模型开发文档

深度学习模型开发文档1.简介2.深度学习模型开发流程3.数据准备3.1数据加载3.2数据可视化4.构建卷积神经网络(CNN)5.模型训练5.1定义损失函数和优化器5.2训练过程6.模型评估与优化6.1模型评估
Ares代码行者·2025-01-22 20:47

小土堆学习笔记10（利用GPU训练于模型验证）

训练GPU可优化操作如下操作方法1方法2数据获取判断是否可以使用GPU，如果可以直接model.cuda()先设定device，用的时候直接model.to（“device”）损失函数1.1利用以前实战模型训练
干啥都是小小白·2025-01-22 11:03

深度学习中超参数

超参数是模型训练期间无法学习的参数，需要事先设置。在深度学习中，模型由模型参数(如神经网络的权重和偏置)定义或表示。然而，训练模型的过程涉及选择最佳超参
fengbingchun·2025-01-21 22:54

改进yolov8工业缺陷检测+swin+transformer

我们将详细探讨从数据准备到模型训练，再到最
qq1309399183·2025-01-21 15:56

改进yolov8缺陷检测+swin+transformer

我们将详细探讨从数据准备到模型训练，再到最
QQ_1309399183·2025-01-21 15:16

机器学习：scikit-learn 和 Jupyter Notebook（推荐初学者使用google colab）

所以scikit-learn能轻松实现从数据预处理到模型训练和评估的完整流程。此外在推荐一个适合初学者的深度学习平台工具googleco
wyc9999ww·2025-01-21 14:39

AI未来趋势：AIGC浪潮下看AI训练师如何塑造智能未来（技术变革）

以下是AI训练师如何塑造智能未来的几个关键方面：1.技术变革与创新算法与模型训练预训练：通过大规模无标注数据的学习，构建具备基础语言理解和生成能力的基座模型。
用心去追梦·2025-01-21 11:11

人脸识别【java-基于OpenCV】思维导图-java架构

为了创建一个关于基于OpenCV的Java人脸识别项目的思维导图，可以围绕项目的主要组成部分进行组织：环境搭建、数据准备、人脸检测、特征提取、模型训练、识别与验证、以及优化和部署。
用心去追梦·2025-01-21 11:41

【锂电池寿命】基于BP锂电池寿命预测（matlab)

文献综述2.1、锂电池寿命预测研究现状2.2、常见预测方法对比2.3、BP神经网络在寿命预测中的应用三、研究方法与数据准备3.1、BP神经网络模型设计3.2、数据来源与预处理3.3、特征提取与选择四、模型训练与验证
大橘科研工作室·2025-01-21 08:17

PyTorch 基础数据集：从理论到实践的深度学习基石

而在深度学习的体系中，数据扮演着举足轻重的角色，它是模型训练的基础，如同建筑的基石，决定了模型的性能和泛化能力。
那年一路北·2025-01-21 07:05

【深度学习】Pytorch：导入导出模型参数

PyTorch是深度学习领域中广泛使用的框架，熟练掌握其模型参数的管理对于模型训练、推理以及部署非常重要。本文将全面讲解PyTorch中关于模型参数的操作，包括如何导出、导入以及如何下载模型参数。
T0uken·2025-01-21 05:54

Python中的Pipeline快速教学、

Pipeline允许你将多个数据处理步骤和模型训练步骤串联起来，形成一个有序的工作流程。这不仅使代码更简洁，还能确保在训练和预测时一致的数据处理。
Coding Is Fun·2025-01-21 03:03

DNA图谱分析：自动分析DNA图谱中的变异YOLOv5、YOLOv8、YOLOv10

目录引言项目背景与目标YOLO模型简介DNA图谱数据集准备YOLOv5、YOLOv8和YOLOv10模型训练与优化DNA图谱变异检测的实现UI界面设计与实现评估与优化未来展望结论完整代码实现1.引言随着基因组学的进步
2025年数学建模美赛·2025-01-19 23:58

【YOLOV8】YOLOV8模型训练train及参数详解

介绍训练深度学习模型涉及为其提供数据并调整其参数，以便它能够做出准确的预测。UltralyticsYOLOv8的训练模式专为有效、高效地训练目标检测模型而设计，充分利用现代硬件的能力。本指南旨在涵盖使用YOLOv8强大功能集训练自定义模型所需的所有细节，帮助你快速入门。为什么选择UltralyticsYOLO进行训练？高效性：无论是单GPU设置还是跨多个GPU扩展，都能充分利用你的硬件。多功能性：
小小小小祥·2025-01-19 15:10

大模型训练显卡选择

大模型训练显卡对比大模型训练时A100是首选，A40用于推理，目前还推出了H100为下一代替换A100的产品。大模型的训练用4090可以吗？
kcarly·2025-01-19 07:39

从零开始构建一个大语言模型-第二章第一节

#第二章目录**2.1理解词嵌入**2.2文本分词2.3将词元转换为词元ID2.4添加特殊上下文词元2.5字节对编码2.6使用滑动窗口进行数据采样2.7创建词元嵌入2.8编码词位置#本章涵盖为大型语言模型训练准备文本
释迦呼呼·2025-01-19 03:55

神经网络初始化 (init) 介绍

常见的初始化方法及其应用场景2.1Xavier/Glorot初始化2.2He初始化2.3正交初始化2.4其他初始化方法3.如何设置初始化4.基于BERT的文本分类如何进行初始化4.1项目背景4.2模型构建4.3模型训练与评估
迷路爸爸180·2025-01-18 23:25

【Python篇】深入机器学习核心：XGBoost 从入门到实战

2.1梯度提升简介3.安装XGBoost4.数据准备4.1加载数据4.2数据集划分5.XGBoost基础操作5.1转换为DMatrix格式5.2设置参数5.3模型训练5.4预测6.模型评估7.超参数调优
半截诗·2025-01-18 19:06

《机器学习模型快速收敛的秘籍大揭秘》

选择合适的优化器优化器在模型训练中起着至关重要的作用，它决定了模型参数的更新方式和步长。常见的优化器如Adam、RMSProp和Momentum等都有各自的特点和优势。Adam结合了M
·2025-01-18 05:14

【人工智能】人工智能的10大算法详解（优缺点+实际案例）

模型训练通过最小二乘法来最小化预测值与真实值之间的误差，得到线性回归方程的
ChatGPT-千鑫·2025-01-18 03:04

基于YOLOv8深度学习的人脸年龄检测识别系统

我们将详细介绍项目的技术实现、数据集构建、模型训练以及UI设计，并附上完整代码。目录引言系统架构设计数据准备公开人脸年龄数据集数据标注格式数据目录结构模型训练YOLOv8环
2025年数学建模美赛·2025-01-18 02:24

基于深度学习的人脸表情识别系统（YOLOv10+UI界面+数据集）

我们将从系统架构、数据准备、模型训练、UI设计等多个方面进行全面讲解，最终实现一个能够实时识别并展示人脸表情的系统。
2025年数学建模美赛·2025-01-18 02:24

基于深度学习的人脸表情识别系统：YOLOv8 + UI界面 + 数据集完整实现

系统集成了数据集准备、YOLOv8模型训练、实时推理以及基于PyQt5的图形用户界面（UI）。通过本文，你将学习如何实现一
2025年数学建模美赛·2025-01-18 02:24

《解锁数据新动能：数据标注工具与AI模型训练平台的无缝对接热潮》

而数据标注工具与人工智能模型训练平台的集成，实现数据的无缝流转，正逐渐成为行业内的关键热点，犹如为人工智能的发展装上了强劲的双引擎。
·2025-01-18 01:32

【AI系统】混合并行

混合并行混合并行（HybridParallel）是一种用于分布式计算的高级策略，它结合了数据并行和模型并行的优势，以更高效地利用计算资源，解决深度学习中的大模型训练问题。
ZOMI酱·2025-01-17 20:05
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他