E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Fine
“大语言模型微调”(
Fine
-tuning)与“大语言模型应用”(LLM Applications)之间的区别
1.概念与定义大语言模型微调微调指的是在一个经过大规模预训练的通用语言模型基础上,利用针对性较强的小规模数据集对模型进行进一步训练,从而使模型在特定领域或任务上表现得更优秀。目标:使模型更好地适应特定任务(如医疗问答、法律咨询、编程辅助等),提高准确性和专业性。方法:可以是全参数微调,也可以采用参数高效微调(如LoRA、Adapter、PrefixTuning等),后者只调整部分参数而保持原有权重
AI Echoes
·
2025-03-11 09:06
人工智能
机器学习
深度学习
如何对大模型进行微调?从原理到实战全解析
随着大语言模型(LLM)的快速发展,微调(
Fine
-tuning)已成为将通用模型转化为垂直领域专家的核心技术。
挣扎与觉醒中的技术人
·
2025-03-11 05:32
人工智能
外包转型
集成学习
chatgpt
gpt-3
软件工程
论文阅读笔记——Learning
Fine
-Grained Bimanual Manipulation with Low-Cost Hardware
ALOHA论文ALOHA解决了策略中的错误可能随时间累积,且人类演示可能是非平稳的,提出了ACT(ActionChunkingwithTransformers)方法。ActionChunking模仿学习中,compoundingerror是致使任务失败的主要原因。具体来说,当智能体(agent)在测试时遇到训练集中未见过的情况时,可能会产生预测误差。这些误差会逐步累积,导致智能体进入未知状态,最终
寻丶幽风
·
2025-03-10 09:09
论文阅读笔记
论文阅读
笔记
人工智能
深度学习
机器人
Fine
-grained Analysis of Stability and Generalization for Stochastic Bilevel Optimization
论文《
Fine
-grainedAnalysisofStabilityandGeneralizationforStochasticBilevelOptimization》IJCAI’2024《随机双层优化的细粒度稳定性和泛化性分析
再给一碗吧
·
2025-03-07 13:40
已发表论文分享
机器学习理论知识
泛化理论
双层优化
微调(
Fine
-tuning)
微调(
Fine
-tuning)是自然语言处理(NLP)和深度学习中的一种常见技术,用于将预训练模型(Pre-trainedModel)适配到特定任务上。
路野yue
·
2025-03-04 20:49
人工智能
深度学习
AttnGAN:
Fine
-Grained Text to Image Generation with Attentional Generative Adversarial Networks
《AttnGAN:
Fine
-GrainedTexttoImageGenerationwithAttentionalGenerativeAdversarialNetworks》是CVPR2018文本生成图像的文章
EwanRenton
·
2025-03-04 10:31
DL
paper
AttnGAN
text2img
CVPR
2018
DAMSM
使用 SK 进行向量操作
因为绝大多数人跟公司是没有
fine
-turning的能力的。不管是在难度还是成本的角度看RAG技术都友好的多。
·
2025-03-02 21:28
后端
前言:什么是大模型微调
大模型微调(
Fine
-tuning)是指在预训练模型的基础上,针对特定的任务或数据集进行进一步训练的过程。预训练模型通常在大规模的通用数据上训练,具备广泛的语言理解和生成能力。
伯牙碎琴
·
2025-02-28 04:26
大模型微调
深度学习
人工智能
机器学习
大模型
微调
训练
Python微调DeepSeek-R1-Distill-Qwen-1.5B模型:使用Transformers和PyTorch进行训练
为了让这些模型更加适应特定任务,我们通常会进行微调(
Fine
-tuning)。
煤炭里de黑猫
·
2025-02-25 21:02
pytorch
python
人工智能
机器学习
【深度学习】预训练和微调概述
预训练和微调概述1.预训练和微调的介绍1.1预训练(Pretraining)1.2微调(
Fine
-Tuning)2.预训练和微调的区别预训练和微调是现代深度学习模型训练中的两个关键步骤,它们通常是一个预训练
CS_木成河
·
2025-02-21 22:35
深度学习
深度学习
人工智能
语言模型
预训练
微调
GPT (Generative Pre-trained Transformer)
GPT模型通过大规模无监督预训练,使用大量的文本数据进行学习,然后再进行微调(
fine
-tuning)来适应具体的下游任务。
彬彬侠
·
2025-02-20 19:07
自然语言处理
gpt
transformer
预训练
NLP
自然语言处理
一、大模型微调的前沿技术与应用
大模型微调的前沿技术与应用随着大规模预训练模型(如GPT、BERT、T5等)的广泛应用,大模型微调(
Fine
-Tuning,FT)成为了提升模型在特定任务中性能的关键技术。
伯牙碎琴
·
2025-02-16 20:31
大模型微调
人工智能
大模型
微调
Deepseek
大语言模型常用微调与基于SFT微调DeepSeek R1指南
概述大型语言模型(LLM,LargeLanguageModel)的微调(
Fine
-tuning)是指在一个预训练模型的基础上,使用特定领域或任务的数据对模型进行进一步训练,以使其在该领域或任务上表现更好
知来者逆
·
2025-02-16 16:08
LLM
深度学习
人工智能
自然语言处理
DeepSeek
SFT
微调
如何微调(
Fine
-tuning)大语言模型?看完这篇你就懂了!!
什么是微调(
fine
-tuning)?微调能解决什么问题?什么是LoRA?如何进行微调?本文将解答以上问题,并通过代码实例展示如何使用LoRA进行微调。
datian1234
·
2025-02-13 23:05
语言模型
人工智能
chatgpt
LLM
ai
AI大模型
大模型微调
【深度学习】常见模型-GPT(Generative Pre-trained Transformer,生成式预训练 Transformer)
它能够通过大量无监督数据预训练,然后微调(
Fine
-tuning)以适应特
IT古董
·
2025-02-13 16:15
深度学习
人工智能
深度学习
gpt
transformer
大模型入门(六)—— RLHF微调大模型
一、RLHF微调三阶段参考:https://huggingface.co/blog/rlhf1)使用监督数据微调语言模型,和
fine
-tuning一致。
LLM.
·
2025-02-10 23:17
人工智能
语言模型
机器学习
自然语言处理
LLM
大模型
RLHF
coarse-to-
fine
(1) CF-DRNet
1、Coarse-to-fineclassificationfordiabeticretinopathygradingusingconvolutionalneuralnetwork使用卷积神经网络对糖尿病视网膜病变分级进行从粗到细的分类。ArtificialIntelligenceinMedicineVolume108,August2020,101936亮点首次提出了一个分层的从粗到细的糖尿病视网
momoka9
·
2025-02-10 05:39
论文笔记
python
接入deepseek构建RAG企业智能问答系统
让AI大模型“学习”业务知识的两种主要方法:微调(
Fine
-Tuning):在预训练模型基础上根据特定任务和数据集调整参数。
da pai ge
·
2025-02-09 16:08
prometheus
kubernetes
javascript
大模型(LLM)微调并不复杂,数据才是关键:3个实例详解数据准备
今天咱们聊聊一个听起来很高大上的词——微调(
Fine
-Tuning)。听说过吗?
程序员二飞
·
2025-02-08 01:21
深度学习
机器学习
人工智能
金融
学习
chatgpt
大数据
tomcat配置Catalina.out日志和access访问日志滚动和最大保存天数
配置前:1catalina.org.apache.juli.FileHandler.level=
FINE
1catalina
stpice
·
2025-02-07 16:59
java
tomcat
java
catalina.out
access.log
maxDays
【机器学习】机器学习重要方法——迁移学习:理论、方法与实践
文章目录迁移学习:理论、方法与实践引言第一章迁移学习的基本概念1.1什么是迁移学习1.2迁移学习的类型1.3迁移学习的优势第二章迁移学习的核心方法2.1特征重用(FeatureReuse)2.2微调(
Fine
-Tuning
E绵绵
·
2025-02-06 22:52
Everything
机器学习
迁移学习
人工智能
python
AIGC
应用
Mixture of Experts(MoE)学习笔记
不过在这之后开源社区并没有对MoE架构进行很多的探索,更多的工作还是聚焦在预训练新的大模型,在Llama2或其他模型上做
Fine
-tune,以及扩展大模型的ContextLength。12月8号
南七小僧
·
2025-02-03 12:44
人工智能
网站开发
医疗器械研发
学习
笔记
人工智能
MoE
大模型
【llm对话系统】大模型 Llama 源码分析之 LoRA 微调
1.引言微调(
Fine
-tuning)是将预训练大模型(LLM)应用于下游任务的常用方法。然而,直接微调大模型的所有参数通常需要大量的计算资源和内存。
kakaZhui
·
2025-02-02 13:14
llama
深度学习
pytorch
AIGC
chatgpt
AI大模型在智能客服系统中的应用
基于大模型的智能客服系统架构2.对话生成与上下文管理对话生成上下文管理3.提高客服系统响应精度的策略1.使用专门训练的数据集2.引入实体识别和意图分类3.反馈循环和持续优化4.AI大模型在企业中的优化与调优策略1.模型微调(
Fine
-tuning
季风泯灭的季节
·
2025-02-01 04:33
AI大模型应用技术二
人工智能
DeepSeek V3 模型微调(SFT)技术详解
DeepSeekV3模型微调(SFT)技术详解目录引言背景知识2.1深度学习与预训练模型2.2微调(
Fine
-tuning)的概念2.3监督微调(SupervisedFine-tuning,SFT)DeepSeekV3
zhangjiaofa
·
2025-01-30 00:28
大模型
DeepSeek
模型微调
万字精研:大型语言模型微调
Fine
-Tuning技术——14种主流方法的原理、适用场景及实践指南
万字精研:大型语言模型微调
Fine
-Tuning技术——14种主流方法的原理、适用场景及实践指南LLM训练时间和的成本太过庞大,况且个人卷训练经验极为困难,不妨从微调开始搞起。
汀、人工智能
·
2025-01-29 15:40
LLM工业级落地实践
LLM技术汇总
语言模型
人工智能
自然语言处理
P-tuning
LoRA
prompt
tuning
adapter
探索前端的未来:深度使用 SolidJS 构建高性能用户界面
相比于其他框架,SolidJS有以下独特优势:超高性能:基于
fine
-grainedreactivity(细粒度反应性)机制,仅更新必要的DOM节点。零
桂月二二
·
2025-01-29 06:43
前端
ui
大语言模型LLM基础扫盲速通版
9.2在LLM中,微调(
fine
-tuning)是什么?9.3模型大小如何影响LLM的性能?9.4LLM能生
SmallerFL
·
2025-01-27 00:40
NLP&机器学习
语言模型
人工智能
自然语言处理
llm
chatgpt
re:Invent 2023 | 当 SaaS 遇到 AI /ML 和生成式 AI:多租户模式和战略
&trk=42570719-fa2a-4df9-893d-40b6ac004272&sc_channel=el"Bedrock"),Multi-TenantPatterns,GenerativeAi,
Fine
-Tun
李白的好朋友
·
2025-01-25 06:43
aws
亚马逊云科技
科技
人工智能
re:Invent
2023
生成式AI
云服务
FACEBOOK改名META,元宇宙救不了FACEBOOK
看标题你就会发现这里又是不同的观点,正如此,我相信即便是这个公众号,以及由此而散开的花是值得期待的;这不仅打开一扇技术的窗,更打开一扇人生的窗口读懂中国互联网,读懂商业模式请关注微信公众号“肉眼品世界”(ID:find_world_
fine
公众号:肉眼品世界
·
2025-01-24 09:00
大数据
微软
编程语言
区块链
python
个性化的语言模型构建思路
将开源模型(如Llama3、Qwen、Falcon3…等)转变为个人专属的大语言模型,通常涉及知识库的构建、微调(
fine
-tuning)和模型定制等步骤。
由数入道
·
2025-01-23 11:19
人工智能
语言模型
人工智能
自然语言处理
大语言模型原理基础与前沿 指令生成
大语言模型、指令生成、Transformer、BERT、GPT、LLaMA、
Fine
-tuning、PromptEngineering1.背景介绍近年来,大语言模型(LargeLanguageModels
AI大模型应用之禅
·
2025-01-22 07:04
计算机软件编程原理与应用实践
java
python
javascript
kotlin
golang
架构
人工智能
吴恩达系列——微调(
Fine
-tuning)与生成模型的应用
微调(
Fine
-tuning)是指在已有预训练模型的基础上,对模型进行进一步训练,以适应特定任务或需求。
疯狂小料
·
2025-01-18 21:04
ai
prompt
LLM 词汇表
Fine
-tuning微调是使用额外的数据进一步训练预训练语言模型的过程。这使得模型开始表示和模仿微调数
落难Coder
·
2024-09-16 10:22
LLMs
NLP
大语言模型
大模型
llama
人工智能
未来网络体系结构和SDN的研究进展-毕军
最后,介绍一种未来网络体系结构创新环境(
FINE
)体系结构。阅读全文和小伙伴们一起来吐槽
拟声的主扬
·
2024-09-15 09:08
专题
sdn
网络
结构
互联网
软件
新加坡 - A
Fine
City
前两天和朋友吃饭,聊到了各自对新加坡的看法,发现这个城市真是让人又爱又恨。我曾经在新加坡学习4年,后又去英国学习3年,期间也去过不少欧洲的城市。和其它去过的城市相比,新加坡可以说是最安全的一个城市了,犯罪率非常低,真的达到了夜不闭户的程度。曾经住过寄宿家庭,晚上真的不锁门。然而,这种安全感对于人们的生活和商业发展固然是非常好的,但也造成了人们自由度的被压缩。比如,新加坡全面禁烟,就连室外的遮雨棚下
小土也
·
2024-09-11 14:44
GitBook 本地使用排雷,及导出基本可用的 PDF 版本
原文地址:https://alphahinex.github.io/2022/09/18/gitbook-export-
fine
-enough-pdf/coverdescription:"总结了离线环境使用
AlphaHinex
·
2024-09-07 19:24
深度解析:大模型微调的原理、应用与实践
我的结论是在实际落地的过程中绝大多数场景是不需要做的,所以今天主要跟大家分享一下什么是
Fine
-tuning、
Fine
-tuning的原理以及
Fine
-tuning的应用,以帮助大家在工作中更好的理解大模型微调
longfei.li
·
2024-09-01 22:56
人工智能
神经网络
CLIP-Adapter: Better Vision-Language Models with Feature Adapters
对比语言图像预训练(CLIP)虽然prompt-tuning用于textualinputs,但是建议CLIPAdapter在视觉或语言分支上使用功能适配器进行
fine
-tuneCLIPAdapter采用了一个额外的瓶颈层来学习新的特征
Tsukinousag
·
2024-09-01 19:22
redis常用操作命令
显示服务器时间,时间戳(秒),微秒数127.0.0.1:6379>time当前数据库key的数量127.0.0.1:6379>dbsize查询所有key127.0.0.1:6379>keys*模糊查询以
fine
diffiii
·
2024-08-24 15:25
Redis
redis
bootstrap
数据库
嵌入式初学-C语言-二九
这部分操作是由预处理程序自动完成,当源文件在编译时,编译器会自动调用预处理指令的解析,预处理指令解析完成才能进入下一步的编译过程为了能够方便看到编译细节,使用以下命令gcc源文件-E-o程序名[.后缀]预处理的功能宏定义作用域
fine
GoDve丨
·
2024-08-23 12:01
c语言
开发语言
前端
算法
数据结构
c++
关于航班延误的吐槽
你们带着怒气上来,我对你们笑脸相迎,你甩我一个白眼,OK,
fine
,
垚夢語
·
2024-08-22 15:23
#LLM入门|Prompt#1.8_聊天机器人_Chatbot
专门任务设计:针对特定任务或行为进行设计,模型可针对该任务进行
Fine
-tune,提高效果和准确性。优势简化开发:减少了构建聊天机器人所需的工作量和复杂度。灵活性:模型可根据需求进行定
向日葵花籽儿
·
2024-03-12 18:39
LLM入门教程笔记
prompt
机器人
microsoft
预训练大模型LLM的微调PEFT(概述)
微调的分类对大模型进行二次训练的操作我们通常称为微调(
Fine
-T
若石之上
·
2024-03-05 00:49
人工智能
人工智能
LLM
peft
微调
LORA
随笔20190328
健身房偶遇外国友人,自以为自己英语水平高超,却不知对方第一句话我便绞尽脑汁,他说howareyou.按照书本正常的回答应该是
fine
,thankyou,andyou。
努力的小坤
·
2024-02-20 12:04
学习笔记:使用 Amazon Bedrock 进行图像生成
亚马逊云科技此次为其大模型托管服务引入了
Fine
-tuning、Agents、KnowledgeBases和Guardrails等一系列创新功能。
·
2024-02-19 16:07
预训练和微调在迁移学习中的作用
在机器学习和深度学习中,"pre-training"(预训练)和"
fine
-tuning"(微调)是两个常见且重要的概念,它们通常在迁移学习场景中使用,以提高模型在特定任务上的性能。
一条小小yu
·
2024-02-19 12:42
迁移学习
人工智能
机器学习
Prompt Tuning:深度解读一种新的微调范式
相比传统
fine
-tuning有什么优势?自20年底开始,prompt的发展历程,哪些经典的代表方法?面向不同种类NLP任务,prompt如何选择和设计?
lichunericli
·
2024-02-15 09:55
LLM
人工智能
语言模型
prompt
119.乐理基础-五线谱-五线谱的标记
、
Fine
、Coda、反复记号(一)反复、跳房子五线谱版:区间
染指1110
·
2024-02-13 15:56
乐理基础-五线谱
音乐理论
音乐
first day
firstday父母给我介绍了个相亲对象,
fine
,我是好孩子,当然要去参加了…期待是没期待,办法也是没办法。对于相亲对象的了解,是个男的,没了。无所谓,我也没打算成,见个面就够了。
jiusi
·
2024-02-13 12:38
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他