LLM微调

部分意图分类【LLM+RAG】

举个例子：在为北美顶级金融服务公司之一设计对话式人工智能助手时，WillowTree的数据和人工智能研究团队(DART)发现，将意图分类与大型语言模型(LLM)结合使用可以提高性能，安全性和成本。
新缸中之脑·2024-02-07 12:47

transformer剪枝论文汇总

文章目录NNPruning摘要实验大模型剪枝LLM-PrunerSparseGPTLTPVTPWidth&DepthPruningPatchSlimmingDynamicViTSPViTDynamicBERTViTSlimmingFastFormersNViTUVCPost-trainingpruningNNPruning
清风2022·2024-02-07 10:32

新添“代理”概念，用 GitHub Copilot 追求极致编码智能

大型语言模型（LLM）是在某个时间点上使用公共存储库数据进行训练的。这意味着它们对当前
全云在线allcloudonline·2024-02-07 10:25

手把手教程｜如何使用 Azure 机器学习 Prompt Flow 优化提示词工程

企业申请AzureOpenAI绿色通道→记得评论私信~大模型（LargeLanguageModel,LLM）尤其是OpenAI推出的ChatGPT模型打破了人类语言和机器语言之间的障碍，人们通过自然语言
全云在线allcloudonline·2024-02-07 10:25

利用LLM大模型生成sql的深入应用探究

Chat2DB是一款有开源免费的多数据库客户端工具,和传统的数据库客户端软件Navicat、DBeaver相比Chat2DB集成了AIGC的能力，能够将自然语言转换为SQL，也可以将SQL转换为自然语言，可以给出研发人员SQL的优化建议，极大地提升人员的效率，是AI时代数据库研发人员的利器。未来即使不懂SQL的运营业务也可以使用快速查询业务数据、生成报表能力。该工具参照Navicat、DBever
程序员山子·2024-02-07 09:50

【自然语言处理】微调 Fine-Tuning 各种经典方法的概念汇总

【自然语言处理】微调Fine-Tuning各种经典方法的概念汇总前言请看此微调Fine-TuningSFT监督微调（SupervisedFine-Tuning）概念：监督学习，无监督学习，自监督学习，半监督学习
溢流眼泪·2024-02-07 07:11

全世界 LoRA 训练脚本，联合起来!

我们把Replicate在SDXLCog训练器中使用的枢轴微调(PivotalTuning)技术与Kohya训练器中使用的Prodigy优化器相结合，再加上一堆其他优化，一起对SDXL进行DreamboothLoRA
工业甲酰苯胺·2024-02-07 06:28

langchain中langcorn的使用

pipinstalllangcornmain.py:fromlangcornimportcreate_serviceapp=create_service("chains02:llm_chain")chains02
hehui0921·2024-02-07 06:24

LLM（大语言模型）——大模型简介

目录概述发展历程大语言模型的概念LLM的应用和影响大模型的能力、特点大模型的能力涌现能力（energentabilities）作为基座模型支持多元应用的能力支持对话作为统一入口的能力大模型的特点常见大模型闭源
1telescope·2024-02-07 05:45

LLM——大型语言模型简介

原视频更加生动，推荐有能力者可以去观看原视频大型语言模型简介-大型语言模型简介|Coursera（翻着翻着发现了别人写过类似的内容，但还是发出来了，毕竟也只是自己的记录而已，感谢捧场的各位）一.LLM是什么
LinkyuW·2024-02-07 05:45

【大模型】万亿级别的大语言模型训练，基础设施如何支持

万亿级别的大语言模型训练，基础设施如何支持前言1）培训百万亿参数的LLM是可行的，但需要每个GPU高达1TiB的次级内存池，双向带宽为100GB/s。
沐风—云端行者·2024-02-07 05:43

互联网摸鱼日报(2024-02-06)

7页论文让LLM降智，训出「负分男友」成功挽回音频秒生全身虚拟人像，AI完美驱动面部肢体动作！UC伯克利Meta提出Audio2Photoreal全栈智能才能兑现AI红利？
每日摸鱼大王·2024-02-07 02:36

辛巴讨好球球吃相难看，赵本山妻子曝光女儿沉迷整容，已成病态

当然了，麦叔的话针对绝大多数明星，但也有部分人表示：整容、微调都存在安全隐患，自
麦大人·2024-02-06 23:28

CodeFuse成功支持通义千问算法大赛，评测方案已开源

前段时间，首届通义千问AI挑战赛成功举办，CodeFuse为大赛提供技术支持，模型微调框架MFTCoder和CodeFuseEval评测框架为大赛保驾护航，助力大赛圆满完成。
CodeFuse·2024-02-06 22:38

CodeFuse-VLM 开源，支持多模态多任务预训练/微调

CodeFuse-MFT-VLMCodeFuse-VLM-14B模型地址：CodeFuse-VLM-14BCodeFuse-VLM框架简介随着huggingface开源社区的不断更新，会有更多的visionencoder和LLM
CodeFuse·2024-02-06 22:37

不！GPTs无法取代知识库？0基础搭建本地私有知识库！本地fastgpt部署！16/45

在这个系列我们做了大模型的微调，如何构建数据集、如何去做数据处理、做微调策略、算微调参数！新来的朋友去检索！群里朋友聊，GPTs出来后，还有必要做私有知识库吗？有！
一意AI增效家·2024-02-06 20:20

利用Docker Compose快速部署FastGPT知识库问答

FastGPT是一个基于LLM大语言模型的知识库问答系统，提供开箱即用的数据处理、模型调用等能力。同时可以通过Flow可视化进行工作流编排，从而实现复杂的问答场景！
aixiaoxin520·2024-02-06 20:49

部署私有知识库项目FastGPT

FastGPT是一个基于LLM大语言模型的知识库问答系统，提供开箱即用的数据处理、模型调用等能力。同时可以通过Flow可视化进行工作流编排，从而实现复杂的问答场景。
南七小僧·2024-02-06 20:48

Oracle AutoVue 21.0.2.4 支持的文件格式

每次Autovue发行新版本时,都会稍微调整它支持的文件格式.截止到2020年8月,Autovue的最新版本是v21.0.2.4,它支持的主要文件格式见下图中表格:
justin.jin·2024-02-06 18:51

不忘初心，正确把握好人生成长轨迹

因此，对于有梦想的人来说，须从自身梦想出发，清晰设计梦想目标并持续坚持与适时微调，管控好、把握好过程中、成长中、人生前行中每一个可能影响或影响其个人梦想目标实际的每一个瞬间。
陈安富金融一生·2024-02-06 18:18

【ChatGLM3】微调指南

下载数据集ToolAlpaca从GitHub下载cdChatGLM3/finetune_chatmodel_demogitclonehttps://github.com/tangqiaoyu/ToolAlpaca.git除基础的torch依赖外，示例代码运行还需要依赖:pipinstalltransformers==4.30.2acceleratesentencepieceastunparsede
太空眼睛·2024-02-06 17:38

基于LLM的业务流程自动化

OpenAIGPT-4等大型语言模型(LLM)在处理涉及类人文本生成的复杂任务方面取得了重大进展。然而，他们经常面临特定领域数据的挑战。LLM通常接受广泛（公开）数据
新缸中之脑·2024-02-06 13:53

基于LLM的数据漂移和异常检测

大型语言模型(LLM)的最新进展被证明是许多领域的颠覆性力量（请参阅：通用人工智能的火花：GPT-4的早期实验）。
新缸中之脑·2024-02-06 13:53

表格数据的对话式交互【Pandas AI】

在我之前关于构建生成文本应用程序的文章中，我提到我将分享一篇关于如何在数据分析场景中使用LLM的新文章。
新缸中之脑·2024-02-06 13:53

LLM Agents 的细分技术

说白了就是给LLM一个字典让它查。RAG往往是结合向量数据库，但是对于简单应用而言，只需要J
lichunericli·2024-02-06 13:53

基于LLM的Agent的兴起及其潜力：综述

本文认为，构成LLM-basedAgent的核心部件有三个：brain:主要目标有2个—信息记忆、信息处理perception:主要目标在于让agent能够感受到更多不同模态的信息action:主要目标在于输出文字
lichunericli·2024-02-06 13:53

教授LLM思考和行动：ReAct提示词工程

让LLM把内心独白说出来，然后再根据独白做相应的动作，来提高LLM答案的准确性。---ReAct的核心思想普林斯顿大学的教授和谷歌的研究人员最近发表了一篇论文，描述了一种新颖的
lichunericli·2024-02-06 13:22

大模型ReAct提示框架

Yao等人于2022年引入了一个名为ReAct的框架，其中LLM用于以交错的方式生成推理轨迹（reasoningtraces）和特定于任务的操作。
新缸中之脑·2024-02-06 13:22

使用PaddleNLP识别垃圾邮件：用ELECTRA做英文邮件标题分类，英文邮件短标题的分类效果能达到92%以上以及如何使用PaddleNLP加载和微调ELECTRA模型？（附公开数据集）

使用PaddleNLP识别垃圾邮件：用ELECTRA做英文邮件标题分类，英文邮件短标题的分类效果能达到92%以上以及如何使用PaddleNLP加载和微调ELECTRA模型？
代码讲故事·2024-02-06 12:01

AI&大模型 | llama2微调手册查看ing

提示词说明[INST]>{{system_prompt}}>{{user_message}}[/INST]其中，，，>，>，[INST]，以及[/INST]是特殊token，标记着prompt中各个部分的构成。每一组和之间是一个相对完整的单元，可以理解为一个对话轮次（如果直接给一个文本作为输入，也可以看到模型的输入结果分别是以这两个BOS和EOStoken作为结尾的）。[INST]和[/INST]
ASKCOS·2024-02-06 10:31

【人工智能】Fine-tuning 微调：解析深度学习中的利器(7)

在深度学习领域，Fine-tuning微调是一项重要而强大的技术，它为我们提供了在特定任务上充分利用预训练模型的途径。
魔道不误砍柴功·2024-02-06 10:24

大型语言模型（LLM）的优势、劣势和风险

最近关于大型语言模型的奇迹（）已经说了很多LLMs。这些荣誉大多是当之无愧的。让ChatGPT描述广义相对论，你会得到一个非常好（且准确）的答案。然而，归根结底，ChatGPT仍然是一个盲目执行其指令集的计算机程序（和所有其他LLMs程序一样）。它对广义相对论的理解并不比你最喜欢的宠物好。不幸的是，我们使用“类似人类”的词来描述工程师用来创建它们的技术——例如，“机器学习”和“训练”。这是误导性的
MinIO官方账号·2024-02-06 08:03

基于Langchain-Chatchat + chatGLM3 轻松在本地部署一个知识库

往期llm系列文章基于MacBookProM1芯片运行chatglm2-6b大模型如何在本地部署chatGLM3基于ChatGLM.cpp实现低成本对ChatGLM3-6B的量化加速文章目录1.参考2.
最美dee时光·2024-02-06 07:53

【机器学习与自然语言处理】预训练 Pre-Training 各种经典方法的概念汇总

【NLP概念合集：一】预训练Pre-Training，微调Fine-Tuning及其方法的概念区别前言请看此正文预训练Pre-Training无监督学习unsupervisedlearning概念：标签
溢流眼泪·2024-02-06 07:18

【2024最全最细LangChain教程-12】Agent智能体（一）

之所以把Agent翻译成智能体，是因为Agent可以（在LLM推理分析的帮助下）可以自己识别、选择和使
AI小万老师·2024-02-06 07:34

【2024最全最细Langchain教程-3 】Langchain模型I/O之提示Prompt（一）

openai实现人工智能时代的hello_world-CSDN博客【2024最全最细Langchain教程-2】Langchain模型I/O之模型包装器-CSDN博客在上一节课中，我们开始使用response=llm.invoke
AI小万老师·2024-02-06 07:03

我的2020年第二十一周周总结

地点：家中时间：9:51天气：晴心情：平静这周成就事件个人成长1、这周开始聚焦于一个目标行动，实施减肥以计划，做到了一周运动三次，每次1个小时，同时监控目标完成过程，并进行细微调整，虽然本周累计减重1斤
融雪rongxue·2024-02-06 06:24

LLM之RAG实战（二十二）| LlamaIndex高级检索（一）构建完整基本RAG框架（包括RAG评估）

检索到的与回答用户查询相关的文本质量越高，你的答案就越有根据和相关性，也更容易防止LLM幻觉（产生错误或不基于特定领域文本的答案）。
wshzd·2024-02-06 06:40

LoRA：语言模型微调的计算资源优化策略

编者按：随着数据量和计算能力的增加，大模型的参数量也在不断增加，同时进行大模型微调的成本也变得越来越高。全参数微调需要大量的计算资源和时间，且在进行切换下游任务时代价高昂。
Baihai IDP·2024-02-06 06:53

【LangChain-04】利用权重和偏差跟踪和检查LangChain代理的提示

除了更强大且幸运的是开放的大型语言模型（LLM）之外，LangChain已成为开发人工智能驱动的应用程序和代理的主要工具。Langchain是一个功能强大且功能丰富的开源框架，适用于LLM。
无水先生·2024-02-06 06:06

2021-11-07大数据学习日志——MySQL进阶——报表项目

为了满足课程需求，数据库数据在原始数据基础上做了微调。基于此份数据，我们将通过SQL来创建数据报表，满足业务需求。
王络不稳定·2024-02-06 03:03

模块化的RAG和RAG流程：第一部分

简介在过去的一年里，检索增强生成（RAG）作为实现LLM应用的方法的概念引起了相当大的关注。我们撰写了一份关于RAG的综合调查报告，深入探讨了从天真的RAG到先进的RAG和模块化RAG的转变。
ericliu2017·2024-02-06 00:56

忘记 RAG：拥抱Agent设计，让 ChatGPT 更智能更贴近实际

然而，重点主要是改进检索工具的效率，如嵌入式搜索、混合搜索和微调嵌入，而不是智能搜索。这篇文章介绍了一种新的方法，灵感来自人类研究方法，涉及多种搜索技术，观察中间结果，不断完善和重试，然后才提供回应。
ericliu2017·2024-02-06 00:56

「陶哲轩×GPT-4」合写数学论文！数学大佬齐惊呼。。。。。

就在6月底，加州理工、英伟达、MIT等机构的学者，曾构建了一个基于开源LLM的定理证明器。最近，陶哲轩又发现，在使用Lean进行自然数游戏研究时，GPT-4竟然也起到一些作用。
深度学习技术前沿·2024-02-05 20:53

七月论文审稿GPT第2.5版：微调GPT3.5 turbo 16K和llama2 13B以扩大对GPT4的优势

前言自去年7月份我带队成立大模型项目团队以来，我司至今已有5个项目组，其中第一个项目组的AIGC模特生成系统已经上线在七月官网第二项目组的论文审稿GPT则将在今年34月份对外上线发布第三项目组的RAG知识库问答第1版则在春节之前已就绪至于第四、第五项目组的大模型机器人、Agent则正在迭代中所有项目均为会对外上线发布的商用项目，而论文审稿GPT至今在过去的半年已经迭代两个版本，其中第二版的效果甚至
v_JULY_v·2024-02-05 20:19

文心一言4.0API接入指南

文心一言企业服务由千帆大模型平台提供，包括推理服务及大模型微调等一系列开发和应用工具链。文心一言大模型现已升级至4.0，企业客户可通过百度智能云千帆大模型平台申
小小晓晓阳·2024-02-05 20:37

如何将pdf转换成ppt？掌握这个方法就简单多了

有时候，PDF文件的布局和设计可能需要进行微调或重新排版，以适应PPT的特定格式和风格。那么怎么pdf怎么转ppt呢？
喝奶茶嘛·2024-02-05 19:49

Sklearn、TensorFlow 与 Keras 机器学习实用指南第三版（九）

微调您的模型并将它们组合成
绝不原创的飞龙·2024-02-05 18:03

使用 LoRA 在 viggo 数据集上微调 Microsoft phi-2 小语言模型

Phi-2是一个27亿个参数的预训练Transformer，不使用RLHF或指示微调。它进行下一个标记预测，并可用于问答、聊天格式和代码生成中的文本生成。
无水先生·2024-02-05 18:54

论文笔记--Improving Language Understanding by Generative Pre-Training

-ImprovingLanguageUnderstandingbyGenerativePre-Training1.文章简介2.文章导读2.1概括2.2文章重点技术2.2.1无监督预训练2.2.2有监督微调
Isawany·2024-02-05 15:20
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他