BERT微调

2021-01-14

很想了解行业的黄埔军校的培养机制，机缘来了，朋友推荐混沌大学的试听课程，有幸听到了宝洁中华区供应链的人力资源副总裁Albert的大课，近二个小时的分享，讲得很朴素，低调，更是一种连接人心的地气感。
黄蓉DG·2024-01-22 22:43

生活，可以平淡，可以平凡，却不能奢望精彩！

稍微调整姿势，睁开双眼去改变一点点方向，也许本该落在水泥地的结局就会因此变成了落到泥潭，开出一朵漂亮的水花。3.年轻的时候，想浪迹天涯，却迈不出半步辞职的步伐。年老了，再也没有了那份憧憬。
341_7020·2024-01-22 21:05

每日一看大模型新闻（2023.11.24）OpenAI内斗五天完整始末，背后是人类持续两百年的恐惧；零一万物：上线Yi-34B-Chat微调模型及量化版；能总结经验、持续进化，上交把智能体优化参数

1.产品发布1.1阿里巴巴推大规模音频语言模型Qwen-Audio发布日期：2023.11.24开源语音大语言模型来了！阿里基于Qwen-Chat提出Qwen-Audio!-CSDN博客主要内容：阿里巴巴首次推出Qwen-Audio系列，标志着在大规模音频语言模型领域取得显著突破。采用层次标签的多任务框架，成功解决了预训练音频模型面临的多样化任务挑战。Qwen-Audio-Chat支持多轮对话和各
超爱玩大模型·2024-01-22 20:56

【BERT】详解

BERT简介BERT是谷歌在2018年时提出的一种基于Transformer的双向编码器的表示学习模型，它在多个NLP任务上刷新了记录。
onlyfansnft.art·2024-01-22 16:46

2022-10-17

2.指挥家（卡拉扬&伯恩斯坦)赫伯特·冯·卡拉扬（HerbertvonKarajan，1908年4月5日－1989年7月16日），奥地利指挥家、键盘乐器演奏家、导演。卡拉扬在指挥舞
Eltonpeople·2024-01-22 14:28

认识并使用LlamaIndex

3.1方案1：用你的数据对LLM进行微调（fine-tune）3.2方案2：[检索增强生成（RAG）](https://docs.llamaindex.ai/en/latest/getting_started
南七行者·2024-01-22 13:16

gpt-2 生成文本_对gpt 2进行了微调，以实现神奇的收集风味文本生成

gpt-2生成文本AtemplateforfinetuningyourownGPT-2model.用于微调您自己的GPT-2模型的模板。
weixin_26730921·2024-01-22 12:56

让OpenAI GPT3替我写数据竞赛代码！

ChatGPT是从GPT-3.5系列中的一个模型进行微调的，该模型于2022年
AI Studio·2024-01-22 12:25

大模型训练折戟之路

看了很多大模型平台，基本上这些平台都开源了模型建立过程，训练和微调数据等整个过程和脚本在github上描述的也比较详细，很多AI人员也分享了很多模型训练过程。
manok·2024-01-22 11:59

Transformer and Pretrain Language Models3-1

contenttransformerattentionmechanismtransformerstructurepretrainedlanguagemodelslanguagemodelingpre-trainedlanguemodels(PLMs）fine-tuningapproachesPLMsafterBERTapplicationsofmaskedLMfrontiersofPLMstran
ringthebell·2024-01-22 10:27

LLMs之ChatGLM3：ChatGLM3/ChatGLM3-6B的简介—“对话格式”功能介绍(推理系统如何解析参数/采用Python代码形式/编写工具调用的代码/Manual Mode)、推理演示

ChatGLM3-6B的简介—“对话格式”功能介绍(推理系统如何解析参数/采用Python代码形式/编写工具调用的代码/ManualMode)、推理演示(Chat/Tool/CodeInterpreter)、微调
一个处女座的程序猿·2024-01-22 08:19

【LLM-agent】function call功能、AgentTuning微调

所以为了提高模型准确识别和调用函数的能力，如agenttuning就是利用多个agent任务交互轨迹，对LLM进行sft微调，文章目录note一、functioncall1.functio
山顶夕景·2024-01-22 08:16

Graph of Thoughts: Solving Elaborate Problems with Large Language Models

Tags:LLMAuthors:AlesKubicek,HubertNiewiadomski,JoannaGajda,LukasGianinazzi,MaciejBesta,MichałPodstawski
HMTT·2024-01-22 08:23

AI大模型中的Bert

1.全方位上下文理解：与以前的模型（例如GPT）相比，BERT能够双向理解上下文，即同时考虑一个词的左边和右边的上下文。
永远的HelloWorld·2024-01-22 07:10

bert 是单标签还是多标签 的分类_搞定NLP领域的“变形金刚”！手把手教你用BERT进行多标签文本分类...

所有这些算法都允许我们在大型数据库(例如所有维基百科文章)上预先训练无监督语言模型，然后在下游任务上对这些预先训练的模型进行微调。这一年里，在这一领域中
weixin_39629617·2024-01-22 06:08

Bert+FGSM中文文本分类

我上一篇博客已经分别用Bert+FGSM和Bert+PGD实现了中文文本分类，这篇文章与我上一篇文章Bert+FGSM/PGD实现中文文本分类（Loss=0.5L1+0.5L2)_Dr.sky_的博客-
Dr.sky_·2024-01-22 06:08

基于BERT对中文邮件内容分类

用BERT做中文邮件内容分类项目背景与意义项目思路数据集介绍环境配置数据加载与预处理自定义数据集模型训练加载BERT预训练模型开始训练预测效果项目背景与意义本文是《用BERT做中文邮件内容分类》系列的第二篇
OverlordDuke·2024-01-22 06:04

SCTP, TCP, UDP, IP, ICMP都在哪一层？(TCP/IP网络通信协议学习)

TCP/IP网络通信协议最早是由罗伯特·卡恩（RobertE.Kahn）和文顿·瑟夫（VintonG.Cerf）于1972年提出的，它是一个实际的协议栈。
码到程攻·2024-01-22 06:58

[学习笔记]刘知远团队大模型技术与交叉应用L4-Prompt-learning & Delta-learning

微调很难了。模型的趋势ModelScaling：模型越来越大DifficultTuning：微调越来越难Prompt-Learning基本组成与流程介绍预训练和fine-tuning有一定的gap。
N刻后告诉你·2024-01-22 04:36

第三课：GPT

文章目录第三课：GPT1、学习总结：GPT出现的原因GPT的方法原理目前存在的问题无监督的预训练优化目标模型结构监督微调课程ppt及代码地址2、学习心得：3、经验分享：4、课程反馈：5、使用MindSpore
一条大蟒蛇6666·2024-01-22 02:10

大模型学习第四课作业

基础作业：构建数据集，使用XTuner微调InternLM-Chat-7B模型,让模型学习到它是你的智能小助手
敲键盘的喵桑·2024-01-22 02:38

Knowledge Distillation (1) 模块替换之bert-of-theseus-上篇

更好的阅读体验请跳转至KnowledgeDistillation(1)模块替换之bert-of-theseus-上篇如果忒修斯的船上的木头被逐渐替换，直到所有的木头都不是原来的木头，那这艘船还是原来的那艘船吗
小蛋子·2024-01-22 02:50

大秦帝国系列

大秦说播便播了（不许不许套娃）”，2009-2020大秦帝国系列史诗，双厨狂喜（忙里偷闲|狗头|），有些故事，你终究只能像局外人一样去看待结局，局内人甚至视之为自明之理，局外人则觉得莫名其妙，世界的钟摆得以微调和收敛于合适位置
孟小七同学·2024-01-22 00:19

七、VsCode 的10 个必装的扩展插件

itemName=robertohuertasm.vscode-icons首先为了我们在编码时有一个高效、易用的界面，我们需要对一些不明了的组件做一些美化。
贝小猪的快乐生活·2024-01-22 00:16

Hugging Face公司和模型测评榜单简单介绍

HuggingFace提供了一个名为Transformers的开源库，这个库为开发者和研究人员提供了一系列预训练模型，以及用于训练和微调这些模型的工具。
人生万事须自为，跬步江山即寥廓。·2024-01-22 00:22

第6章面向对象程序设计基本原则

6.1概述2002年出版的《敏捷软件开发：原则、模式与实践》（RobertC.Martin著）一书中，总结了十一种面向对象设计的重要法则，其中流传最广、应用最多的有7种，也就是我们常见的，首字母大写为SOLID
ARTHUR王旭光·2024-01-21 23:49

DAY5-《不一样的天空》

《不一样的天空》What’sEatingGilbertGrape1993导演：拉斯·霍尔斯道姆LasseHallstrom演员：约翰尼·德普JohnnyDepp、莱昂纳多·迪卡普里奥LeonardoDiCaprio
Boringdog·2024-01-21 21:55

Navicat 现已支持 OceanBase 企业版

近期，PremiumSoftCyberTechLimited公司发布了Navicat16.1.3版本，正式支持蚂蚁集团旗下的OceanBase企业版（MySQL兼容模式）。
Navicat中国·2024-01-21 18:29

XTuner 大模型单卡低成本微调实战

教程XTuner大模型单卡低成本微调实战文档XTuner大模型单卡低成本微调实战B站视频指令微调，也叫指令微调，intruct大模型。
RessCris·2024-01-21 18:46

塑造设计师的个人品牌，你需要知道的5点

.》、《5WaystoGrowYourBrand,BeCreativeandBecometheExpertinYourField》、《BuildingaPersonalBrandWithRobertoBlake
Mu_Xin·2024-01-21 17:46

《局外人》英文节选-翻译

TheStrangerByAlbertCamusTranslatedfromtheFrenchbyStuartGilbertTheskywasalreadyablazeoflight,andtheairstokinguprapidly.Ifeltthefirstwavesofheatlappingmyback
梓漆·2024-01-21 16:39

感赏（337）接收祝福！～我吸引到稳稳的参加高考的儿子最好的状态！

每天，起床、投射、默默的爱着小我，我知道自己微调适度，能在清晨开启快乐的时光！工作忙而不乱，累而不疲！忙得快乐，忙得欢喜！图片发自App感赏自己，能有分段投射的意识，只是偶尔会断片！
刘淑正·2024-01-21 15:01

Lodop打印设计（PRINT_DESIGN）介绍

（用于微调，普通调整可拖动调整元素位置，移动选中的单个或多个打印项）（2）第一排第二个功能，设置颜色。点击颜色方格的图标，可选预设的颜色，或者自定义颜色。
weixin_30902251·2024-01-21 14:01

Stable Diffusion

LoRa是大模型微调的一种基础方法，广泛应用于语言大模型、视觉大模型
saoqi_boy·2024-01-21 13:53

使用PEFT微调ChatGLM3-6B

系列文章目录该系列文章用于介绍使用peft库来进行大模型的微调第一章使用PEFT对ChatGLM3-6B进行LORA微调文章目录系列文章目录前言一、准备工作1.环境准备2.大模型准备：3.数据准备二、数据集准备和训练
saoqi_boy·2024-01-21 13:53

数字图像处理期末速成笔记

线性）6、中值滤波法（分线性）7、中值滤波与领域平均的异同8、4-邻域平滑法9、超限像素平滑法10、灰度最相近的K个邻点平均法11、3*3模板中值滤波四、图像锐化1、微分法（梯度算子）2、微分法（Roberts
我先去打把游戏先·2024-01-21 13:43

源2.0大模型适配LLaMA-Factory框架！

近日，源2.0开源大模型与LLaMA-Factory框架完成全面适配，用户通过LLaMA-Factory，即可快捷、高效地对不同参数规模的源2.0基础模型进行全量微调及高效微调，轻松实现专属大模型。
AI知识图谱大本营·2024-01-21 13:34

【llm 微调code-llama 训练自己的数据集 一个小案例】

这也是一个通用的方案，使用peft微调LLM。
放飞自我的Coder·2024-01-21 13:33

羊驼系列大模型LLaMa、Alpaca、Vicuna

让大模型平民化LLaMa优势用到的数据：大部分英语、西班牙语，少中文模型下载地址https://huggingface.co/meta-llamaAlpaca模型Alpaca是斯坦福从Meta的LLaMA7B微调而来的全新模型
南宫凝忆·2024-01-21 13:59

论文阅读【SWINBERT: End-to-End Transformers with Sparse Attention for Video Captioning】

SWINBERT:End-to-EndTransformerswithSparseAttentionforVideoCaptioning发表：CVPR2022idea：之前的方法都是使用其他任务上训练的特征提取器对
hei_hei_hei_·2024-01-21 12:38

Span-based Joint Entity and Relation Extraction with Transformer Pre-training

主要贡献是在BERT嵌入上的轻量级推理，能够进行实体识别和过滤，以及使用本地化的，无标记的上下文表示的关系分类。
自然语言处理CS·2024-01-21 12:37

开源大模型领域最重要的玩家们，在关心/担心什么

从2月份Meta发布的Llama，到3月份斯坦福大学微调Llama后发布的Alpaca，再到5月份出现的Falcon，世界各地的开源模型在「内卷」中快速进步。
开源社·2024-01-21 10:14

JavaScript Math.random（）方法介绍

methodisanexcellentbuilt-inmethodforproducingrandomnumbers.WhenMath.random()isexecuted,itreturnsarandomnumberthatcanbeanywherebetween0and1
cumi6497·2024-01-21 09:07

关于最近的NLP模型Bert、Elmo、GPT（下--2）

这篇这个系列的最后一篇文章，还是关于Bert，的下半部分。今天又读了一遍Bert的论文，这篇结尾主要从两个方面来介绍bert，一个是怎么用，一个是比较这个三个模型。
吴祺育的笔记·2024-01-21 09:35

视频剪辑教程：如何批量制作滚动字幕，提升画面质感的方法

批量制作滚动字幕的方法：1、执行云炫AI智剪：支持AI智剪、分割视频、合并视频、视频画中画、视频色彩微调、自带srt字幕编辑器、嵌套合并、视频封面、视频转码等。
叩心·2024-01-21 09:50

LOSS损失函数值是什么意思？

环境：Bert-VITS2-v2.3问题描述：LOSS损失函数值是什么意思？解决方案：在机器学习和深度学习中，损失函数（LossFunction）用来衡量模型预测值与实际值之间的差异或误差。
玩电脑的辣条哥·2024-01-21 08:19

关于《局外人 L'Étranger》的片段摘抄，以后可能遇不到这么有趣的小说主人公了

（《局外人L'Étranger》这部小说被人多人认为是阿尔贝·加缪AlbertCamus首屈一指的作品，这部小说一经出版就大获成功，很快成为了存在主义文学的代表作。
曹爽怡·2024-01-21 06:09

JavaScript数字转换：阿拉伯数字转中文或英文

Pixiu-Number-Toolkit是一个强大的JavaScript数字处理库，其中一个重要的功能是numberToWords，它可以将阿拉伯数字转换为英文或中文的文字形式。
handsome-wolf·2024-01-21 05:42

探索Java中隐藏的访问权限synthetic

首先参考一下Java8虚拟机规范中对TheSyntheticAttribute的相关描述:AclassmemberthatdoesnotappearinthesourcecodemustbemarkedusingaSyntheticattribute
不凋花·2024-01-21 02:42

【书生·浦语大模型实战营04】《(4)XTuner 大模型单卡低成本微调实战》学习笔记

《(4)XTuner大模型单卡低成本微调实战》课程文档：《XTuner大模型单卡低成本微调实战》1Finetune简介LLM的下游应用中，增量预训练和指令跟随是经常会用到两种的微调模式1.1增量预训练微调使用场景
songyuc·2024-01-21 02:46
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他