大模型实战训练营笔记(1)

1.大模型的发展:专用模型——通用大模型

2.从模型到应用

解释了模型到应用的具体实施流程,对整体的应用有了一个较为全面的认识。

大模型实战训练营笔记(1)_第1张图片

3.openmmlab全链条开源开放体系

这部分是最有收获的,通过对这几种开源体系的介绍,其实也是对第二部分具体应用的一个较为详细的分析。

大模型实战训练营笔记(1)_第2张图片

a.书生万卷/opendatalab:数据系统

大模型实战训练营笔记(1)_第3张图片

大模型实战训练营笔记(1)_第4张图片

b.预训练:对于大多数学习者来说应该不太需要

大模型实战训练营笔记(1)_第5张图片

c.微调

增量微调+有监督微调

大模型实战训练营笔记(1)_第6张图片

大模型实战训练营笔记(1)_第7张图片

d.评测

大模型实战训练营笔记(1)_第8张图片

大模型实战训练营笔记(1)_第9张图片

大模型实战训练营笔记(1)_第10张图片

e.部署

大模型实战训练营笔记(1)_第11张图片

大模型实战训练营笔记(1)_第12张图片

f.智能体

大模型实战训练营笔记(1)_第13张图片

搭建智能体整体框架

大模型实战训练营笔记(1)_第14张图片

为智能体提供各种各样的工具集合

大模型实战训练营笔记(1)_第15张图片

4.总结

因为学习大预言模型的初衷是和下游任务做结合,做具身智能方面的应用,因此更多关注微调、部署和智能体这三个模块。有一个初步的认识纪录一下:用微调学习垂域知识,结合部署设备实在在低成本设备(移动机器人平台)上的部署,并可以调用一些特定的工具,不仅体现在LLM的应用,也和之前计算机视觉的一些模型相结合,实现更丰富的任务。

视频链接:书生·浦语大模型全链路开源体系_哔哩哔哩_bilibili

你可能感兴趣的:(笔记)