对大模型与多模态的一些理解

多模态与大模型,智能的主流趋势发展,高级智能的多维认知发展
1、多模态是一种观察世界的方式,如同人类通过电视、PC、网络、手机等诸多不同媒介了解世界信息一样,代表“大模型”(所谓机器)不同视角下的世界真实发生的“观察”信息,这一观察信息通常是通过多种类型的传感器获得的,不同模态,比如:声光电磁、红外、紫外、x射线、语音、文本、视频、图像等等
2、大模型代表更大的容量与复杂度的模型,单强调一个“大”,这意味着与以前不同之处,“大”有三个方面(1、数据量大;2、模型大;3、算力大)。大部分是围绕这三个方面展开的:越来越大的数据库,chatGPT的训练数据量级;越来越大的模型,参数量突破10万亿的,手机上现在也能够运行10亿参数模型;越来越多的GPU并联,比如最新的训练有突破1万张卡的。训练好的大模型代表对世界的某种认知状态,经过不同类型训练的大模型,代表在不同数据集上,经过不同模型设定和训练策略训练的一种状态,比如gpt3和gpt3.5、gpt4.0是三种不同大模型,数据集不同,模型大小不同,训练策略也不同。
3、这其实有点像脑容量更大的动物,也就是模型容量更大。这样理解更形象一些。
4、这有点像人,人经过小学教育还是9年义务教育还是大学教育训练过后的效果,或者经过博士训练出来的结果。
5、所以训练素材很重要,专业领域的发展需要专业领域的特定素材来支持训练,这样就会形成更高的专业度和创造性。所谓垂直领域大模型就是这个道理。
6、人还是同样的人,看看经过怎么样的训练,这很重要!模型是同样的模型,看看通过什么样的数据训练?经过专业训练的。
7、模型潜力和人的潜力类似。
8、所谓碳基生命(人)和硅基生命(AI)的发展比较,AI与大脑之间在某种程度上的”竞争“与合作,所谓竞争,很多低端需求被机器替代;所谓合作,很多人与AI共同协作完成很多任务,比如文章的审核,司机的驾驶任务,有L2和L3辅助。
9、碳基生命和硅基生命的共生与发展
10、硅基生命较低等的形式:笔记本电脑,目前较高级的形式各种语言大模型,但还是处于较为初级的阶段
11、硅基生命将在未来社会中扮演更多更重要的角色
12、硅基生命的发展曲线,大时代才刚刚开始!
13、硅基生命时代,21世纪将是硅基生命的时代

你可能感兴趣的:(人工智能,深度学习)