书生浦语大模型全链路开源体系

人工智能已从专用模型向大模型发展,专用模型是针对特定任务,一个模型解决一个问题。通用大模型是一个模型应对多种任务,多种模态。目前上海人工智能实验室发布的InternLM大语言模型可分为轻量级InternLM-7B,中量级InternLM-20B,重量级InternLM-123B(千亿级),均为开源可商用。

除了开源大模型,上海人工智能实验室还研发开放了一些列的生态应用:

书生万卷和opendatalab,开放数据集;

InternLM-Train,预训练算法框架;

XTuner,增量续训(垂类领域知识)和有监督微调(注入少量领域知识),可在8G显存上微调7B模型;

OpenCompass,开源评测平台架构,具备分布式评测能力;

LMDeploy,大模型部署方案,提供模型轻量化、推理和服务,与OpenAI接口兼容,方便迁移;

Lagent,轻量级智能体框架,支持InternLM、gpt、hf、llama等模型;

AgentLego,多模态智能体工具箱,Lagent是提供智能体框架,而AgentLego是提供工具。

你可能感兴趣的:(开源)