微软开源 Deep Speed Chat

ac925b5cf296fac92064957eb556266f.gif

4月12日,微软宣布开源了 Deep Speed Chat,帮助用户轻松训练类 ChatGPT 等大语言模型。

Deep Speed Chat是基于微软Deep Speed深度学习优化库开发而成,具备训练、强化推理等功能,还使用了RLHF(人工反馈机制的强化学习)技术,可将训练速度提升15倍以上,成本却大幅度降低。例如,一个130亿参数的类ChatGPT模型,只需1.25小时就能完成训练。

16a5d87183c3315eb3ba20ce5c279028.gif

 
   
 
   
 
   
 
   
☞大裁员之后,Meta 为 VR 程序员开出百万美元年薪!
☞商汤加入 ChatGPT 战局,发布“商量”语言大模型!
☞上海 00 后小伙 AI “复活”奶奶,却引发巨大争议

你可能感兴趣的:(微软开源 Deep Speed Chat)