4个令人惊艳的ChatGPT项目,开源了

      自从 ChatGPT、Stable Diffusion 发布以来,各种相关开源项目百花齐放,着实让人应接不暇。今天,将着重挑选几个优质的开源项目,对我们的日常工作、学习生活,都会有很大的帮助。

一、Visual ChatGPT

这个是微软开源的项目,一周多的时间,就斩获了 23.6k+ star

简单概括它,那就是一个多模态的问答系统。

支持AI绘画语言问答看图问答,将 AI 届近期的 3 大热点集于一身。

效果展示:

 系统实现框架如下:

4个令人惊艳的ChatGPT项目,开源了_第1张图片

 Visual ChatGPT的系统实现框架

这是一个大力出奇迹的开源项目,集多方研究成果于一身:BLIPCLIPChatGPTpix2pixinpaintingvqa 等。

说白了,就是教你怎样使用这些项目,搭建一个多模态的问答系统,这个系统架构很有参考价值

项目地址:

https://github.com/microsoft/visual-chatgpt

二、SadTalker

这是一篇 2023 年的 CVPR 论文对应的开源项目。

刚刚开源,新鲜热乎~

 

功能就是:根据一张图片一段音频,合成面部说这段语音的视频。

结合 ChatGPTAIGC、音频文字转换,虚拟二次元 or 三次元形象,就能过来了

4个令人惊艳的ChatGPT项目,开源了_第2张图片

 此外,还项目还做成了 stable diffusion webui 的插件,也就是直接能在 stable diffusion 里使用。

4个令人惊艳的ChatGPT项目,开源了_第3张图片

 生成的图片,直接配合一段音频,就能生成合成的视频。

项目地址:

https://github.com/winfredy/sadtalker

三、FateZero

文本能编辑生成图片?那视频能编辑吗?

FateZero:我可以!

左图是原图,右图是生成效果,输入的文本是:

增加 Pokémon 动漫风格

4个令人惊艳的ChatGPT项目,开源了_第4张图片

 增加水墨画风格:

4个令人惊艳的ChatGPT项目,开源了_第5张图片

 除了视频的风格迁移,也支持修改里面的内容。

比如:松鼠是胡萝卜,变成,兔子吃茄子。

4个令人惊艳的ChatGPT项目,开源了_第6张图片

 这个项目也是基于sd做的,离一键生成视频,又进了一步

项目地址:

https://github.com/chenyangqiqi/fatezero

四、ChatPaper

arXiv 想必大家都知道,当下最流行的论文托管网站,上面有来自世界各地的科学家、研究学者。

为了提高 arXiv 用户阅读论文的效率,有人开源了一款利用 ChatGPT 总结 arXiv 论文的开源工具 ChatPaper

4个令人惊艳的ChatGPT项目,开源了_第7张图片

开发者的动机,他是这样讲述的:

 4个令人惊艳的ChatGPT项目,开源了_第8张图片

 简而言之,该项目可根据用户关键词下载 arXiv 上的最新论文,利用 ChatGPT3.5 API 强大的归纳能力,将其浓缩成固定格式,文字少且易读。

同时,项目支持个人自己部署,或者直接去 Hugge Face 体验。

项目地址:

https://github.com/kaixindelele/ChatPaper

https://huggingface.co/spaces/wangrongsheng/ChatPaper

最后

最近有太多公司 all in ChatGPT 了,各种相关的开源项目也是层出不穷。希望这些项目,对你能有所帮助。

                                                   --END--

你可能感兴趣的:(人工智能)