应用介绍
MiniGPT4下载,MiniGPT4是一款全新打造的迷你GPT-4,可以帮助用户们在线一键识图,通过对图片中的物品智能扫描来为用户们呈现相应的结构,例如扫描一张菜品图,即可生成该菜的制作方法等,十分实用呢。
MiniGPT4介绍
由用户们自制打造的全新GPT-4 识图功能。
MiniGPT-4 来了,Demo 开放在线可玩。
传一张海鲜大餐照片上去,就能直接获得菜谱。
传一张商品效果图,就可以让 AI 写一篇带货文案。
手绘一个网页,可以给出对应的 HTML 代
除了生产力拉满,也支持根据常识推理图上内容是否合理、解释表情包为什么好笑,以及看截图找电影等娱乐玩法。
可以说,GPT-4 发布时展示过的功能,MiniGPT-4 基本也都有了。
这下网友直接把 Demo 服务器挤爆,开发团队连开 4 台备用服务器,都有几十人在排队。
MiniGPT4说明
不等 OpenAI 了,现在就能玩
除了研究团队给出的示例,网友也用 MiniGPT-4 玩出了各种花样
有人上传自己画的画,让 AI 评价评价。
做到这么好的效果,MiniGPT-4 实现起来却并不复杂。
把图像编码器与开源语言模型 Vicuna(小羊驼)整合起来,并且冻结了两者的大部分参数,只需要训练很少一部分。
传统预训练阶段,使用 4 张 A100 在 10 个小时内就可完成,此时训练出来的 Vicuna 已能够理解图像,但生成能力受到很大影响。
为解决这个问题,团队让 MiniGPT-4 与 ChatGPT 合作创建了 3500 个图像文本的高质量数据集,也一并开源。
用新的数据集微调可以显著提高模型的生成可靠性和整体可用性,而且计算效率很高,使用单个 A100 只需要 7 分钟。
应用截图