MiniGPT-4开源,一个具备图像对话能力的聊天机器人
MiniGPT-4是一个具有图像理解能力的开源聊天机器人,基于 Vicuna-13B LLM 和 BLIP-2视觉语言模型。
研究团队首先在四张 Nvidia A100显卡上用大约500万对图像文本对 MiniGPT-4进行了十个小时的训练。在第二步中,该模型使用 MiniGPT-4和ChatGPT之间的交互生成的3,500个高质量文本图像对进行了改进。ChatGPT 更正了 MiniGPT-4生成的不正确或不准确的图像描述。
关键要点:
MiniGPT-4可以描述图像或回答有关图像内容的问题,例如,它可以根据菜肴的图像生成食谱建议,或者为视障人士提供详细的图像描述。类似于Midjourney 的新“/describe”功能,MiniGPT-4可以从图像中提取提示,或者至少是一些想法。

MiniGPT-4还可以根据手绘网页草图生成匹配的 HTML 代码。研究人员称,OpenAI在 GPT-4发布时推出的备受吹捧的草图到网站功能也可以通过 MiniGPT-4完成。

Github 上提供了 MiniGPT-4的代码、演示和培训说明。他们还宣布了一个较小版本的模型,它将在单个 Nvidia3090显卡上运行。
重要性:
MiniGPT-4是开源社区在很短时间内取得快速进步的一个例子。
MiniGPT-4的发展表明,纯 AI 模型公司的护城河可能没有那么高。
评析:
OpenAI 可能会专注于使用适用于 GPT-4的 ChatGPT 插件构建合作伙伴生态系统,而不是现在训练 GPT-5。
构建聊天生态系统更具挑战性且在经济上不可持续,但会对用户产生强烈的锁定效应。
GitHub:https://github.com/Vision-CAIR/MiniGPT-4
在线体验:https://minigpt-4.github.io/
阿里云辟谣:通义千问目前没有任何官方APP
今日,阿里云官方发布辟谣消息称,通义千问目前没有任何官方APP,网络上搜到的“通义千问”APP都是假的,提醒用户不要下载。阿里云方面表示,已经向相关平台及开发者团队追究法律责任。了解通义千问,请到官方网站:tongyi.aliyun.com。站长网2023-06-10 08:46:500001Variant Fund:人工智能音乐能做什么和不能做什么?
站长之家(ChinaZ.com)8月10日消息:VariantFund的联合创始人兼普通合伙人LiJin和音乐家兼技术专家HollyHerndon以及MatDryhurst就人工智能生成音乐在播客节目中进行了讨论,并总结了他们的对话要点。站长网2023-08-10 18:09:0300001条视频报价近35万元,短剧公司不拼投流拼做号
不想给平台“打白工”的短剧公司们,正在努力探索新玩法。有人押注品牌短剧、文旅短剧,也有人选择经营平台账号,尝试摆脱对小程序的依赖,并逐渐摸索出了一条新路径。最近,新榜旗下抖音数据工具新抖的涨粉榜上就出现了这样两个新账号:“指间短剧”曾30天涨粉158万,“疏影短剧”30天涨粉138万,累计涨粉296万。两个账号均属于头部短剧公司触摸文化,可以为观众提供短剧付费观看服务。站长网2024-06-24 02:08:000000DeepMind研究人员发现,深度学习模型在图像和音频压缩方面表现出色
文章概要:1.DeepMind研究人员发现,深度学习模型在文本领域之外,出人意料地在图像和音频数据的压缩方面表现出色。2.研究发现,虽然主要训练于文本数据,但这些大型语言模型(LLMs)在图像和音频数据的压缩方面表现出令人瞩目的性能,甚至超过了专门的压缩算法。3.将LLMs从压缩的角度看待为数据压缩器,为评估模型性能和规模提供了新的洞察,对模型的大小和性能之间的关系提供了重要见解。站长网2023-09-26 10:32:040000真人版“奇迹暖暖”?谷歌阿里竞相布局的AI试衣有何商机?
618开始了,你可能加购了很多夏季新衣,想趁优惠激情下单,但一想到每件都要试穿,不合适的还要退货邮寄,其繁琐程度又让你望而却步。“要是有人能帮我试穿衣服就好了。”基于这样的消费心声,多款AI虚拟试衣产品相继上线。站长网2024-05-24 21:14:290000