新突破!Adobe研究人员在5秒内将2D图像转化为3D模型
**划重点:**
- 通过大规模训练的AI模型,Adobe研究人员成功将单一2D图像转化为高质量3D模型,仅需5秒。
- 这一突破性技术在游戏、动画、工业设计、增强现实和虚拟现实等领域具有广泛应用前景。
- 该模型的能力有望改变工业设计、娱乐和用户生成内容领域,为3D建模带来革命性变化。
Adobe研究人员与澳大利亚国立大学的团队合作,成功开发了一种突破性的人工智能(AI)模型,能够在短短5秒内将单一2D图像转化为高质量的3D模型。
这一突破性技术在他们的研究论文《LRM:单一图像到3D的大型重建模型》中有详细介绍,有望彻底改变游戏、动画、工业设计、增强现实(AR)和虚拟现实(VR)等领域。
研究人员表示,他们的目标是从一张任意对象的2D图像中迅速创建一个3D形状。这一技术有着广泛的应用前景,对于工业设计、动画、游戏以及AR/VR等领域都具有巨大的潜力。此前的方法通常是针对特定类别的小型数据集进行训练,而这一模型采用了高度可扩展的基于变压器的神经网络架构,拥有超过5亿个参数,并在端到端的方式上训练,从输入图像直接预测神经辐射场(NeRF)。
研究人员强调,这一高容量模型和大规模训练数据的结合使他们的模型具有高度通用性,可以从各种测试输入中生成高质量的3D重建,包括从真实世界野外捕捉的图像以及来自生成模型的图像。
研究中的主要作者Yicong Hong表示,LRM代表了单一图像3D重建的一项突破。他指出,LRM是首个大规模3D重建模型,包含超过5亿个可学习参数,经过训练的数据包括各种类别的约100万个3D形状和视频数据。实验结果显示,LRM可以从真实世界的图像以及由AI生成模型(如DALL-E和Stable Diffusion)创建的图像中重建高保真的3D模型,同时保留复杂的纹理,如木纹。
这一技术有望在多个领域产生深远影响,从工业设计到娱乐和游戏。在视频游戏或动画制作中,它可以简化创建3D模型的流程,降低时间和资源开支。在工业设计领域,该模型可以通过从2D草图中创建准确的3D模型,加快原型制作的过程。在AR/VR领域,LRM可以通过实时生成详细的3D环境,提升用户体验。
此外,LRM的能力在处理野外捕捉的图像方面具有潜力,为用户生成内容和3D建模的民主化开辟了新的可能性。用户有望从使用智能手机拍摄的照片中创建高质量的3D模型,从而开辟了创意和商业机会。
尽管有着令人兴奋的前景,研究人员也承认LRM存在一些限制,如处理遮挡区域的模糊纹理生成。但他们表示,这项工作展示了基于大规模数据集训练的大型变压器模型具有学习通用的3D重建能力的潜力。
项目网址:https://yiconghong.me/LRM/
李彦宏:创新能力买不来 未来要有意识地培养「AI 原生应用」的思维方式和理念
百度创始人、董事长兼首席执行官李彦宏五四青年节在内部「新使命六周年暨百度骄傲颁奖典礼」上发表讲话,系统谈到了百度近十年来在AI上的重大战略判断与布局、文心一言的最新进展、大模型竞争的关键之战等。站长网2023-05-05 09:59:550001北交大开源交通大模型 TransGPT・致远
北京交通大学联合中国计算机学会智慧交通分会和足智多模公司等机构,正式发布了国内首个综合交通大模型——TransGPT・致远,并对其进行了开源。“致远”取意“行致远、心致远”,是一个基于Transformer架构的文本大模型、多模态大模型和实时场景数据调用模式,形成以综合交通大模型为基础设施、辅以交通细分行业应用的架构。站长网2023-07-28 10:59:2700002000万粉丝卖不动货,问题出在哪?
又一位剧情号达人下场带货了。在抖音,粉丝数量1818.9万的剧情号大V“张若宇”,于4月21日开启了直播首秀。时至今日已经直播了16场。不过,据新抖数据显示,近30天内张若宇的带货总销量,仅为75-100万。平均一场仅5万左右的销售额,和其近2000万的粉丝数量比起来,并不可观,甚至还可以说有些寒碜。直播首秀站长网2023-05-29 09:08:340000券商、基金开卷抖音,服务商怎么看?
2013年,支付宝和天弘基金推出产品“余额宝”后,一跃成为基金界耀眼夺目的“老大”。一众基金公司希望这样的奇迹能在和抖音的合作中重新上演,半年来从未停止“观望入局”,甚至同行之间连夜分享学习抖音财富小视频课程,就是害怕错失机遇。那就先把抖音账号做起来。站长网2023-09-10 10:33:190000昆仑万维旗下Opera生成式AI服务海外用户数突破100万
昆仑万维旗下Opera宣布,生成式AI服务Aria海外用户数突破100万2023年5月24日,Opera正式推出生成式AI助理Aria,Aria充当了用户的AI助理的角色,能够为用户提供高效的信息查找、文本/代码生成等AI生成式服务。站长网2023-08-07 08:30:050000