Meta AI 推出可重新调整光线的高保真头像生成方法 可用于制作动画生成新颖的表情
划重点:
1. 💡 Meta AI 研究团队提出了可重新调整光线的高保真头像生成方法,该方法能够捕捉面部表情的细节,并实时生成真实的头像。
2. 💡 该方法通过引入基于3D 高斯函数的几何模型和可学习的辐射转移外观模型,实现了对头像的动态生成和光线调整。
3. 💡 这种头像生成方法还可以根据表情、视线、观察角度和光线进行灵活控制,为用户提供交互式的使用体验。
在 Meta AI 的一项开创性研究中,研究人员成功解决了动态3D 头像的高保真重新调整光线的挑战。传统方法在实时应用中捕捉面部表情的细节常常需要进行改进,尤其是对于捕捉亚毫米级细节的要求。Meta AI 的研究团队针对这一挑战提出了 “可重新调整光线的高斯编码头像(Relightable Gaussian Codec Avatars)”,这一方法有望重新定义头像的逼真程度。
这项研究团队解决的核心问题是如何更清晰地捕捉动态面部序列中的亚毫米级细节,例如头发和毛孔。现有方法的局限性促使人们寻求一种能够在保持实时性的同时,高效地建模人类头部多样材料(包括眼睛、皮肤和头发)并容纳所有频率反射的创新解决方案。
现有的可重新调整光线头像方法一直面临着实时性和真实性之间的折衷。在实时应用中捕捉动态面部细节一直是一个持久的挑战。Meta AI 的研究团队认识到了这一差距,并提出了 “可重新调整光线的高斯编码头像” 作为一种革命性的解决方案。
Meta AI 的方法引入了基于3D 高斯函数的几何模型,提供了亚毫米级精度的准确性。这在捕捉动态面部序列方面是一个显著的进步,确保头像展示出逼真的细节,包括头发和毛孔的微妙之处。作为这种创新方法的关键组成部分,可学习的辐射转移外观模型构建了可重新调整光线的外观模型。
这些头像的亮点在于其全面的头像构建方法。以3D 高斯函数为参数的几何模型是头像的支撑,使得头像能够使用高斯扩散技术进行高效渲染。由可学习的辐射转移驱动的外观模型结合了漫反射球谐函数和镜面高斯函数,使得头像能够进行点光源和连续光照的实时重新调整。
除了这些技术方面,该方法引入了对表情、视线、观察角度和光线的可分离控制。通过利用潜在表情代码、视线信息和目标视角方向,可以实现头像的动态动画。这种控制水平是头像动画的重大进步,为用户提供了细腻而互动的使用体验。
这些头像不仅仅是理论上的进步,它们也提供了切实可行的结果。该方法允许对各个方面进行可分离的控制,通过头戴相机进行实时视频驱动动画的演示。这种能力创造了动态、互动的内容,实时视频输入可以无缝驱动头像。
Meta AI 的 “可重新调整光线的高斯编码头像” 标志着创新在解决复杂问题方面的巨大威力。通过将基于3D 高斯函数的几何模型与革命性的可学习辐射转移外观模型相结合,研究团队超越了现有方法的局限,为头像的逼真程度树立了新的标准。
论文网址:https://arxiv.org/abs/2312.03704
项目网址:https://shunsukesaito.github.io/rgca/
Box 通过 Microsoft 365 Copilot 集成扩展 AI 工作
安全云内容管理提供商Box今天继续推进其生成式AI工作,宣布与Microsoft365copilot进行新的集成。新的集成是Box使用genAI帮助企业用户更好地理解Box内容的价值并从中受益的努力的进一步扩展。早在5月份,该公司就宣布了BoxAI计划,该计划将genAI嵌入Box用户体验中,以查询和汇总数据。站长网2023-07-28 15:21:080000AI视野:文心一言支持生成数字分身;Bard推出图片生成功能;亚马逊开发AI购物助手Rufus;苹果将推生成式AI功能
欢迎来到【AI视野】栏目!这里是你每天探索人工智能世界的指南,每天我们为你呈现AI领域的热点内容,聚焦开发者,助你洞悉技术趋势、了解创新AI产品应用。新鲜AI产品点击了解:https://top.aibase.com/🤖📱💼AI应用百度文心一言APP支持一键生成专属数字分身可免费使用【AiBase提要:】⭐文心一言APP内测数字分身新功能站长网2024-02-02 15:43:530000阿里国际推出AI虚拟试衣工具,1分钟内搞定
划重点:-PicCopilot的AI虚拟试衣工具可以帮助服饰商家省去拍摄成本,将商品穿在模特身上生成模特图。-虚拟试衣功能支持上传上装和下装的图片,还能识别单件连身的服装,生成不同效果的展示图。-使用虚拟试衣功能,商家的平均成本控制在0.2-0.3元人民币以内。站长网2024-05-15 09:10:160000抖音电商推出商家扶持计划:加大算法研发投入 升级流量机制
抖音电商今日宣布推出其历史上规模最大的商家扶持计划,详细公布了九大扶持举措。这些措施旨在帮助商家降低成本、提升经营体验,并解决退货、价格战、广告投放等问题。具体措施包括免除佣金、退单推广费返还、降低运费险和保证金等成本控制措施。0000清博智能发布大模型“先问” 支持实时联网
站长之家(ChinaZ.com)6月12日消息:6月10日,清博智能发布实时联网大模型“先问”。据了解,该大模型基于2000亿开源数据集、百万级专业人工数据集,具有数据可溯源、实时同步、可视化分析、多参数版本特点,支持本地化部署。目前,“先问”还处在内测状态。据了解,“先问”大模型的出品方,北京清博智能科技有限公司2014年成立,是一家以大数据、人工智能为技术底盘的科技公司。站长网2023-06-12 16:57:340005