浙大研究团队推新AI框架Human101:单视角视频构就能重建3D数字人
划重点:
🚀创新技术:Human101采用3D高斯散点技术,在仅一视角视频中以100秒训练时间生成动态、高保真的3D数字人体模型。🎮实时渲染:以100 FPS的速度进行渲染,相较于先前方法实现更快速的渲染速度,提供可比较或更优渲染质量。💻开源项目:Human101将代码和演示发布于GitHub,为实时交互应用和沉浸式虚拟现实体验提供了可行性。
在虚拟现实领域,快速创建定制虚拟人物并实现与其互动是一个普遍的应用场景。然而,以往的方法在快速重建高保真3D数字人体和实时渲染之间往往难以平衡。在这项研究中,提出了Human101,这是一个新颖的框架,能够在仅一视角视频中以100秒的训练时间生成高保真的动态3D人体模型,并以100 FPS的速度进行渲染。
与以往的基于NeRF的管道不同,Human101巧妙地应用了人体中心的前向高斯动画方法,通过调整3D高斯的参数来提高渲染速度。实验证明,该方法在每秒帧数上取得了显著的增长,同时提供可比较或更高的渲染质量。
为解决传统方法中存在的渲染速度慢和收敛速度慢的问题,Human101采用了更实用和改进的方法。首先,采用光栅化渲染管线,取代传统的体素渲染方法,以提高渲染速度。其次,选择了一种更易于优化的表示方法,即3D高斯,从而将优化时间降低到几分钟。
Human101特色包括:
创新地采用3D高斯散点技术,为详细和准确的人体建模提供了高效的明确表示。引入了规范人体初始化方法,显著提高了模型的收敛速度和视觉细节表达。提出了一种包括人体中心的前向高斯动画和样本点 反向脱皮体渲染的变形方法,与传统的耗时的逆向脱皮框架不同,实现了实时快速重建和渲染动态人体。在推断阶段,相较于先前的神经人体表示,实现了渲染速度的约10.8倍提升(对于512×512分辨率的图像为100 FPS),同时确保了可比较或更高的渲染质量和更高的图像分辨率。
Human101通过引入创新的技术和实用的方法,成功地解决了单视角视频中快速建模和实时渲染之间的矛盾,为实时交互应用和沉浸式虚拟现实体验提供了可行的解决方案。
项目体验网址:https://top.aibase.com/tool/human101
论文网址:https://arxiv.org/pdf/2312.15258.pdf
OpenAI 就其 DALL-E 3 人工智能生成图像检测工具发表犹豫立场
站长之家(ChinaZ.com)10月20日消息:OpenAI一直在就何时发布一款工具,用于确定一张图像是否由DALL-E3生成,OpenAI的生成式人工智能艺术模型,进行了广泛的「讨论和辩论」。但这家初创公司并不打算在短期内做出决定。站长网2023-10-20 09:11:150003抖音京东加码小时达,大厂打响即时零售争夺战
小时达已成为大厂角逐零售电商的重要一环。Tech星球独家获悉,抖音小时达的测试范围将进一步扩大,此前曾在深圳等试点城市提供小时达服务,近期,包括武汉、天津等城市的部分生鲜果蔬商家也能使用该服务,如本来鲜、叮咚买菜、物美超市已经开始在抖音内推出一小时果蔬配送服务,而且相关的配送商品已经上架至商家的抖音号内。这意味着,在抖音内,用户已经可以通过小时达服务,享受到买菜、超市购物等便利服务。站长网2023-04-26 15:14:290000北大最新研究称LK-99不是超导体!韩国作者爆料:一家科技巨头已入局研发
家人们,“顶流”室温超导又惊现反转。北京大学量子材料科学中心(ICQM)和国科大等单位发布的一篇论文表明:合成出来的与韩国团队论文主成分一致的LK-99材料,不具备超导性。可能只是一种铁磁材料。此外,X(原Twitter)博主AlexKaplan、马里兰大学凝聚态理论研究中心(CMTC)也关注到了这项研究,并且直接将LK-99室温超导判了“死刑”:站长网2023-08-08 17:52:520000OpenAI参投,法律科技公司Harvey获5.7亿元融资
划重点:1.🌐Harvey宣布获得8000万美元B轮融资,估值达7.15亿美元,由凯鹏华盈、红杉资本、OpenAI初创基金等投资。2.⚖️基于OpenAI的GPT-4系列模型,Harvey为律师提供深度定制ChatGPT助手,在法律领域取得优异成绩,全球大律所普华永道成为核心战略合作伙伴。0000推特将允许用户从eToro购买和出售股票和其他资产
推特将与eToro合作,让用户访问并交易股票、加密货币和其他金融资产。eToro透露,从当地时间周四晚些时候开始,推特应用程序将推出一项新功能,该功能允许用户查看更多金融工具的市场图表,并从eToro平台上买卖股票和其他资产。站长网2023-04-15 09:58:560000