2分钟建模!AI框架GauHuman:实现高质量3D人体快速重建和实时渲染
**划重点:**
- 🌐 南洋理工大学与商汤科技的S-Lab团队推出GauHuman,基于Gaussian Splatting实现高质量3D人体快速重建和实时渲染。
- ⚡ GauHuman在1~2分钟内完成建模,每秒渲染高达189帧,超越了现有方案,应用前景广泛,涵盖游戏、电影、虚拟现实等领域。
- 🚀 通过SMPL参数和神经网络,GauHuman有效处理单目人体视频,快速生成高质量3D数字人,开创了3D人体建模新局面。
南洋理工大学与商汤科技的S-Lab团队近日发布了一项令人振奋的研究成果,推出了基于Gaussian Splatting的高效3D人体建模框架,被命名为GauHuman。该框架在快速重建和实时渲染方面取得了显著的突破,为数字领域的人体建模提供了高效解决方案。
GauHuman的主要特点之一是其在短时间内完成3D人体建模的能力。通过利用Gaussian Splatting技术,该框架仅需1到2分钟即可完成对单目人体视频的建模,这一速度远远领先于现有的方案。不仅如此,GauHuman还实现了高达189帧每秒的实时渲染,为用户提供更加流畅和逼真的体验。
这一框架的应用前景也非常广泛,覆盖了游戏、电影制作、虚拟现实等多个领域。用户只需提供一段单目人体视频以及相应的相机参数和人体动作体形参数(SMPL),即可在短时间内完成对3D数字人的高质量建模。这使得GauHuman在数字创意领域具有巨大的潜力,为创作者提供了更灵活、高效的工具。
GauHuman的建模框架基于Gaussian Splatting,并受到了之前人体神经辐射场(Human NeRF)的启发。通过对标准空间下的3D人体进行建模,再利用线性蒙皮算法(Linear Blend Skinning,LBS)将其转换到目标空间,GauHuman有效地解决了传统方法中的一些难题。在优化算法方面,GauHuman通过3D高斯球的初始化、分裂/克隆/合并操作以及剪枝等手段,进一步提高了建模效率和质量。
在实验中,GauHuman在ZJU_MoCap和MonoCap两个单目人体数据集上进行了比较,与多个先进的3D人体重建方法相比,包括NB、AN、AS、HumanNeRF等,GauHuman在PSNR、SSIM和LPIPS指标上表现出色,验证了其在性能上的卓越。
研究团队表示,虽然GauHuman已经取得了显著的成果,但仍存在一些待解决的问题,如如何从3D高斯中提取人体mesh以及从单目视频中恢复3D人体的细节等。不过,他们对GauHuman的未来发展充满信心,同时已经将代码完全开源,鼓励广大开发者共同参与,共同推动这一领域的研究和创新。
**参考链接:**
[GauHuman论文]https://arxiv.org/abs/2312.02973
[项目主页]https://top.aibase.com/tool/gauhuman
[代码开源]https://github.com/skhu101/GauHuman
拿下全球第一!报告:华为手机今年Q1折叠屏市场超越三星
快科技3月18日消息,华为手机又拿个第一,而且是全球性质的。机构DSCC给出的数据显示,2023年第四季度全球折叠屏手机市场中,销量最高的10款手机中,三星占4款,荣耀和OPPO各占2款,华为和小米各占1款。站长网2024-03-18 16:45:150000撕掉“直男天堂”标签圈粉女性,迪卡侬是如何逆袭的?
过去,迪卡侬总被称之为“直男天堂”,店内清一色的“黑白灰”色衣服,充斥着浓浓工业风的装修风格,粗糙的商品货架,都与“都市丽人”毫不沾边。最近,迪卡侬的社交热度有所上涨,其中“迪卡侬女孩”“迪卡侬穿搭”等话题引起广泛讨论。而在小红书上,有关迪卡侬的笔记数量达到了10万,各种穿搭以及探店内容层出不穷。从最初的“直男天堂”到如今成功圈粉年轻女性群体,迪卡侬是如何逆袭的?站长网2023-08-31 18:18:050001在Web3里「养」AI男友 链游《HIM》能攻略女玩家吗?
霸总、甜宠,虐恋、复仇,每集不到5分钟的各种爽剧,让观众直呼“狗血、土味又上头”。2023年,这类主打节奏快、反转多的短剧在短视频平台上创造出一个200亿元的内容市场,其中有一半内容主打女频。0000Midjourney V6版本预计今年发布 将实现质量飞跃
文章概要:1.MidjourneyCEODavidHolz承诺V6版本将带来更好的文本理解和图像生成,预计今年内发布。2.Midjourney计划分两个阶段推出Web版本,首先是更新的网站,然后是带有图像生成和社交功能的版本。3.Midjourney的路线图还包括3D和视频生成,Holz对3D生成特别乐观,认为它可以改善视频游戏图形。站长网2023-09-21 17:52:160000实测学而思MathGPT大模型:中小学数学解题正确率有望在全球范围内创造新 SOTA
国内首个数学大模型MathGPT开放内测了,不上手试试怎么行?第一印象上,最明显的就是:啪的一下,很快啊~题目识别到对话框,结果不光答案准确,还就给出了具体的公式步骤、详细解析。并且支持公式输入和修改。这着实是数理爱好者福音了!要知道市面上GPT-4在内的通用大模型,都无法实现这一点。站长网2023-08-30 18:11:330000