南洋理工提出全新3D编辑算法GaussianEditor 2分钟内完成3D场景增删改
站长网2023-12-05 16:28:110阅
近年来,3D 编辑在游戏和虚拟现实领域崭露头角,但长时间和低可控性一直是问题。南洋理工大学联合清华和商汤提出的 GaussianEditor 算法成功解决了这些问题。该算法采用了高斯溅射(Gaussian Splatting)作为3D 表示,与传统 NeRF 方法相比,实现了更高的可扩展性和编辑效率。这一突破为3D 编辑领域注入了新活力。
论文地址:https://arxiv.org/abs/2311.14521
主页地址:https://buaacyw.github.io/gaussian-editor/
在解决高斯溅射编辑挑战的过程中,GaussianEditor 引入了高斯语义追踪,通过在训练过程中持续识别需要编辑的高斯点,实现了精确可控的编辑。与传统静态掩码不同,高斯语义追踪通过将2D 分割掩码投影到3D 高斯点上并为每个高斯点分配语义标签,确保在训练中动态更新,有效应对模型几何形状和外观的变化。
GaussianEditor 还创新性地采用了层次化高斯溅射(HGS)表示,通过对高斯点组织成不同世代,调节了编辑过程中的流动性。这种设计在保持老世代高斯点原始状态的同时,提高了新世代高斯点的适应性,模拟了神经网络缓冲功能。
此外,GaussianEditor 提供了专门的局部修复算法,能有效消除对象与场景交界处的伪影,实现了对3D 场景的高效增删操作。
总体而言,GaussianEditor 通过解决高斯溅射编辑的关键问题,实现了对3D 场景的灵活和快速编辑。其高斯语义追踪、层次化高斯溅射表示以及增删算法的创新,使其在视觉质量、量化指标、可控性和生成速度等方面均超越了之前的工作。这一算法的开发为3D 编辑领域带来了显著的进展,为未来的虚拟现实和游戏开发提供了有力的工具。
0000
评论列表
共(0)条相关推荐
GPT-5只会更笨!斯坦福莱斯研究警告,AI训AI超过5次,模型反噬,性能大减
用AI生成的数据训练AI,不会有魔法,只会被反噬。近日,莱斯大学和斯坦福团队发现,将AI生成的内容喂给模型,只会导致性能下降。研究人员对此给出一种解释,叫做「模型自噬障碍」(MAD)。论文地址:https://arxiv.org/abs/2307.01850研究发现在使用AI数据,经过第5次迭代训练后,模型就会患上MAD。66在合成数据上训练AI模型会逐渐放大伪影站长网2023-07-23 14:23:110000郭明錤:「没有迹象」表明苹果将在 2024 年推出生成式 AI 技术
站长之家(ChinaZ.com)8月3日消息:根据分析师郭明錤的说法,苹果的生成式人工智能技术进展明显落后于竞争对手,并且没有迹象显示该公司计划在明年推出人工智能服务。在Medium上的一篇新文章中,郭明錤解释了苹果即将发布的财报将如何影响苹果股票和供应链。由于在人工智能领域进展不足,该公司在财报电话会议上可能不会花太多时间讨论人工智能。站长网2023-08-03 10:41:330000沃尔玛利用人工智能确保圣诞礼品顺利送达
**划重点:**1.🚀沃尔玛投资巨资发展人工智能,通过生成式AI工具强化库存管理系统。2.🌐人工智能缩短交付时间,预测销售并根据天气事件及时调整库存,提高供应链效率。3.🎄利用AI技术,沃尔玛改进了节日购物体验,使客户更轻松,避免库存浪费。0000TESTA:加速理解长视频的新方法
TESTA是一种旨在通过组合相似帧和补丁来加速理解长视频的方法。这种方法的引入成功地降低了计算负荷,并提高了匹配段落到视频以及回答关于长视频的问题的性能。站长网2023-11-02 12:07:040000大众50亿雪中送炭,小鹏实质收益几何?
大众对小鹏增资50亿元,引来了市场的关注和掌声。但小鹏目前最缺的不是现金流,而是持续的造血能力。作为一家主机厂商,未来小鹏与大众合作推出的车型将成为自己的竞品;作为一家解决方案提供商,小鹏还将面临诸多竞争对手。历史上很多车企之间的合作最终滑向破裂,与巨头共舞,小鹏需要更加谨慎。0000