腾讯推新技术Paint3D 给3D模型生成高清纹理
要点:
腾讯推出的技术 Paint3D 能够根据文本或图像输入,在不具有内嵌光照信息的3D模型上生成高分辨率、无光照的多样化纹理贴图。
Paint3D 利用两阶段纹理生成框架,首先通过预训练2D图像生成模型获取输入的引导信息,然后在UV纹理空间上训练无光照扩散模型,生成无光照纹理,提升3D模型纹理生成效果。
通过实验,Paint3D 在生成多样化纹理贴图方面表现显著,几乎在所有样本上达到更好的效果,成为唯一一个能生成无内嵌光照纹理的算法。
近日,腾讯宣布推出一项名为 Paint3D 的技术,该技术在解决了生成没有内嵌光照信息的高质量纹理的挑战后,成为自动化纹理贴图生成领域的重大进展。
Paint3D 能够根据文本或图像输入,在无纹理的3D模型上生成高分辨率、无光照的多样化纹理贴图。这项技术的主要目标是使生成的纹理能够被重新照明或重新编辑,并直接应用于现有的渲染管线。
项目地址:https://paint3d.github.io/
Paint3D 的技术实现主要分为两个阶段:粗糙纹理生成和纹理细化。在粗糙阶段,通过预训练的2D图像生成模型获取输入的引导信息,然后将这些信息反投影到3D模型的表面上,生成初始纹理贴图。
在细化阶段,通过在UV空间中训练无光照扩散模型,解决粗糙纹理的光照阴影和纹理空洞问题,提升纹理贴图的视觉美感。这一框架的引入使得Paint3D在纹理生成方面表现出色,被评价为最好的纹理生成方法之一。
在实验中,Paint3D通过一系列的量化和定性实验证明了其在生成多样化纹理贴图方面的显著能力。通过评估FID得分和用户调研,实验结果显示Paint3D在纹理生成质量和符合输入条件方面都优于当前最佳的纹理生成算法。不仅如此,Paint3D还展示了多种输入条件引导的纹理贴图生成,包括文字描述和示例图像引导下的纹理生成。
Paint3D 的出现标志着自动化纹理贴图生成领域的重大进展。通过精确控制纹理贴图中的内容和风格,Paint3D 可以生成高质量、多样化的纹理贴图,从而显著推进3D对象纹理化的最先进技术。更为重要的是,Paint3D 生成的纹理贴图是没有内嵌光照阴影效果的,使得生成的纹理能够被重新照明或重新编辑,直接应用于现有的渲染管线,在艺术创作、数字媒体制作和游戏内容创作等领域发挥重要作用。
强大的机器人视觉学习框架GROOT 帮助机器人更好地理解环境
要点:1.ImitationLearning(IL)在教授神经网络基础的视觉动作策略以执行复杂操作任务方面取得了成功。2.GROOT是一种独特的模仿学习技术,通过构建面向视觉的操纵任务的强策略,解决了在不断变化的背景、摄像机角度和对象引入等真实世界环境中的问题。站长网2023-10-30 11:20:410000天涯想靠“天涯神贴”翻身,可时代不会再给机会了
不同于猫扑和西祠胡同,已经走向没落的天涯似乎并不甘于就此退出互联网这个舞台。日前,就在因拖欠服务器费用而被关闭、“七天七夜重启天涯”的直播义卖活动并未取得成功后,天涯社区创始人、董事长邢明在接受采访时透露了天涯的“自救计划”。明年3月1日、也就是天涯社区25年司庆时,其将正式重启。010000一周带货上亿元,退货率100%?粉丝开始反向收割网红
一个原本仅50余万粉丝的财经博主(爱理财的小羊,以下简称“小羊”),在一周的时间里带货销售额上亿元,单场累计观看破百万人次,品类既有“带货万金油”一般的泡脚凤爪,也不乏售价超1.9万元的顶级尖货“整箱茅台”。看上去,这是不断刷新行业认知的直播造神故事的新篇,直到当事主播晒出后台的退款金额——接近100%的退货率。部分单日成交金额、和某阶段的累计退款金额图片来源于小羊个人抖音账号站长网2023-11-08 09:42:350000理想MEGA上市定档!理想2024春季发布会3月1日举行
站长之家(ChinaZ.com)2月19日消息:理想汽车官方宣布,其备受期待的2024春季发布会定于3月1日举行。届时,全新旗舰车型——理想MEGA以及新款L7/8/9等车型将正式上市,为消费者带来全新的驾驶体验。作为家庭科技旗舰MPV,理想MEGA被誉为“全家人的公路高铁”,其颠覆性的外观设计融合了水滴型车头、溜背式车顶,酷似高铁的“子弹头”造型,充满科幻感,仿佛来自未来。站长网2024-02-19 11:54:040000快播公司破产注销 创始人出狱后创办人工智能公司
凤凰网科技讯5月30日消息,天眼查App显示,近日,深圳市快播科技有限公司发生工商变更,企业经营状态由吊销未注销变更为注销,注销原因为宣告破产。该公司成立于2007年12月,法定代表人为于璐,注册资本1000万人民币,现由张克东、于璐、刘燕三人共同持股。对外投资信息显示,该公司持有北京快播科技有限公司、深圳市快玩科技有限公司等共6家公司股份,目前,6家公司均处于注销或吊销未注销状态。站长网2023-05-30 13:54:150000