IntrinsicAnything:调整图片光照 保持物体材质
站长网2024-04-26 12:13:021阅
划重点:
⭐️ 通过生成模型先学习材料,规范优化过程
⭐️ 模型基于漫反射和镜面反射着色项,提高准确性
⭐️ 采用从粗到精的训练策略,实现稳定且准确的材质回收结果
在未知静态照明条件下拍摄的姿势图像中恢复物体材质是一项挑战性任务。近期的研究通过神经网络表示材料,并通过基于物理的渲染优化模型参数来解决这一问题。然而,由于物体几何形状、材质和环境光照之间的耦合关系,导致逆渲染过程存在固有的模糊性,因此先前的方法难以获得准确结果。

为了克服这个问题,研究者提出了一种关键思想,即先通过生成模型学习材料,以规范优化过程。他们发现一般渲染方程可分为漫反射和镜面反射着色项,从而将材质先验转化为反照率和镜面反射的扩散模型。这种设计使得模型能够利用丰富的3D 对象数据进行训练,并有效解决从 RGB 图像中恢复多种材质表示时的歧义性。

此外,研究团队还开发了一种从粗到精的训练策略,利用估计的材料指导扩散模型产生多视图一致的约束,从而获得更稳定和准确的结果。通过广泛实验验证,他们的方法在材料回收方面取得了最先进的性能,为物体材质恢复领域带来了新的突破。

产品特色功能亮点:
- 生成模型学习材料,规范优化过程
- 模型基于漫反射和镜面反射着色项,提高准确性
- 采用从粗到精的训练策略,实现稳定且准确的材质回收结果
项目入口:https://top.aibase.com/tool/intrinsicanything
0001
评论列表
共(0)条相关推荐
腾讯大模型,有啥不一样?
整个上半年,互联网大厂们轰轰烈烈地追赶AI大模型浪潮时,腾讯一直对外保持着低调姿态。就在外界以为腾讯在憋大招时,它带着行业大模型的最新动态来了。站长网2023-06-22 01:57:210000CoDA开源:可在3D场景中检测和命名新物体
CoDA是一个端到端的开放词汇3D目标检测框架,旨在同时实现新对象的定位和分类。它主要包括两大特点:1.3D新对象发现策略:利用3D几何先验和2D语义先验联合发现场景中的新对象,生成新对象的伪标签。2.基于发现的跨模态对齐:将3D点云特征与图像/文本特征对齐,利用已有类别和不断发现的新对象类别进行对齐,使对齐迭代增强。站长网2023-10-08 11:53:330000无网也能双向通话!小米15即将升级星辰无网通
快科技12月2日消息,小米澎湃OS官微预告,小米15系列星辰无网通功能将在本月推送。据悉,星辰无网通是小米星辰通信系统”内的功能之一,利用该无网通信功能,可以支持在最大半径3.5公里内的双向通话(不同环境下通话距离存在差异)。0000金融监管部门提示:谨防“AI换脸”等新型诈骗手段
国家金融监督管理总局北京监管局7日发布风险提示,提醒消费者近期重点防范三种新型欺诈手段,守护家人亲朋财产安全。骗局一:校园贷款连环套,又欠钱来又被骗站长网2023-10-09 10:41:040000OpenAI首席执行官奥特曼称人类级别的AI即将出现
站长之家(ChinaZ.com)1月17日消息:近日,在瑞士达沃斯世界经济论坛上,OpenAI首席执行官萨姆·奥特曼表示,对于人工智能有一天将变得非常强大,对世界产生巨大重塑和破坏的担忧是夸大其词的。站长网2024-01-17 10:56:440000