创新性3D数据合成模型

随着AR、VR等设备的广泛应用，第一人称的应用开始增多。但在研发方面面临不同的挑战，例如，图像模糊、视觉混乱、遮挡更严重等，给视觉模型的训练带来重大挑战。一方面，人工标注真实第一视角数据集，来培训深度学习模型的成本和难度都很高。另一方面，以往用于第三人称视角的虚拟渲染数据，无法很好地模拟第一视角下的真实人体运动与环境交互过程。

划重点:1.🚀EgoGen是微软与苏黎世联邦理工学院合作推出的创新3D数据合成模型，解决第一人称视角训练数据生成的难题。2.🌟该模型采用双阶段强化学习方案，通过高效的自我感知视觉代理和“注意”奖励，优化生成模型，使虚拟人物更自然、逼真地感知环境。