南洋理工发布提高AI视频生成内容一致性方法FreeInit

要点:FreeInit方法提升视频扩散模型生成的时空一致性。通过发现噪声初始化在视频扩散模型中存在的隐含训练-推理差距，提出了FreeInit，无需额外训练，不引入可学习参数。FreeInit通过迭代优化推理初始噪声的时空低频组件，弥补训练和推理之间的初始化差距，显著提高生成结果的时空一致性。