南洋理工开源创新性文生视频模型FreeInit

要点:1、创新性文生视频模型FreeInit通过重新初始化噪声，改进时间的一致性。2、研究人员发现视频扩散模型的推理初始化噪声中低频信息很难被完全移除。3、FreeInit通过多次迭代重复采样优化过程，提升低频信息质量，改善生成视频质量。南洋理工大学S实验室的研究人员开源了一种创新性文生视频模型，名为FreeInit。他们发现视频扩散模型在生成视频时存在时间一致性不足和不自然的动态效果。