# 物理模拟器在环视频生成 ## Abstract We propose a new approach for generating videos of p。.

近期扩散模型在视频生成中的进展取得了显著的视觉真实感，但仍然难以遵守重力、惯性和碰撞等基本物理定律。生成的物体在帧间常常表现出不一致的运动、不可信的动力学或违反物理约束，这限制了人工智能生成视频的真实性和可靠性。我们通过引入物理模拟器环路视频生成（PSIVG）来解决这一差距，这是一个将物理模拟器集成到视频扩散过程中的新颖框架。从预训练扩散模型生成的模板视频开始，PSIVG重构4D场景和前景物体网格，在物理模拟器内初始化它们，并生成物理一致的轨迹。这些模拟轨迹随后用于引导视频生成器生成时空物理相干的运动。为了进一步改进物体运动过程中的纹理一致性，我们提出了测试时纹理一致性优化（TTCO）技术，该技术基于模拟器的像素对应关系自适应调整文本和特征嵌入。综合实验表明，PSIVG生成的视频更好地遵循现实物理规律，同时保持视觉质量和多样性。项目页面：