同款智能手表价格相差110元 每周一去京东APP扣“1”线出行：五一打车出行呼叫量同比增长33.87%
Sora视频生成器发布后不久，就被网友发现存在物理交互的bug，例如模型对物理世界的理解不足，导致小狗走路时前腿出现不自然的交错问题。为了解决这一问题，提升视频生成的真实感，来自MIT、斯坦福大学、哥伦比亚大学和康奈尔大学的研究人员联合提出了一种基于物理的方法模型PhysDreamer。
PhysDreamer通过生成运动中物体的可信视频，然后优化材料场E(x)以匹配合成运动。给定一个表示为3D高斯的对象，首先从某个视点进行渲染，然后使用图像到视频生成模型来生成运动中物体的参考视频。接着，使用可微分材质点方法(MPM)和可微分渲染，对空间变化的材质场和初始速度场进行优化，旨在最小化渲染视频和参考视频之间的差异。
复制本文链接文章为作者独立观点不代表优设网立场，未经允许不得转载。
