PersistGS用可微物理实现4D高斯泼溅物体永久性

PersistGS发布：用可微物理解决4D高斯泼溅中的物体永久性难题

日前，一项名为PersistGS的新技术正式亮相，它专门解决动态3D高斯泼溅（3DGS）重建中的物体“消失”问题。当场景里一个运动物体被其他东西完全挡住，训练用的多相机视频就收不到它的任何图像信号了——这时候，代表该物体的高斯体就收不到梯度更新信号，质量会逐渐退化，直至“人间蒸发”。PersistGS正是为此而来，它通过引入可微物理机制，试图恢复并维持这些物体的永久性表现。这其实挺让人好奇：凭什么现实世界中明明存在的物体，在三维重建里就得凭空消失？

问题出在哪儿？视觉监督的盲区

咱们知道，传统的动态3DGS方法靠多相机视频里的光度信息来训练模型。物体一直在动、场景一直在变，只要它出现在任何一个相机视野里，训练就能正常进行。但一旦它被完全遮挡，光度监督就失效了——高斯体收不到任何误差信号，没法修正自己的形状或位置，慢慢地就散架了。现有的解决方案大都依赖学习到的生成式先验，也就是用“画”的方式把缺失部分补上。可这种补法只追求视觉上“像真的”，至于物理上对不对——物体是不是应该还待在那里、位置是否合理——其实没人管。没错，这就埋下了不稳定的隐患。

新方法怎么破局？可微物理来护体

PersistGS的做法很直接：把物理规律嵌入到训练过程中。它不再单纯依靠视觉信号，而是让高斯体遵循一套可微的物理模拟规则。简单说，就是给每个物体一个物理“记忆”——即使视觉上消失了，物理模型也会告诉它“你还在那，别乱动”。这样一来，物体被遮挡时，高斯体不会立刻崩坏，而是依据物理规律保持自身形态。技术细节上，PersistGS将物理模拟器与3DGS的渲染管线结合在一起做联合优化，让物理反馈和光度反馈同时生效。这算是给4D动态重建上了一道“双保险”。

具体实现：两步走，把逻辑画出来

1. 物理建模：为场景中每个运动物体建立可微的物理状态（位置、速度、形变参数等），让高斯体在时间维度上“都知道自己该去哪”。
2. 联合优化：训练时，既有来自视频的光度损失，也有来自物理模拟的约束损失。被遮挡时，物理损失扛起监督大旗，防止高斯退化。

本质上，PersistGS把原本“看不见就摆烂”的视觉重建，变成了“看不见也得按物理规律撑住”的稳健过程。这样的思路，是不是比单纯补画面靠谱多了？

应用前景：动态场景从此更“实在”

这项技术对动态场景的长期稳定重建意义不小。比如体育赛事中运动员被遮挡、自动驾驶中车辆被前车挡住、电影特效中角色穿行于复杂背景——PersistGS都能让被遮住的物体继续保持物理真实性，而不是像鬼影一样飘散或扭曲。目前这项成果已以预印本形式公开（arXiv:2606.03479v1），感兴趣的朋友可以进一步查阅。未来，更复杂、更持久的4D场景重建，或许真的不再是梦了。凭什么一个真实存在的物体会在数字世界里消失？PersistGS给出了它的答案。