GEAR 把估计几何用作历史图像的地址,而把外观留在逐帧特征里。完整推理代码尚待发布,现阶段可先复现对应关系与遮挡过滤,观察几何错误怎样进入记忆读取。
在完整模型发布前,可从公开或自有的静态场景 RGB-D 序列开始,只实现逐帧局部投影、图像块对应缓存和可见性过滤。RGB-D 指同时具有彩色图像与深度的记录;它能提供比单目估计更明确的几何参照。用相同相机路径比较不筛选历史、只做几何对应、再加入遮挡过滤三种读取方式,记录匹配到错误表面和遗漏可见内容的情况。
随后有控制地加入深度偏差或遮挡变化,观察错误是局限在当前读取,还是通过持续更新的可见性状态扩散。这里提出的是局部机制实验,不等于视频质量复现。等官方代码与检查点可得,再对齐其数据、训练退化与生成设置;否则无法把前端改进归因为最终视频更好。