Reconstruction 实验设置¶
Reconstruction 从单目视频中恢复人体动作、物体位姿、物体关节运动和尺度。正文主实验使用 D3D-HOI; ARCTIC RGB 只有在全部方法能够公平比较时才加入。
输入与输出¶
输入是视频 (V={I_t}_{t=1}^{T}) 和 articulated asset \(\mathcal A\)。输出为
其中 \(H_t\) 是人体,\(T_t^o\) 是物体根节点位姿,\(q_t\) 是关节状态,\(s\) 是物体尺度。
正式实验¶
| 数据 | 比较方法 | 作用 |
|---|---|---|
| D3D-HOI | D3D-HOI official、3DADN(取得逐视频预测并统一重评后)、Ours | 正文 baseline/proposed comparison |
| ARCTIC RGB | ArcticNet-SF、HOPformer、Ours | 条件具备时加入正文 |
| Ours ablation | Ours w/o HOI Align. vs Ours | Table 4 / appendix;不作为 baseline row |
| VideoGen generated video | Ours w/o HOI Align. vs Ours | supporting appendix;按 asset source 分层 |
D3D-HOI 共 256 个样本,包括 239 个 revolute 样本和 17 个 prismatic 样本。D3D-HOI 和 Ours 使用官方
GT-CAD protocol;paired ablation 只关闭 HOI Alignment。D3D-HOI 的 256 条作者发布结果已经在 target,且已与官方
optimized_results.zip 逐文件哈希校验一致;我们的复现另作 author-fidelity audit。3DADN 的候选评测域最多是
239 个 revolute 视频,但 3DHOI 适配使用 GT motion annotation 切片,且 motion state 只覆盖选中帧;
逐视频预测尚未找到,取得并统一重评、报告 video/frame coverage 前不填正文。
3DHOI/CubeOPT 的 239 条本地结果是我们的作者代码复现,只作为可选 appendix control。
ARCTIC RGB 必须保证 Ours、ArcticNet-SF 和 HOPformer 使用相同视角、数据划分和官方评测程序。任一方法 无法完成时,整组 ARCTIC 重建结果移到附录或删除。
所有方法保持一致的内容¶
- 使用相同的视频、帧范围、物体模型和评测程序;
- 使用相同的输入权限,例如 GT CAD、mask 或 depth;
- 使用相同的优化预算和模型选择规则;
- 不支持的输出写
–,失败样本仍计入总数; - 不跨数据集平均指标。
比较方法的来源与当前状态见 Reconstruction 比较方法,指标见 Reconstruction 指标,运行方法见 Project Guide。