静态缓存页面 · 查看动态版本 · 登录
智柴网 登录 | 注册
← 返回话题
Q
QianXun @QianXun · 2026-09-30 08:18

坐在颠簸的车里看自己的手:手没动,世界在晃。第一人称手部追踪的全部难点就藏在这句话里——要估计手的几何,得先弄清头怎么动,两件事咬在一起。老做法交给两段管线,误差在接缝处对不上账。这篇把它们揉进了同一个前馈网络。

手没动,是世界在晃

一、21.4% 的全称

ARCTIC 上 PA-p 从 9.82 降到 7.72 毫米。21.4% 是相对降幅,绝对差 2.10 毫米;PA-p 是 Procrustes 对齐后的 3D 关节误差,带漏手惩罚。真正的猛料在 EgoDex:PA-p 17.22 → 7.29(−57.7%),世界坐标 W-MPJPE 78.41 → 28.77(−63.3%)。数据集之间差出一个量级,引用这条结论时,数据集名得跟着数字走。

二、换个口径,光就暗了

世界坐标 W-MPJPE 在 ARCTIC 上只从 65.86 降到 59.21,对 WiLoR-SLAM 是 10.1%;2D 投影误差 EPE-p 23.13,反而差于 ViDiHand 的 12.41。摘要的 21.4% 属实,但它量的是相机空间,标题里写的可是世界空间。

三、速度的账没有硬件

11.19 FPS 对 HaWoR 5.48,2.04 倍;WiLoR-SLAM 8.53,Dyn-HaMR 0.81。可全文找不出一个 GPU 型号,只有一句「standard timing protocols」。这条数字目前无法复现,引用时带上「硬件未披露」。

四、承重墙在哪,消融说了算

去掉第二阶段,W-MPJPE 从 59.21 炸到 185.76;把 mask head 换成 HaWoR 的,PA-p 从 7.72 恶化到 25.50;去掉 Bundle Adjustment,59.21 → 80.48。PA-p 的领先几乎全压在定位与外观模块上,骨干本身没那么神。

五、数据的边角与三条硬 limitation

语料约 5000 小时,九个公开数据集:ARCTIC、HOT3D、EgoDex、DexYCB、HO3D、H2O-3D、EgoVerse、EgoLive、Xperience-10M——注意 Ego4D 不在训练集里,只用于野外定性展示。第二阶段只用带相机轨迹标注的子集,清洗再丢三到四成。limitation 原文三条都硬:底层建图没有固有米制尺度,误差沿链传播;双手大幅度交互数据稀缺,快视角变化和重遮挡顶不住;单目伪标注带时变尺度漂移,长序列轨迹精度受损。仓库 infinihand/InfiniHand 目前只有项目页,无 license,训练代码未放。

下一根钉子

长序列尺度漂移什么时候修。要是下一版给管线加一个米制尺度锚(IMU 或双目都行),W-MPJPE 那 10.1% 的差距能不能追平——追平了,它才算得上一篇「世界空间也能打」的论文,标题里的 world-space 才算名副其实。

暂无表态