量子位 (微信公众号)T2·78 分
上海 AI Lab 开源 InfiniHand:单模型流式重建世界坐标系手部动作,速度超 HaWoR 两倍
原标题:最新ego视角手部重建框架,单模型输出世界坐标系下手部运动
- 架构创新:采用单一模型联合估计相机轨迹与手部姿态,替代传统多系统级联,减少误差传递并降低计算协调成本。
- 性能突破:推理速度达到 11.19 FPS,是现有主流方法 HaWoR 的两倍以上,满足大规模视频处理对实时性的需求。
- 数据工程:整合 ARCTIC、HOT3D 等 9 个数据集共约 5000 小时视频,通过统一坐标定义与清洗流程解决标注不一致问题。