TCP4D 模型只需一段单目视频,就能直接追踪机械臂末端在三维空间中的运动轨迹和夹爪开合状态,无需记录源机器人的状态数据。在 DROID 数据集上,它的轨迹误差仅为 7.60 毫米;仅用十次演示即可适配新的机器人机型。同一模型还能基于追踪结果生成未来动作轨迹,在 RoboTwin 评测中平均成功率达 69.19%。
正文完
TCP4D 模型只需一段单目视频,就能直接追踪机械臂末端在三维空间中的运动轨迹和夹爪开合状态,无需记录源机器人的状态数据。在 DROID 数据集上,它的轨迹误差仅为 7.60 毫米;仅用十次演示即可适配新的机器人机型。同一模型还能基于追踪结果生成未来动作轨迹,在 RoboTwin 评测中平均成功率达 69.19%。