您的位置首页 >要闻 > 人工智能 >

诺亦腾机器人开放 HiPHI-Hand 高精度手部数据集,面向具身 AI 与手部重建研究

诺亦腾机器人正式对外开放 HiPHI-Hand 高精度手部动捕数据集,这套数据集具备亚毫米级真值精度,已经作为训练素材供给英伟达 EgoHand 单目手部重建模型使用,放在 Hugging Face 平台公开获取,主要用来解决第一视角视觉里手部遮挡、手部三维姿态标注难的痛点,很多做具身智能、机器人手眼协同、单目手部重建的研究者很难拿到高质量同步真值,普通 RGB 视频没有精准关节坐标,手动标注成本极高,而 HiPHI-Hand 把第一视角鱼眼视频和光学动捕采集的手部三维关节数据做了严格时间对齐,就算画面里手被物体挡住,光学动捕依然可以输出可靠的真值标签,直接拿来训练、验证手部重建模型、机器人操作策略。整套数据一共 11 小时同步素材,包含双鱼眼第一视角视频、IMU 相机外参、光学动捕输出的手部 3D 关节坐标,属于 HiPHI 系列数据集的手部专项版本,和之前发布的 HiPHI 全身交互数据集配套使用;它的许可协议区分科研和商用,科研、教育、评估场景免费开放,商用场景需要单独向诺亦腾机器人申请授权,下载之后可以直接用来做模型训练、基准测试、算法对比,适配 Isaac Sim、各类 VLA 视觉语言动作模型、手部姿态估计算法。获取方式就是前往 Hugging Face 诺亦腾机器人组织主页找到 HiPHI-Hand 项目,下载配套元数据、视频、真值标注文件,阅读文档里的同步对齐规则,把视频帧和手部关节坐标一一映射,搭建训练或者评估流程。

一、HiPHI-Hand 数据集核心信息

项目详情
数据集名称HiPHI-Hand
发布平台Hugging Face
数据总量11 小时同步采集数据
核心精度亚毫米级手部三维真值
数据组成双鱼眼第一视角视频、头显 IMU 相机外参、光学动捕手部 3D 关节坐标
配套模型英伟达 EgoHand(单目手部重建)
许可协议ModalityNet Open Research License v1.0,科研免费,商用单独授权

二、采集方案说明

  • 采集设备:SOL 第一视角采集设备搭配光学动捕系统,手指布置微型标记点
  • 同步逻辑:视频帧、IMU、光学动捕时间戳对齐,保证图像和手部坐标一一对应
  • 优势:解决第一视角遮挡场景下缺少真值标注的难题,图像看不到手也有真值
  • 定位:HiPHI 系列的手部专项子集,可和 HiPHI 全身物体交互数据集联合使用

三、适合的研究方向

  1. 第一视角单目 / 多目手部三维重建、形状估计
  2. 机器人手眼协同、抓取操作、具身学习模型训练
  3. 视觉语言动作模型(VLA)的手部交互数据增强
  4. 遮挡场景下手部追踪算法的基准测试
  5. 仿真域和真实世界手部动作迁移研究

四、获取与使用步骤

  1. 打开 Hugging Face 平台,搜索 Noitom Robotics 组织下的 HiPHI-Hand 项目
  2. 阅读数据集说明文档与许可协议,确认自己属于科研还是商用场景
  3. 下载视频素材、标注真值、相机标定参数文件
  4. 使用时间戳做帧和手部关节数据的同步映射
  5. 加载数据用于模型训练、算法对比或者基准评估

五、使用限制与注意事项

  • 科研、教学、算法评估可以免费使用;商用落地必须单独联系诺亦腾机器人申请授权
  • 数据集不包含实时动捕 SDK 接口,是离线标注数据集,不是实时数据流
  • 数据是第一人称人机交互场景,不适合直接拿来做工业固定视角手部追踪
  • 配套 EgoHand 模型使用 OpenMDW 许可,和 HiPHI-Hand 数据集许可相互独立

【相关 FAQ】

问题 1:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据,精度是什么级别?

回答 1:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据是亚毫米级精度,由光学动捕系统采集手部关节三维真值,哪怕第一视角画面手部被遮挡,依然可以输出可靠的手部坐标标签。

问题 2:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据商用可以直接免费使用吗?

回答 2:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据遵循 ModalityNet Open Research License v1.0,科研、教育、评估场景免费,商用场景需要单独向诺亦腾机器人申请授权,不能直接免费商用。

问题 3:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据包含哪些内容?

回答 3:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据包含 11 小时同步双鱼眼第一视角视频、头显 IMU 相机外参、光学动捕得到的手部三维关节坐标,视频和动捕真值做了时间戳对齐。

问题 4:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据可以用来做机器人哪些方向?

回答 4:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据适合第一视角手部重建、机器人手眼抓取、具身学习、VLA 视觉语言动作模型训练、遮挡场景手部追踪算法测试。

问题 5:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据在哪里下载?

回答 5:诺亦腾机器人开放的 HiPHI-Hand 高精度手部数据在 Hugging Face 平台的 Noitom Robotics 组织主页发布,直接搜索 HiPHI-Hand 项目即可下载。

【参考资料】

[2026-11-10](诺亦腾机器人携手英伟达亮相 CoRL,HiPHI-Hand 手部数据正式开放)亿欧

[2026-11-10](诺亦腾机器人开放 HiPHI-Hand,支持英伟达 EgoHand 训练)界面新闻

[2026-11-10](诺亦腾机器人开放 HiPHI-Hand 手部动捕数据集,已用于训练英伟达 EgoHand)新浪财经

[2026-11-09](Noitom Robotics Releases HiPHI-Hand, Precision Hand Capture Data Used to Train NVIDIA EgoHand)TMCnet

【免责声明】

本文为诺亦腾机器人 HiPHI-Hand 高精度手部开放数据集资讯整理,不构成商用授权、项目落地承诺;数据集许可、内容范围、下载入口以 Hugging Face 项目页及诺亦腾机器人官方最新说明为准;EgoHand 模型和 HiPHI-Hand 数据集为独立许可,使用时需分别遵守对应协议;文中引用内容版权归属对应发布平台与原作者,如有异议可联系处理。