返回 Blog
第一视角任务数据5 分钟阅读智域基石研究团队

Ego Data 与观测级机器人数据有什么区别?

理解第一视角 Ego Data 与一般观测级机器人数据的差异,以及为什么二者仍需经过编译才能成为操作级数据。

两个术语描述的是不同维度

Ego Data 描述数据的视角和采集关系:证据来自操作者的行动视角。观测级数据描述数据在系统中的作用:它记录真实发生了什么。两类数据存在交集,但并不是同义词。

头戴设备拍摄的第一视角视频既是 Ego Data,也是观测级数据。固定相机记录属于观测级数据,但不是 Ego Data。包含第一视角视频、手部位姿、工具运动、力觉与结果的同步片段更加丰富,但在任务结构与物理因果被编译之前,它仍然是观测证据。

一般观测级数据保留什么

观测级机器人数据通常包括图像、视频、轨迹、日志、传感器信号、机器人状态与最终成功标签。它可用于感知、模仿学习、调试和回放。

它的主要限制并不是数量不足,而是任务含义通常隐含在连续记录中。模型或工程师仍需推断任务从哪里开始、哪个状态转移重要、接触何时改变可行动作空间、执行为什么失败,以及什么恢复动作让任务重新推进。

Ego Data 增加了什么

Ego Data 增加了以任务执行者为中心的视角。它能揭示操作者做出动作时看到了什么、视角与注意如何变化,以及手和工具与工作空间之间的关系。

面向物理 AI 的高质量 Ego Data 应包含:

  • 多视点第一视角视频;
  • 头部、手部与工具位姿;
  • 动作或运动轨迹;
  • 力觉、接触与状态信号;
  • 任务上下文、失败、恢复与结果;
  • 标定信息与统一任务时钟。

智域基石真实任务接口围绕这套同步证据包构建。

为什么 Ego Data 不会自动成为操作级数据

操作级数据围绕模型或智能体如何利用任务进行组织。它需要显式表达任务阶段、接触转移、物理约束、失败、恢复、质量与数据血缘。

同一段 Ego Data 可以被编译成多种资产:

  1. 用于策略训练的任务阶段序列;
  2. 用于物理推理的接触感知切片;
  3. 带有因果证据的失败案例;
  4. 用于回归验证的恢复案例;
  5. 包含成功标准和质量门控的评测资产。

数据编译完成从同步证据到可复用资产的转换。

三类数据的实用比较

问题观测级数据Ego Data操作级数据
发生了什么
操作者看到了什么不一定作为证据保留
接触如何改变任务通常隐含证据更完整显式结构
任务为什么失败通常只有标签有上下文因果案例
智能体能否查询任务阶段很少很少可以
质量与血缘是否版本化不稳定不稳定必须

应当组合使用,而不是二选一

真正的问题不是 Ego Data 是否替代观测级数据。Ego Data 是一种高价值的观测证据来源。工程目标是完整保留它,让物理数据编译器能够生成操作级数据,而不必猜测缺失的物理上下文。

继续阅读面向物理 AI 的 Ego Data,或预约任务数据演示

延伸阅读