返回 Blog
第一视角任务数据5 分钟阅读智域基石研究团队

一段人类任务片段必须保留什么?

一份面向现场采集的检查清单,用于保留物理 AI 训练与评测所需的同步人类任务证据。

任务片段是一种证据单元

只有当任务能够被重建时,人类示教才真正对物理 AI 有价值。一个视频文件可能展示某人完成了操作,但并不能保证任务目标、状态、接触、失败与恢复可以在之后被还原。

一段人类任务片段应被视为具有统一时钟、空间标定、任务上下文和可验证结果的证据单元。

保留任务定义

采集开始前,需要记录任务目标、物体、工具、工作空间、约束、预期结果和成功标准。缺少这些上下文时,视觉上相似的动作可能代表完全不同的任务。

任务定义还应标识操作者、采集配置、环境版本,以及下游机器人本体或模型需求。

保留同步感知

第一视角和外部视角应对齐到同一个任务时钟。相机内参、外参、镜头标识、帧率、丢帧情况和标定版本都应随任务片段保存。

目的不只是回放,而是让模型或工程师把当时可见的信息,与之后的动作、接触和状态转移对应起来。

保留运动与动作

应尽可能采集头部位姿、手部位姿、工具位姿、动作轨迹和机器人状态。运动证据需要保留连续性与坐标系,而不只是稀疏标注。

人类数据之后可能需要动作抽象或本体映射。保留原始几何信息,才能为不同转换方案留下空间。

保留力觉与接触

接触是任务开始改变物理世界的位置。有价值的证据可以包括力/力矩、触觉信号、接触事件、夹爪状态、物体运动,或由同步传感器推断的状态。

没有直接力觉传感器时,也应保留估计接触所需的观测与元数据,并明确置信度。

保留失败与恢复

执行偏离时不要立即停止记录。偏差、操作者判断、纠正动作和恢复后的状态,往往比一次干净成功包含更多可复用信息。

失败证据需要区分“观察到的偏差”与“推断的原因”,让物理因果模型能够依据任务片段验证解释。

保留质量与血缘

每段任务片段都应带有标定状态、时钟偏差、缺失信号、质量检查、授权、版本与来源。只有当另一个团队能判断数据从哪里来、是否达到质量要求时,它才能成为可复用训练资产。

Physical AI DBMS负责组织这些任务原生记录,并保留版本化血缘。

最小任务片段清单

  • 任务与环境标识;
  • 操作者与采集系统标识;
  • 起止时间和统一任务时钟;
  • 相机与传感器标定;
  • 信号流与采样率;
  • 任务结果及已知失败/恢复事件;
  • 质量结果、缺失数据与审批;
  • 文件位置、哈希、版本和使用授权。

真实任务接口是生产这套证据包的单元,Ego Data 专题页解释源侧证据,数据编译则进一步说明它如何成为操作级数据。

如需围绕一个具体任务核对证据包,可预约数据演示

延伸阅读