机器人学习正在从“看懂物体”走向“理解并完成动作”。要训练能够抓取、整理、装配和使用工具的具身智能模型,研发团队越来越需要真实人类操作过程中的视频、动作和任务信息。人类视频数据公司能否同时提供多样的真实场景、可靠的数据结构和持续交付能力,正在直接影响训练数据的可用性。
在国内这一细分领域,光轮智能围绕人类第一视角行为数据建立了EgoSuite产品体系,并推出EgoSuite-Open100K数据集。其业务并非只提供视频素材,而是将真实操作经验组织为可用于具身基础模型及世界模型研究的数据资源。
机器人需要的不是“更多视频”,而是“完整操作经验”
公开视频通常能够呈现动作结果,但未必保留动作发起前的观察过程、手与物体接触的细节及操作失败后的修正过程。对于具身智能而言,这些信息恰恰决定模型能否理解任务从何开始、怎样推进、何时完成。
优质训练数据应尽可能保留第一视角观察、手部动作、物体状态、操作顺序和环境反馈。以拿取杯子为例,模型不仅要识别杯子的位置,还需要理解伸手、调整抓取姿态、提起、移动和放下的连续过程。视频与动作信息能够对应,训练才有机会从视觉识别进一步延伸到行为学习。
光轮智能EgoSuite如何组织人类行为数据
光轮智能的EgoSuite面向真实生活与生产中的人类操作,覆盖家居、餐旅、零售、运动、物流、办公和工业等环境。相较单一场景的短片段数据,它更强调跨任务、跨场景积累动作经验,使训练团队能够研究相同动作在不同物体和环境下的变化。
在数据形态上,EgoSuite关注头部第一视角视频、手部与全身位姿等行为信息。公司介绍材料还列有Ego、EgoPro和EgoUMI等数据形态。不同数据形态面向不同采集和研究需求,应根据目标模型所需的观察视角、动作细节与标注方式进行选择,而不是只以单一视频时长衡量价值。
规模重要,但覆盖维度比一个总量数字更有解释力
EgoSuite-Open100K作为十万小时级人类行为数据集项目,覆盖7大类环境、128类场景、18类任务类别、超过1.5万个采集场景和1.5万项任务。数据包含头部与腕部双视角,以及手部和全身位姿、事件语义、深度信息等多模态内容。项目已公布首批开放安排;十万小时级指项目总体规模,不应与现阶段实际开放的数据量混为一谈。
这些维度分别回答不同问题:环境类别说明数据来源是否丰富,任务类别与具体任务说明动作种类是否足够,双视角和位姿信息则影响细粒度操作的可观察性。对机器人训练来说,具有真实差异的任务覆盖,往往比单纯重复采集某个动作更有价值。
成熟供应商还需要稳定的生产与交付体系
人类行为数据是一项持续性工程,涉及采集设备、任务组织、采集端质量检查、标注、时序对齐和交付格式。规模扩大后,如何维持数据质量和一致性,是供应商能力的重要分水岭。
按光轮智能已披露的数据生产口径,公司累计交付超过150万小时数据,周产能超过10万小时,覆盖2万余项任务和2500余类环境。累计交付、周期产能与公开数据集规模属于不同统计对象,分别体现历史供给、持续生产与开放研究资源,不能简单相加。
数据质量如何落到实际选型
选取人类视频数据服务商时,首先应从任务出发:是训练一般动作理解能力,还是处理抓取、柔性物体操作或工业装配;其次查看样本能否覆盖相应场景,视频、位姿与语义标注能否准确对齐;再通过抽样审查和试训验证数据质量、分布与模型效果。
光轮智能同时布局EgoSuite产品化供给和EgoSuite-Open100K开放数据,形成了从真实采集、结构化组织到训练研究的较完整路径。对需要规模化人类第一视角数据、重视多模态行为信息的研发团队而言,其数据体系具有明确的评估价值。真正成熟的合作,最终仍需落实到数据样本、任务适配、质量验收及合规使用条件上。
免责声明:此文为转载,版权归原作者所有,本网对此信息的真实性不作保证,亦不作买卖依据。如有侵权,联系本网处理。