
Momenta、速腾聚创都投过,卖机器人训练数据的简智又融1亿美元
物界阿牛
物界前沿为投资人盯住全球自动驾驶与机器人龙头,追踪产品、订单与产业变化。
11月2日,简智机器人披露,已在第三季度完成1亿美元A+轮融资,上汽、百度、银河通用等参与投资。此前,Momenta领投了简智的A轮,速腾聚创领投了更早的种子+轮。
这些公司投向的,是机器人训练数据生意。简智让人戴上采集设备,照常做家务、拿取商品、操作工具,再把记录加工成机器人模型能学习的数据。
按简智此次披露,单季度有效数据交付量已从十万小时级提升到百万小时级,合作企业超过30家。蚂蚁灵波的技术论文,也已列出简智为第一人称数据提供方。

视频之外,还要记录手怎样动
教机器人整理物品,视频能拍到人把东西从哪里拿到哪里。要描述手怎样抓住物体,还需要手指关节的位置、手掌朝向,以及手与物体的距离。
简智官网展示的DAS Dex手部采集设备,能够输出指尖轨迹、关节角度和触觉数据;头戴和腕部视觉设备则记录操作过程。
不同设备的记录必须对应到同一时刻、同一空间位置。手已经碰到物体,图像却慢了一拍,记录就会出错。

简智的Gen Matrix平台负责清洗、同步和标注这些数据。公司9月发布的Gen-HumanEgo数据集,包含第一人称画面、重建的三维手部动作、场景深度和任务标签。
官网展示的一段整理床品画面中,双手被标出了关节点。模型训练时,便能同时利用画面与手部运动信息。

客户可以买数据,也可以买设备
简智联合创始人朱雁鸣在5月接受雷峰网采访时,介绍了两种业务。
家庭等生活场景主要通过众包采集。参与者在App领取任务,佩戴设备完成操作,再上传记录,简智按数据回收情况结算。加工后的数据提供给模型开发企业。
工厂产线、封闭实验室等客户需要在自己的场地采集。简智就提供硬件和本地部署方案,让客户在内部完成采集与处理。
简智因此既卖训练数据,也卖采集设备和配套服务。官网将数据服务分为原始数据、处理后数据和经过模型加工的数据,客户可以按需要选择。
采集规模扩大后,设备和软件都得跟上。朱雁鸣在5月的访谈中估算,一名采集者每天有效产出约5至6小时数据,百万小时至少需要20万人天,还要配套足够的设备和自动化处理能力。
采集者完成操作之后,简智还要处理和检查大量记录,才能按客户要求交付。
蚂蚁灵波已经用上简智的数据
5月26日,蚂蚁灵波与简智宣布合作,围绕具身智能模型共同开发数据,并计划联合研发采集设备。
7月发布的LingBot-VLA 2.0论文,明确致谢简智和蚂蚁数科天枢实验室提供第一人称数据。该模型预训练使用约5万小时机器人轨迹,以及约1万小时人类第一人称视频。
这1万小时来自多个来源。论文介绍,团队最初汇集约2万小时候选视频,经筛选、重建和质检后,保留约一半。只是在场景里走动、看不到手与物体交互、出现他人的手,都是筛除的情形。
人的手与机器人的机械手不同,人类操作数据还需要与真机数据结合使用。小米Xiaomi-Robotics-1的官方技术报告也介绍,模型先用超过10万小时人类手持设备采集的操作轨迹预训练,再用约1万小时不同机器人采集的数据做后续训练,学习在具体设备上执行动作。
速腾聚创则在7月19日与简智宣布战略合作,计划将三维感知技术与简智的数据采集、处理能力结合,共同开发多模态三维数据。
简智创始人陈建兴曾任Momenta算法高级总监,负责过自动驾驶数据工程。简智现在要处理的,增加了手部操作和触觉等信息,采集设备也要让人在真实场景里方便使用。
按此次融资披露,简智计划在2027年实现单季度交付千万小时。
物界前沿