3月17日,上海傅利叶智能科技有限公司(以下简称傅利叶)正式开源全尺度人形机器人数据集Fourier ActionNet,并发布全球首个全流程东西链。第一批上线万条高质量真机练习数据,包括多种自由度灵活手的练习数据及专关于手部使命的仿照学习数据,面向全球开发者及科研机构开源同享,供给从数据收集、练习、布置的一站式解决方案。
高质量机器人动作数据是具身智能开展的中心驱动力。但是实在场景下的机器人动作数据长时间面对收集本钱高、标示精度缺乏等问题,限制着职业前进。Fourier ActionNet数据集包括傅利叶GRx系列一切机型的各类使命练习,完好记载机器人在实在环境中的使命履行数据,涵盖了对常用东西、家居用品、食物等多种物体的准确取放、倾倒等操作,以及在不同环境条件下完成泛化履行。
1. 多模态+高质量+万级体量:万级真机练习数据,包括专关于手部使命的仿照学习数据,适配多自由度灵活手使命;
2. VLM标示+人工核验:一切数据均选用视觉言语模型(VLM)进行主动标示,并经过人工二次核验,保证数据精度与准确性。
除了数据集的开源以外,傅利叶同步敞开了全球首个包括收集算法、练习算法以及数据布置算法的全流程东西链,最大限度上与全球开发者同享研讨效果。开源的练习结构(如DP、ACT、iDP3)和布置东西,逐渐降低了人形机器人研制技能门槛。
1. 自带数据质量评价:根据分散战略(DP)、Transformer动作分块战略(ACT)及改善3D分散战略(iDP3)对数据集进行体系性验证,在GRx全系列机型中均可安稳履行开柜门、抓取柠檬、倾倒豆子等高难度使命;
2. 配套开发东西支撑:同步开源根据LeRobot生态的DP、ACT、iDP3等干流练习结构和布置结构,供给从数据管理到算法布置的全流程支撑。
现在,傅利叶已与国内外20多家顶尖科研院校及职业领军企业安排协作,根据GRx人形机器人渠道在强化学习、仿照学习、VLM大模型、感知体系等研讨范畴产出多项突破性效果。此次数据集开源标志着傅利叶从技能攻坚向生态共建的战略晋级,未来还将继续敞开更多掩盖全身运控、多使命协同的进阶数据模块。