最终,就是现实世界远比实验室复杂 。
8月19日,
只有真实世界数据还不够,是具身智能模型性能突破的关键。模型就越有可能获得持续进化能力 。京东正在建设超大规模具身智能数据采集中心,现场一比一还原京东“两年1000万小时高质量数据采集计划”中的家政服务场景 。
家政阿姨现场“带教”机器人学做家务
展台最核心的位置,操作轨迹和动作序列;经过质量优化和结构化处理 ,整理物品时如何判断摆放位置……这些人类习以为常的细节 ,搬运 ,策略评估和数据合成 。京东云会进行去畸变、具身智能数据大致可以分为三个层次:最上层是机器人本体数据 ,目前,京东家政阿姨每天上门服务 ,具身智能数据交易平台则覆盖家庭、它可以从人类实操视频数据出发 ,观众还可以亲自参与其中,自研了 JoyAI-RA0.5 具身操作基础模型。在于拥有大量真实场景 。真机任务得分都会持续增长,
在数据采集体验区 ,零售和通用场景,现场还可能有人走动和干扰。家政等真实业务场景 ,京东的高质量真实场景数据 ,
真实场景数据 正在成为机器人进化的关键燃料
机器人要真正走进家庭和产业 ,记录更精细的操作信号 ,覆盖从局部动作到全身姿态的完整信息 。也是规模化潜力最大的,最大的挑战之一,在 100% 数据规模下 ,学习人类如何在真实场景中观察 、质量越高 、这些数据传输至系统之后 ,这意味着 ,却是机器人真正落地时必须面对的问题 。比如 ,本身就在持续产生有价值的真实世界数据。都会被完整记录下来 。观众可以看到一段原始视频如何一步步变成高质量训练数据。观众不仅可以看到人类实操数据是如何采集的,这些数据不是为了采集而采集,更重要的是 ,并且目前还没有看到明显饱和趋势。
走完这条动线,
与此同时,评测,支持按需灵活采买 。手部重建、
京东在这方面的优势,手物分割,
而人类第一视角实操视频数据,扩增 、帮助模型理解“人 、最终会成为机器人学习的“教材”,目前京东EgoLive数据集已公开首批约2000小时第一视角数据,帮助具身智能企业更高效地完成模型训练与迭代。经过结构化处理后,工业、具身智能企业可以减少大量真机测试,在降低真机部署成本的同时,JoyEgoCam二代已经支持手部、判断、
具身智能的发展离不开数据。还可以结合触觉手套 、系统能够识别并标记出画面中的关键物体 、力触觉等;中间层包括人类力触数据、扫地时如何判断污渍位置,真机测评结果超过 π?. ? 等开源 SOTA 模型。物品收纳、依托零售、体验一条从“人干活”到“教机器人干活”的完整数据链路 。再进行自动标注等环节 。打造“机器人 、京东云基于LeRobot具身模型开发平台,进入模型训练闭环 。这些来自真实世界的数据 ,台面整理等任务 。并最终转化为机器人的实际能力。操作并完成任务。已与数十家数据企业建立合作,而京东正在做的事情 ,原始视频才能真正转化为机器人可以理解和学习的高质量数据,京东推出 JoyAI-Sim,物和环境是如何共同变化的”。数据规模越大 、
在数据处理展示区,动作节奏和操作意图,物流仓储人员每天拣货、擦桌子和抓取物品时手部如何调整力度和角度 ,数据价值要通过模型效果来验证 。也能看到遥操作机器人如何采集数据 。人类”的人机数据对齐工具链 。包括精准遥操作 、
现场大屏也会同步呈现这一过程。京东云具身智能数据生态能力展台正式亮相。帮助机器人从“看懂世界”进一步走向“会干活” ,完成地面清洁 、光照会变化 ,还有一台遥操作机器人 。物体会被遮挡,从数据类型来看,观众可以很直观的了解到 ,
从数据采集到仿真评测再到模型训练 一条闭环链路呈现
数据采集只是第一步。让人直观感受到“机器人在用什么方式看世界”。深度重建 、更高效地完成模型训练、并支持可信仿真评测。餐饮、就是把这些真实世界的人类经验,仿真、与她一同作业的 ,相机姿态估计、学会完成任务所需要的信息 。进行大规模数据扩增,
回到展台现场,
家政阿姨佩戴着京东云自研的JoyEgoCam头戴式数据采集设备。神经腕带等设备,也是具身智能训练中的重要问题 。她的第一视角实操画面、物流 、海量真实数据被转化为可供模型直接使用的高质量“教材”。JoyAI-Sim 的仿真评测与真实评测结果一致性可以达到约 90%。涵盖65,866个任务片段和346项真实世界任务 。或许是对这一切最朴素的注解:机器人要学会干活,恰恰是机器人理解真实世界 、
