人形机器人踢球不再各管一段:SoccerBot用人类动作先验统一四项技能并零样本上真机
人形机器人踢足球此前要么只覆盖少数技能,要么完全不用动作先验而动作生硬。SoccerBot把大规模人类足球动作捕捉数据蒸馏成一个结构化的隐式动作先验,让单一技能条件策略在同一个潜空间里学习移动、带球、停球和踢球。在Unitree G1上,该策略零样本迁移到真机,仿真中踢球与带球成功率分别为97.04%和89.88%,真机踢球方向误差从4.09度升到10.41度。
人形机器人踢足球此前要么只覆盖少数技能,要么完全不用动作先验而动作生硬。SoccerBot把大规模人类足球动作捕捉数据蒸馏成一个结构化的隐式动作先验,让单一技能条件策略在同一个潜空间里学习移动、带球、停球和踢球。在Unitree G1上,该策略零样本迁移到真机,仿真中踢球与带球成功率分别为97.04%和89.88%,真机踢球方向误差从4.09度升到10.41度。
该工作提出一种基于狄利克雷过程混合的贝叶斯非参数技能先验,在结构化潜空间中建模时序延展技能,无需预设组件数量即可自适应发现技能,并将其嵌入分层强化学习框架,由学习到的先验指导高层技能选择、由预训练解码器生成时序抽象动作;在Franka Kitchen、LIBERO-Long、Meta-World和一台真实机器人上,长时程操作取得一致提升,1.5M步内成功率超过0.8,而SAC即使训练5M步也未收敛(低于0.1),相对单高斯先验基线平均提升21.8%。
该工作提出 Game-Guided Skill Discovery(GGSD),在 1v1 竞争游戏中让分层智能体与历史策略池自博弈,高层策略从 5 个(G1 为 6 个)离散技能中选择、低层技能条件策略输出电机动作,并用互信息奖励区分技能语义;训练后人类可直接用同一组离散技能替换高层策略,在 Ant、Franka 机械臂与 Unitree G1 上组合出未训练过的 Maze 与 CubePush 任务,人类评测平均成功率至少 84%。
已读完全部报道