跳到主要内容
检索

# 机器人控制

9 篇关联报道

订阅更新
  1. arXiv

    视觉token砍掉四分之三,机器人策略仍保住95.75%成功率:APS-VLA让推理降到68.75毫秒

    视觉-语言-动作策略每步要处理数百个视觉token,推理延迟高。APS-VLA在冻结主干的前提下,用轻量评分器按当前观测、指令和本体感受挑选token,训练时同时要求保留的表示复现策略输出并预测后续视觉变化。在LIBERO上保留128个token时,平均成功率95.75%,比未剪枝的97.00%低1.25个百分点,推理延迟降到68.75毫秒。

  2. arXiv

    SWAM把视频先验接到机器人动作上:随机场景成功率61.56%,超过OpenWAM 12.86个百分点

    上海交通大学等机构构建约4.7万小时多源数据池,把预训练视频模型的语言—视频先验延伸到语言—视频—动作学习,形成世界动作模型SWAM。在RoboTwin 2.0的50个操作任务上,SWAM在随机化Hard设置下成功率为61.56%,比最强基线OpenWAM高12.86个百分点;在干净Easy设置下为88.10%,略低于OpenWAM的89.30%。真实双臂平台上,三个任务平均Hard成功率40.00%,OpenWAM为23.33%。

  3. Runway

    Runway把视频预训练模型改成机器人控制器:Praxis-1在RoboLab-120解出46.2%,权重开源

    Runway发布Praxis-1,把27B参数的视频基础模型改造成能同时预测未来画面和动作的世界动作模型,并以开放权重形式放出。机器人数据稀缺且采集昂贵,此前通用策略多依赖遥操作或第一视角录像;Praxis-1改用日常视频预训练,再经具身视频中训练和动作专家联合训练。在DROID上微调后,它在RoboLab-120的1200个回合中解出555个(46.2%),为榜单上世界动作模型和开源机器人基础模型最高。

  4. arXiv

    会写代码的智能体接上机械臂:ArmedAgent 测出最高94.29%的任务落到不安全状态

    前沿模型的空间理解能力让编程智能体无需任务示范或再训练,就能端到端零样本控制真实机械臂,风险也随之从数字世界跨到物理世界。ArmedAgent 把这类风险按来源分为良性指令致险、恶意使用和间接提示注入三类,覆盖5个场景36项任务,在仿真中评测并在真实机械臂上验证。在 Codex 框架下测试 GPT-6-Astra、GPT-6-Sol 和 GPT-6.1-Terra,总体攻击成功率为72.22%至94.29%,所有模型在所有类别上的拒绝率均为0%。

  5. arXiv

    编码智能体首次进物理考场:最强组合在456项核心任务的标准设置下只解出34%

    Embodied First Exam 把通用编码智能体接到47台仿真机器人上,允许它们自己选择直接控制、写程序控制或训练策略,并在贴近真机的标准设置里只给传感器观测、默认不许重置。八种智能体中,GPT-6 Astra 在 Codex 里于456项核心任务的标准测试上解出34%,同一批391项任务在可读全部仿真状态、可无限重置的特权设置下则达到77%。考试还按阶段标注失败位置,用来比较不同设置、不同智能体在哪里出错。

  6. arXiv

    冻结生成策略不必推倒重来:CANDO在噪声与动作两个空间同时修正,最终成功率91.4%

    预训练生成策略为机器人控制提供了强行为先验,但用在线强化学习高效适配它仍很困难:噪声空间残差方法靠固定的潜在可行域约束适配,可能排除有价值的噪声编辑,动作空间残差方法样本效率更高却仍有提升空间。CNDO去掉预定义潜在可行域,改为学习以状态和噪声为条件的方向,并用由保守价值估计与门控执行组成的软保守约束加以调节;CANDO在此基础上再加一个动作空间残差。实验报告CANDO取得76.1 NAUC和91.4%最终成功率,比最好的单空间结果高6.6 NAUC和4.1个百分点。

  7. cloud.google.com

    机器人有了云端大脑:Gemini Robotics ER 2 公开预览,关键帧定位准确率 91.3%

    Google DeepMind 的机器人高层推理模型 Gemini Robotics ER 2 进入 Gemini 平台的公开预览,企业可把视觉-语言-动作模型、导航接口等底层控制声明为工具,由模型编排多步任务。该模型在连续视频上判断任务进度并定位关键事件帧,官方给出的关键帧定位准确率为 91.3%,平均绝对帧距 0.96 秒。它面向从固定机械臂到人形机器人的多种形态,并可在 Google Cloud 上完成仿真、评估与部署。

  8. Google DeepMind News

    机器人不必只靠真机试错:Gemini 4 Argon 把草图、视频和照片变成可跑的 MuJoCo 场景

    Gemini 4 Argon 把物理理解、代码生成和视觉语义推理放进同一个模型,让机器人任务可以先在仿真里练。在考察三维物理空间问题的 Embodied Reasoning(ERQA)基准上,它用纯推理拿到 87%,高于其他前沿模型。它还能从机器人相机画面、第一视角人类视频或手绘草图重建标定过的仿真孪生场景,并据此生成闭环控制与训练数据。

  9. arXiv

    D-JEPA 用已执行结果监督候选未来之间的关系,在 PushT 上把成功率提到 87.89%,并在真实机器人上提升 17 个百分点

    D-JEPA 提出一种决策对齐的潜在世界模型:它先量化“决策局部预测缺口”——在真正竞争执行的那几个候选未来中,预测目标距离更近的候选可能反而执行失败,然后用已执行结果监督一个置换等变、有界的集合算子来学习候选未来之间的决策相关关系,并把学到的决策结构写入 JEPA 兼容的未来表示,从而可通过原生潜在距离规划直接读出动作;在 PushT 上达到 87.89% 成功率、RoboTwin 平均提升 15.04 个百分点、真实机器人任务提升 17 个百分点,驾驶场景 PDMS 均值从 57.36 升到 95.34。

已读完全部报道