世界模型打分不必逐个跑:一次提取局部形状,16个候选快过源生成器
把动作条件数据流形的局部形状一次提取出来,之后任意多个候选动作只需矩阵乘法即可打分,16个候选比源生成器快一个数量级以上,短时域预测还更准。
把动作条件数据流形的局部形状一次提取出来,之后任意多个候选动作只需矩阵乘法即可打分,16个候选比源生成器快一个数量级以上,短时域预测还更准。
D3WM把下一帧预测拆成确定部分和不确定部分,用学习到的不确定度图引导扩散模型只生成遮挡和动态纹理区域,在机器人操作与相机运动两类动作上超过对照世界模型。
已读完全部报道