随机混合系统的仿真不再只处理离散选择:把时间不确定性离散化后,Q学习也能在连续模型上定出最优调度
随机混合系统的仿真此前只能处理离散的非确定性选择,一旦动作可在时间区间内任取,单个状态就有无穷多种选择。新方法把每个动作对应的时间区间分别离散化,用Q学习在有限抽象上学习调度,同时用预计算的符号可达状态引导仿真、按构造正确性剪掉不可达区域。在水箱基准上,仿真复现了已有方法给出的最大可达概率;在引入低概率下溢目标的水箱变体中,引导使学习明显快于无引导仿真,目标可达概率至少为45%。
随机混合系统的仿真此前只能处理离散的非确定性选择,一旦动作可在时间区间内任取,单个状态就有无穷多种选择。新方法把每个动作对应的时间区间分别离散化,用Q学习在有限抽象上学习调度,同时用预计算的符号可达状态引导仿真、按构造正确性剪掉不可达区域。在水箱基准上,仿真复现了已有方法给出的最大可达概率;在引入低概率下溢目标的水箱变体中,引导使学习明显快于无引导仿真,目标可达概率至少为45%。
在Mesa实现的谢林隔离模型中,把一名智能体判断邻居是否同类的符号规则换成由本地Qwen3.5模型通过工具调用完成的语言判断,其余动力学保持不变。用MultiVeStA做统计模型检验后,两种模型在60步内“满意智能体比例”的期望轨迹从约0.65升到约1.0,逐点t检验未显示差异;但LLM版本耗时8917秒,原版约2秒。0.8b与2b模型在单元式检查中出现语义错误、工具调用数目错误或生成卡死,4b与9b通过全部检查。
已读完全部报道