跳到主要内容
返回时间线
arXiv来源发表:

研究者把门控自进化LLM智能体中的插件实例当作硬球,推导出动力学理论并观察到密度门控的群体涨落标度

相关研究与后续进展

核心概要

该工作把门控自进化LLM智能体(DSH插件式,插件满足置换对称、可逆、无环、类型化契约四条架构性质)内部的单个实例当作全同硬球,构建了严格层(任意时刻命中时间证书、分辨率律、分离定理)、动力学层(插件×版本×任务网格上的主方程与碰撞、反应、外场、门四个算子及其矩层级)与测量层(单模型单任务族WebShop上的忠实最小实例),发现群体涨落标度受密度门控:稀疏编辑密度下不可见,密度三倍时按预测速率出现。

Source-provided article image: A Kinetic Theory of the Gated Self-Evolving LLM Agent
Figure 1 ·

Figure 1: Graphical overview of the proposed kinetic theory: the self-evolution run of a gated LLM agent, interpreted through the framework of fluid mechanics.

arXiv

深度剖析

提出把自进化智能体的研究单位从智能体整体下沉到其内部单个实例,并在DSH插件式智能体上给出可用的理论框架。 以往自进化研究以智能体为单元,这里改为研究其内部实例,并借助插件满足的置换对称、可逆、无环、类型化契约四条架构性质,把这些实例合法地视为全同硬球。 理论范围明确限定于DSH类插件群体;四条架构性质被陈述为许可该类比的条件,而非普遍成立的前提。

严格层给出三项不依赖任何类比的结果:任意时刻命中时间证书、为留出验证预算定价的分辨率律,以及分离定理。 命中时间证书界定了达到任意指定改进所需的期望轮数;分辨率律把留出验证预算与可分辨性联系起来;分离定理指出守护进程必须留在群体之外,因为把评估者与被评估者合并会使证书失效。 该层被明确描述为独立于流体类比,属于严格结果;分离定理的论证方式是合并评估者与被评估者会void证书。

动力学层在插件×版本×任务网格上建立主方程,含碰撞(共激活)、反应、外场、门四个算子,并通过矩层级生成可证伪的统计特征。 矩层级是把气体转化为流体方程的那一步,在这里被用来从主方程导出可检验的统计签名。 流体解读被反复界定为有界类比:动量不守恒,因此不存在Navier-Stokes极限;可证伪性来自矩层级导出的统计特征。

测量层在忠实最小实例上观察到密度门控的群体涨落标度。 该实例是一个大型四参数技能插件库,每回合检索一个插件并带共激活探针,运行在单模型、单任务族的WebShop环境中,每个元素按架构角色映射到DSH循环。 稀疏编辑密度下涨落标度不可见,密度三倍时按预测速率出现,作者将其定位为方向性证据。

启示与展望

该理论的范围被明确限定为DSH类插件群体,即插件满足置换对称、可逆、无环、类型化契约四条架构性质;严格层的结果独立于流体类比,可用于为任意指定改进给出期望轮数上界、为留出验证预算定价,并支撑守护进程与群体分离的设计。动力学层适用于在插件×版本×任务网格上以共激活为碰撞、并含反应、外场、门四类过程的系统,其矩层级用于导出可证伪的统计特征。测量层的结论面向单模型、单任务族的WebShop环境与四参数技能插件库这一忠实最小实例,密度门控的涨落标度在该设定下被观察到。

流体解读被界定为有界类比,动量不守恒,因此不存在Navier-Stokes极限,读者需注意哪些结论依赖类比、哪些属于严格层。测量层为单模型、单任务族的WebShop最小实例,涨落标度被作者定位为方向性证据,密度三倍条件下的出现速率是否在其他密度、其他任务族或其他插件库中保持,仍是开放问题。四条架构性质在DSH类之外的插件群体中是否成立,决定了理论能否迁移。此外,当前可见文本为摘要与书目工具区块,未包含图表与完整推导细节,命中时间证书、分辨率律与分离定理的具体形式无法从该文本核对。

来源