跳到主要内容

研究进展

相关研究与后续进展

同一研究事件下的公开文章与后续进展。

arXiv

GlitchPatch 在冻结语言模型上以局部重分词修复故障词元,十个模型平均修复率 85.10%、回归率 0.00%

该工作提出 GlitchPatch,一种不访问模型内部、仅通过优化输入分词来修复故障词元的外部框架:离线阶段用行为路径优化(BPO)为每个故障词元搜索行为最优的等价替换词元序列并编译成规则表,在线阶段只替换规范词元序列中匹配到的故障词元 ID;在覆盖六个分词器家族的十个模型上,平均修复率 85.10%,比最强基线高 14.37 个百分点,平均故障率从 14.88% 降至 2.27%,全词表评估回归率 0.00%,平均在线延迟增幅低于 0.1%。