跳到主要内容

研究进展

相关研究与后续进展

同一研究事件下的公开文章与后续进展。

arXiv

HyperGuide 用双曲空间中的虚拟 token 引导 LLM 单轨迹推理,在竞赛数学与代码生成上以更少 token 达到或超过搜索与验证器基线

HyperGuide 将推理视为在双曲空间(Poincaré 球)中嵌入的状态树上的移动,先训练状态编码器、再训练引导头预测从当前状态出发的最小代价转移方向,并把该方向作为虚拟 token 在每个推理步骤后插入解码器,使推理沿单条自回归轨迹进行而无需扩展或重排候选;在竞赛数学与代码生成实验中,其准确率与搜索式和验证器式基线相当或更高,同时生成的 token 显著少于这些基线,与少样本提示大致相当。