跳到主要内容
检索

Lei Zhao

1 篇关联报道

订阅更新
  1. arXiv

    过程奖励不是越细越好:预告片剪辑里,衰减权重让长任务得分涨45.4%,固定权重却让44.1%的回合被截断

    在49部真实电影及其预告片构建的四类剪辑任务上,同一套GRPO训练里,把LLM评判的回合级过程奖励权重衰减到零,使Fine Cut任务相对仅用结果奖励的GRPO取得45.4%的相对提升,而固定权重版本在三个较短任务上低于仅结果奖励,并出现44.1%的回合被截断。过程奖励早期确实鼓励了看图与推理,但持续优化会让智能体反复调用工具而不提交成品;令牌级的在线自蒸馏则对教师可见的特权信息高度敏感。

已读完全部报道