跳到主要内容
检索

# 表达塑形

1 篇关联报道

订阅更新
  1. goodfire.com

    训练目标改从模型内部概念下手:胸腔引流管捷径被压住,准确率还超过平衡数据训练

    训练模型时通常只奖励正确答案,模型却可能学会用胸腔引流管这类捷径判断气胸。机械塑造把可解释性找到的内部概念方向写进损失:依赖塑造压低模型对某概念的依赖,表达塑造压低其表达。在真实胸片数据上,依赖塑造同时超过标准训练与若干先前方法中的最佳者,并超过平衡数据训练的软上限;在语言模型上,它抑制了偏好优化带来的谄媚,表达塑造则把倒计时任务中的作弊压到很低。

已读完全部报道