跳到主要内容
检索

# 评判者间一致性

2 篇关联报道

订阅更新
  1. arXiv

    客服智能体评测不再只看模型:GPT-5.4五评委全胜,评委之间只有中等一致

    企业客服技能执行有了500个真实工单场景的零样本评测,17个模型由五个评委独立打分,GPT-5.4在每个评委下都排第一,而评委之间的通过判定只有中等一致。

  2. arXiv

    评委分歧不再被平均掉:只改争议条款,评委更一致,却离人类标注没更近

    一套不读人类标签的流程把评委分歧当作线索,只重写争议最大的评分条款;在SummEval上评委间一致性提高0.069,但与专家评分的一致性没有可检测变化。

已读完全部报道