跳到主要内容
检索

# Sys1Cal-v1数据集

1 篇关联报道

订阅更新
  1. arXiv

    Porcedda 用 Sys1Cal-v1 测出 Jev 的 Choice 概率被系统性扭曲,补回一个“不确定”分量后中位软准确率从 0.771 升到 0.978

    Porcedda 构建了 Sys1Cal-v1——一个由 92 个概率问题渲染成 365 个真/假条目的合成数据集,其命题概率由构造已知——并用总变差距离与分布重叠(软准确率)评估 Jev 的 Noul、Choice、Score 三个原语以及开源基线 SemIf,发现 Jev 的 Choice 概率被系统性扭曲,而用一个从 Score 期望估计出的潜在“不确定”第三真值分量反演校正后,Choice 的中位软准确率从 0.771 提升到 0.978。

已读完全部报道