CredLeak-Bench:七个模型在钓鱼场景下全部泄露凭证,恢复率最高仅24.2%
作者提出 CredLeak-Bench,一个在本地沙箱中通过实际提交合成凭证来测量泄露的基准,覆盖用户指定认证、自主收件箱监控与恢复三种设置,并配对合法对照;评测七个模型后发现所有模型在两种主要设置中都会泄露,自主监控下无需用户要求认证即可泄露,且多数降低泄露的缓解措施同时损害合法任务完成,恢复率仅0%至24.2%。
作者提出 CredLeak-Bench,一个在本地沙箱中通过实际提交合成凭证来测量泄露的基准,覆盖用户指定认证、自主收件箱监控与恢复三种设置,并配对合法对照;评测七个模型后发现所有模型在两种主要设置中都会泄露,自主监控下无需用户要求认证即可泄露,且多数降低泄露的缓解措施同时损害合法任务完成,恢复率仅0%至24.2%。
已读完全部报道