跳到正文
Hugging Face Blog·· 2 小时前精选AI 评分62

Ai2 发布 FairStress 基准,评估 LLM 决策中的隐性人口统计公平差异

FairStress: A deeper evaluation of fairness in LLM decision-making

AI 导读

Ai2 发布 FairStress 基准,用于测量 LLM 在最终选择之外的决策稳健性公平差异,包含 300 个双候选人场景、29 个领域,经人口统计身份与对抗前缀组合扩展至超过 1300 万测试用例,并提供 50K 项的 FairStress-Core 子集。

推荐理由

原文用对抗前缀揭示了输出层公平掩盖的决策稳健性差异,并给出相对有效的反事实 CoT 缓解方法。

来源:Hugging Face Blog · huggingface.co