跳到正文
OpenAI News·· 2026-02-23AI 评分47

OpenAI:为何我们不再评测 SWE-bench Verified

Why we no longer evaluate SWE-bench Verified

AI 导读

OpenAI 宣布不再评测 SWE-bench Verified,称该基准日益受到数据污染,无法准确衡量前沿编码能力进展。其分析发现该基准存在测试用例缺陷与训练数据泄漏问题。OpenAI 建议改用 SWE-bench Pro。

来源:OpenAI News · openai.com