OpenAI News·· 2026-02-23AI 评分47
OpenAI:为何我们不再评测 SWE-bench Verified
Why we no longer evaluate SWE-bench Verified
AI 导读
OpenAI 宣布不再评测 SWE-bench Verified,称该基准日益受到数据污染,无法准确衡量前沿编码能力进展。其分析发现该基准存在测试用例缺陷与训练数据泄漏问题。OpenAI 建议改用 SWE-bench Pro。
来源:OpenAI News · openai.com