@lueluelue 在 OpenAI 重新审计了 SWE-Bench Pro,发现它不再可靠地衡量前沿编码能力 中发帖
https://openai.com/index/separating-signal-from-noise-coding-evaluations/
https://openai.com/index/separating-signal-from-noise-coding-evaluations/