SWE-bench Verified
Real GitHub issues, real repos — the coding-agent standard.
Estás viendo un registro de benchmark: una prueba que la industria utiliza para medir chips o modelos, y lo que realmente indica.
SWE-bench gives a model an actual repository and issue; success means a patch that passes the tests. The Verified subset (human-validated, with OpenAI) became the metric coding agents live by — from single digits in 2023 to ~80% at the 2025 frontier — and the number behind every 'AI software engineer' claim.
Cómo se conecta con el resto del stack
Los enlaces de esta ficha de un vistazo: haz clic en un grupo para ir directamente a él.
Benchmarks
Fuentes
Registro revisado a fecha de 2026-01-15 — ver Metodología.