Benchmarks de Modelos IA
Estándar: 36 · HF: 22
Sobre los benchmarks
Los benchmarks son pruebas estandarizadas que puntúan el rendimiento de los modelos de IA en razonamiento, conocimiento, matemáticas y programación. Úsalos para comparar modelos de forma objetiva y elegir el adecuado para tu tarea.
📊 Estándar. Estándar - los cuatro benchmarks públicos más citados (MMLU, GPQA, HumanEval, SWE-Bench), extraídos de la página de anuncio de cada modelo; nuestra Puntuación los combina en un solo número.
🤗 HF Open LLM Leaderboard. HF Open LLM Leaderboard - seis tareas (IFEval, BBH, MATH, GPQA, MuSR, MMLU-Pro) medidas de forma uniforme para modelos open source; ordenados por la Media.
📚MMLU
57 materias académicas
🔬GPQA Diamond
Preguntas científicas de nivel PhD
💻HumanEval
Generación de código Python
🔧SWE-Bench
Tareas reales de GitHub
| # | Modelo↕ | Proveedor↕ | MMLU↕ | GPQA↕ | HumanEval↕ | SWE-Bench↕ | Puntuación↑ |
|---|---|---|---|---|---|---|---|
| 1 | OpenAI | 82.0 | 40.1 | 87.1 | 22.8 | 55.9 | |
| 2 | OpenAI | 88.7 | 53.6 | 90.2 | 38.3 | 65.9 | |
| 3 | OpenAI | 86.9 | 67.4 | 91.7 | 49.3 | 72.9 | |
| 4 | OpenAI | 92.3 | 77.3 | 92.4 | 48.9 | 77.0 |
Score = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%Todas las puntuaciones en % · mayor es mejor→ Tabla completa de modelos con precios y velocidad