← Modelos LLM#32Código abertoGoogle
View on HF →
Gemma 2 27B
Família de modelos abertos do Google. Excelente instrução seguindo em 27B.
Página oficial →📖Contexto8K tokens
🚀Velocidade120 tok/s
💵Preço de entrada$0.650/1M
💸Preço de saída$0.650/1M
🧠Parâmetros27B
Benchmarks
Barra cinza = média do conjunto de dadosMMLU57 disciplinas acadêmicas
75.2%média. 81.8
GPQA DiamondQuestões científicas de nível de doutorado
38.4%média. 50.4
HumanEvalGeração de código Python
74.0%média. 79.9
SWE-Bench VerifiedTarefas reais do GitHub
14.7%média. 32.4
Pontuação compostaPontuação = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%48.7
Tabela de classificação HF Open LLM
IFEval · BBH · MATH · GPQA · MuSR · MMLU-Pro
Média
36.2
IFEvalSeguindo instruções
79.8%média. 79.9
BBHGrande banco duro
49.3%média. 48.7
MATH Lvl 5Matemática de Competição
23.9%média. 37.8
GPQAQuestões científicas de pós-graduação
16.7%média. 12.9
MuSRRaciocínio em vários estágios
9.1%média. 10.7
MMLU-ProConhecimento profissional
38.4%média. 40.0
Mais de Google
Provedores de API
Detalhes
- Fornecedor
- Parâmetros
- 27B
- Contexto
- 8K tokens
- Velocidade
- 120 tok/s
- Código aberto
- Sim
- Licença
- Aberto (varia)
- Lançado
- -