TECHAGENT - MY AI LIFE
Modelos LLM
37Pontuação

Llama 3.2 3B

#35Código aberto

Meta

Pequeno, mas capaz. Funciona no dispositivo (telefone/laptop). Mais de 500 tok/s em GPU de consumidor.

Página oficial →
📖Contexto128K tokens
🚀Velocidade500 tok/s
💵Preço de entrada-
💸Preço de saída-
🧠Parâmetros3B

Benchmarks

Barra cinza = média do conjunto de dados
MMLU57 disciplinas acadêmicas
63.4%média. 81.8
GPQA DiamondQuestões científicas de nível de doutorado
24.7%média. 50.4
HumanEvalGeração de código Python
58.3%média. 79.9
SWE-Bench VerifiedTarefas reais do GitHub
9.5%média. 32.4
Pontuação compostaPontuação = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%37.0

Tabela de classificação HF Open LLM

IFEval · BBH · MATH · GPQA · MuSR · MMLU-Pro

Média
24.2
View on HF →
IFEvalSeguindo instruções
73.9%média. 79.9
BBHGrande banco duro
24.1%média. 48.7
MATH Lvl 5Matemática de Competição
17.7%média. 37.8
GPQAQuestões científicas de pós-graduação
3.8%média. 12.9
MuSRRaciocínio em vários estágios
1.4%média. 10.7
MMLU-ProConhecimento profissional
24.4%média. 40.0

Detalhes

Fornecedor
Meta
Parâmetros
3B
Contexto
128K tokens
Velocidade
500 tok/s
Código aberto
Sim
Licença
Aberto (varia)
Lançado
-

Avaliações

Ainda não há comentários

Faça login para avaliar