TECHAGENT - MY AI LIFE
LLM Модели
37Оценка

Llama 3.2 3B

#35Открытый код

Meta

Маленький, но способный. Запускается на устройстве (телефон/ноутбук). 500+ ток/с на потребительском графическом процессоре.

Официальная страница →
📖Контекст128K tokens
🚀Скорость500 tok/s
💵Входящий токен-
💸Исходящий токен-
🧠Параметры3B

Бенчмарки

Серая полоса = среднее по датасету
MMLU57 академических предметов
63.4%ср. 81.8
GPQA DiamondВопросы уровня PhD
24.7%ср. 50.4
HumanEvalГенерация Python-кода
58.3%ср. 79.9
SWE-Bench VerifiedРеальные задачи с GitHub
9.5%ср. 32.4
Составной ScoreScore = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%37.0

HF Open LLM Leaderboard

IFEval · BBH · MATH · GPQA · MuSR · MMLU-Pro

Среднее
24.2
View on HF →
IFEvalСледование инструкциям
73.9%ср. 79.9
BBHBig Bench Hard
24.1%ср. 48.7
MATH Lvl 5Соревновательная математика
17.7%ср. 37.8
GPQAНаучные вопросы уровня аспирантуры
3.8%ср. 12.9
MuSRМногошаговые рассуждения
1.4%ср. 10.7
MMLU-ProПрофессиональные знания
24.4%ср. 40.0

Детали

Провайдер
Meta
Параметры
3B
Контекст
128K tokens
Скорость
500 tok/s
Открытый код
Да
Лицензия
Открытая (варьируется)
Релиз
-

Отзывы

Отзывов пока нет

Войдите чтобы оценить