TECHAGENT - MY AI LIFE
LLM Модели
56Оценка

Llama 3.1 70B

#29Открытый код

Meta

Лучшая открытая модель 70B. Отлично подходит для тонкой настройки и самостоятельного хостинга.

Официальная страница →
📖Контекст128K tokens
🚀Скорость150 tok/s
💵Входящий токен-
💸Исходящий токен-
🧠Параметры70B

Бенчмарки

Серая полоса = среднее по датасету
MMLU57 академических предметов
83.6%ср. 81.8
GPQA DiamondВопросы уровня PhD
46.7%ср. 50.4
HumanEvalГенерация Python-кода
80.5%ср. 79.9
SWE-Bench VerifiedРеальные задачи с GitHub
21.8%ср. 32.4
Составной ScoreScore = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%56.3

HF Open LLM Leaderboard

IFEval · BBH · MATH · GPQA · MuSR · MMLU-Pro

Среднее
43.4
View on HF →
IFEvalСледование инструкциям
86.7%ср. 79.9
BBHBig Bench Hard
55.9%ср. 48.7
MATH Lvl 5Соревновательная математика
38.1%ср. 37.8
GPQAНаучные вопросы уровня аспирантуры
14.2%ср. 12.9
MuSRМногошаговые рассуждения
17.7%ср. 10.7
MMLU-ProПрофессиональные знания
47.9%ср. 40.0

Детали

Провайдер
Meta
Параметры
70B
Контекст
128K tokens
Скорость
150 tok/s
Открытый код
Да
Лицензия
Открытая (варьируется)
Релиз
-

Отзывы

Отзывов пока нет

Войдите чтобы оценить