Llama 3.1 70B

#29Open Source

Benchmark

Batang abu = rata-rata dataset

MMLU57 subjek akademik

83.6%rata 81.8

GPQA DiamondPertanyaan sains level PhD

46.7%rata 50.4

HumanEvalPembuatan kode Python

80.5%rata 79.9

SWE-Bench VerifiedTugas rekayasa GitHub nyata

21.8%rata 32.4

Skor kompositScore = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%56.3

HF Open LLM Leaderboard

IFEval · BBH · MATH · GPQA · MuSR · MMLU-Pro

Rata-rata

43.4

View on HF →

IFEvalMengikuti instruksi

86.7%rata 79.9

BBHBig Bench Hard

55.9%rata 48.7

MATH Lvl 5Matematika kompetisi

38.1%rata 37.8

GPQASains Q&A level pascasarjana

14.2%rata 12.9

MuSRPenalaran multistep

17.7%rata 10.7

MMLU-ProPengetahuan profesional

47.9%rata 40.0

Dibuat oleh

🏢

Meta AI

Building AI for everyone

lab

→

Lebih dari Meta

Llama 3.2 11B Vision Instruct

Llama 3.1 70B InstructOSS

$0.400/1M→

Penyedia API

Detail

Penyedia: Meta
Parameter: 70B
Konteks: 128K tokens
Kecepatan: 150 tok/s
Open Source: Ya
Lisensi: Terbuka (bervariasi)
Rilis: -

Ulasan

Belum ada ulasan

Masuk untuk memberi nilai

← Lihat semua 381 model