TECHAGENT - MY AI LIFE
Model LLM
49Skor

Gemma 2 27B

#32Open Source

Google

Keluarga model terbuka Google. Instruksi yang sangat baik mengikuti di 27B.

Halaman resmi →
📖Konteks8K tokens
🚀Kecepatan120 tok/s
💵Harga input$0.650/1M
💸Harga output$0.650/1M
🧠Parameter27B

Benchmark

Batang abu = rata-rata dataset
MMLU57 subjek akademik
75.2%rata 81.8
GPQA DiamondPertanyaan sains level PhD
38.4%rata 50.4
HumanEvalPembuatan kode Python
74.0%rata 79.9
SWE-Bench VerifiedTugas rekayasa GitHub nyata
14.7%rata 32.4
Skor kompositScore = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%48.7

HF Open LLM Leaderboard

IFEval · BBH · MATH · GPQA · MuSR · MMLU-Pro

Rata-rata
36.2
View on HF →
IFEvalMengikuti instruksi
79.8%rata 79.9
BBHBig Bench Hard
49.3%rata 48.7
MATH Lvl 5Matematika kompetisi
23.9%rata 37.8
GPQASains Q&A level pascasarjana
16.7%rata 12.9
MuSRPenalaran multistep
9.1%rata 10.7
MMLU-ProPengetahuan profesional
38.4%rata 40.0

Detail

Penyedia
Google
Parameter
27B
Konteks
8K tokens
Kecepatan
120 tok/s
Open Source
Ya
Lisensi
Terbuka (bervariasi)
Rilis
-

Ulasan

Belum ada ulasan

Masuk untuk memberi nilai