← LLM模型View on HF →
📖上下文8K tokens
🚀速度120 tok/s
💵输入价格$0.650/1M
💸输出价格$0.650/1M
🧠参数27B
基准测试
灰色条 = 数据集平均MMLU57个学术科目
75.2%均 81.8
GPQA Diamond博士级科学问题
38.4%均 50.4
HumanEvalPython代码生成
74.0%均 79.9
SWE-Bench Verified真实GitHub工程任务
14.7%均 32.4
综合评分Score = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%48.7
HF开放LLM排行榜
IFEval · BBH · MATH · GPQA · MuSR · MMLU-Pro
平均
36.2
IFEval指令遵循
79.8%均 79.9
BBHBig Bench Hard
49.3%均 48.7
MATH Lvl 5竞赛数学
23.9%均 37.8
GPQA研究生水平科学问答
16.7%均 12.9
MuSR多步软推理
9.1%均 10.7
MMLU-Pro专业知识
38.4%均 40.0
更多来自 Google
API提供商
详情
- 提供商
- 参数
- 27B
- 上下文
- 8K tokens
- 速度
- 120 tok/s
- 开源
- 是
- 许可证
- 开放（各异）
- 发布
- -