TECHAGENT - MY AI LIFE

AI মডেল বেঞ্চমার্ক

মানক: 36 · HF: 22

বেঞ্চমার্ক সম্পর্কে

বেঞ্চমার্ক হলো মানসম্মত পরীক্ষা যা যাচাই করে AI মডেল যুক্তি, জ্ঞান, গণিত ও কোডিংয়ে কতটা ভালো করে। এগুলো দিয়ে মডেল নিরপেক্ষভাবে তুলনা করুন এবং কাজের জন্য সঠিকটি বেছে নিন।

📊 মানক. স্ট্যান্ডার্ড - সর্বাধিক উদ্ধৃত চারটি পাবলিক বেঞ্চমার্ক (MMLU, GPQA, HumanEval, SWE-Bench), প্রতিটি মডেলের ঘোষণা পৃষ্ঠা থেকে নেওয়া; আমাদের স্কোর এগুলোকে একটি সংখ্যায় মেলায়।

🤗 HF Open LLM Leaderboard. HF Open LLM Leaderboard - ওপেন-সোর্স মডেলের জন্য অভিন্নভাবে মাপা ছয়টি টাস্ক (IFEval, BBH, MATH, GPQA, MuSR, MMLU-Pro); গড় অনুযায়ী র‍্যাঙ্কিং।

📚MMLU
৫৭টি একাডেমিক বিষয়
o1
OpenAI
92.3%
🔬GPQA Diamond
PhD স্তরের বিজ্ঞান প্রশ্ন
o1
OpenAI
77.3%
💻HumanEval
Python কোড জেনারেশন
DeepSeek R1
DeepSeek
92.6%
🔧SWE-Bench
বাস্তব GitHub ইঞ্জিনিয়ারিং কাজ
Claude Opus 4.1
Anthropic
74.5%
📚MMLU

৫৭টি একাডেমিক বিষয়

🔬GPQA Diamond

PhD স্তরের বিজ্ঞান প্রশ্ন

💻HumanEval

Python কোড জেনারেশন

🔧SWE-Bench

বাস্তব GitHub ইঞ্জিনিয়ারিং কাজ

#মডেলপ্রদানকারীMMLUGPQAHumanEvalSWE-Benchস্কোর
1OpenAIo1OpenAI
92.3
77.3
92.4
48.9
77.0
2OpenAIo3-miniOpenAI
86.9
67.4
91.7
49.3
72.9
3OpenAIGPT-4oOpenAI
88.7
53.6
90.2
38.3
65.9
4OpenAIGPT-4o miniOpenAI
82.0
40.1
87.1
22.8
55.9
Score = MMLU×20% + GPQA×30% + HumanEval×25% + SWE-Bench×25%সব স্কোর % এ · বেশি মানে ভালো→ মূল্য ও গতিসহ সম্পূর্ণ মডেল টেবিল