ترتيب نماذج الذكاء الاصطناعي
افهم فروق القدرات ثم اختر موارد AI المناسبة.
EvalPlus · القدرة البرمجية
معيار تاريخي · لم يُحدّث المصدر منذ أكثر من 60 يومًا ولا يمثل الترتيب الحالي
HumanEval+ · pass@1 · 版本 0.1.10 · الدرجات من 0 إلى 100؛ الأعلى أفضل. لا تُرتب الدرجات المفقودة، والتعادل يأخذ المرتبة نفسها. يحتفظ البحث بالترتيب الأصلي.
| الترتيب | النموذج والإصدار | الدرجة | نوع الدليل |
|---|---|---|---|
| 1 | O1 Mini (Sept 2024)对话提示وصف النموذج ↖ | ٨٩٫٠ | الإدراج في الترتيب |
| 1 | O1 Preview (Sept 2024)对话提示وصف النموذج ↖ | ٨٩٫٠ | الإدراج في الترتيب |
| 3 | GPT 4o (Aug 2024)对话提示وصف النموذج ↖ | ٨٧٫٢ | الإدراج في الترتيب |
| 3 | Qwen2.5-Coder-32B-Instruct对话提示وصف النموذج ↖ | ٨٧٫٢ | الإدراج في الترتيب |
| 5 | DeepSeek-V3 (Nov 2024)对话提示وصف النموذج ↖ | ٨٦٫٦ | الإدراج في الترتيب |
| 5 | GPT-4-Turbo (April 2024)对话提示وصف النموذج ↖ | ٨٦٫٦ | الإدراج في الترتيب |
| 7 | DeepSeek-V2.5 (Nov 2024)对话提示وصف النموذج ↖ | ٨٣٫٥ | الإدراج في الترتيب |
| 7 | GPT 4o Mini (July 2024)对话提示وصف النموذج ↖ | ٨٣٫٥ | الإدراج في الترتيب |
| 9 | DeepSeek-Coder-V2-Instruct对话提示وصف النموذج ↖ | ٨٢٫٣ | الإدراج في الترتيب |
| 10 | Claude Sonnet 3.5 (June 2024)对话提示وصف النموذج ↖ | ٨١٫٧ | الإدراج في الترتيب |
| 10 | GPT-4-Turbo (Nov 2023)对话提示وصف النموذج ↖ | ٨١٫٧ | الإدراج في الترتيب |
| 12 | Grok Beta对话提示وصف النموذج ↖ | ٨٠٫٥ | الإدراج في الترتيب |
| 13 | GPT-4 (May 2023)对话提示وصف النموذج ↖ | ٧٩٫٣ | الإدراج في الترتيب |
| 13 | Gemini 1.5 Pro 002对话提示وصف النموذج ↖ | ٧٩٫٣ | الإدراج في الترتيب |
| 15 | CodeQwen1.5-7B-Chat对话提示وصف النموذج ↖ | ٧٨٫٧ | الإدراج في الترتيب |
| 16 | OpenCoder-8B-Instruct对话提示وصف النموذج ↖ | ٧٧٫٤ | الإدراج في الترتيب |
| 16 | claude-3-opus (Mar 2024)对话提示وصف النموذج ↖ | ٧٧٫٤ | الإدراج في الترتيب |
| 18 | Gemini 1.5 Flash 002对话提示وصف النموذج ↖ | ٧٥٫٦ | الإدراج في الترتيب |
| 19 | DeepSeek-Coder-33B-instruct对话提示وصف النموذج ↖ | ٧٥٫٠ | الإدراج في الترتيب |
| 20 | Codestral-22B-v0.1对话提示وصف النموذج ↖ | ٧٣٫٨ | الإدراج في الترتيب |
| 20 | OpenCodeInterpreter-DS-33B对话提示وصف النموذج ↖ | ٧٣٫٨ | الإدراج في الترتيب |
| 22 | WizardCoder-33B-V1.1对话提示وصف النموذج ↖ | ٧٣٫٢ | الإدراج في الترتيب |
| 23 | Artigenz-Coder-DS-6.7B对话提示وصف النموذج ↖ | ٧٢٫٦ | الإدراج في الترتيب |
| 24 | Llama3-70B-instruct对话提示وصف النموذج ↖ | ٧٢٫٠ | الإدراج في الترتيب |
| 24 | Mixtral-8x22B-Instruct-v0.1对话提示وصف النموذج ↖ | ٧٢٫٠ | الإدراج في الترتيب |
أدلة المصدر وأساس التقييم
المصدر:EvalPlus · القدرة البرمجية · Apache-2.0. نرتب النتائج بحسب الدرجات الأصلية، دون إنشاء درجة إجمالية بين الاختبارات أو اعتبار الإدراج تحققًا مستقلاً.
النسبة: EvalPlus contributors. الدرجات من EvalPlus، والمشروع الأصلي متاح بموجب Apache License 2.0 مع حفظ الترخيص والإشعارات. تُعرض البيانات كما هي دون ضمان. ترخيص هذه النسخة من المصدر ونسبتها
نسخة المصدر:9d8bdc12001f459cb5b3e8642f6a2f4f · commit المصدر：4ebfa0d4b62edb942232c723b9d1641fe1d24780 · SHA-256 للمحتوى الأصلي:e6837dc3b94f32cb1da0ced012e52edc4a722007b684df5b63da029bbd3b46d2
يجلب المدير البيانات عند الحاجة ويراجعها وينشرها؛ التحديث غير لحظي، ولا نستنتج إصدارات تقييم غير معلنة.يعتمد EvalPlus على greedy decoding بمقياس pass@1؛لا يمكن مقارنة أبعاد أو إعدادات اختبار مختلفة مباشرةً.