Menü
Arabic LLM benchmarking across 8 quality categories
Mit Codex oder Claude installieren Kopieren Sie diesen Prompt, fügen Sie ihn in Codex, Claude oder einen anderen Assistant ein und lassen Sie die Skill-Seite prüfen und installieren.
Basierend auf der SOC-Berufsklassifikation
Adhan audio playback with multiple muezzin voices
مراجعة كود عربي — راجع الكود مع فحص التعامل مع النصوص العربية وRTL والتعليقات العربية
مصطلحات صحية عربية — ترجم واشرح مصطلحات طبية بالعربي، ساعد في فهم التقارير الطبية
مصطلحات قانونية عربية — ترجم واشرح مصطلحات قانونية، ساعد في فهم العقود والمستندات القانونية بالعربي
Arabic OCR text extraction from images and documents
كاتب السيرة الذاتية — اكتب سيرة ذاتية احترافية بالعربي أو ثنائية اللغة
| name | arabench |
| description | Arabic LLM benchmarking across 8 quality categories |
| version | 1.0.0 |
| author | Mousa Abu Mazin |
| license | MIT |
| platforms | ["linux","macos"] |
| prerequisites | {"commands":["arabench"],"env_vars":[]} |
| metadata | {"hermes":{"tags":["nlp","benchmark","arabic","evaluation"]}} |
أداة لتقييم جودة الذكاء الاصطناعي بالعربي عبر 8 فئات.
arabench run
النتيجة المتوقعة:
╔══════════════════════════════════════════════╗
║ arabench — Full Benchmark ║
╠════════════════╦═══════╦═══════╦═════════════╣
║ Category ║ GPT-4 ║ Claude║ Gemini ║
╠════════════════╬═══════╬═══════╬═════════════╣
║ Translation ║ 82 ║ 87 ║ 79 ║
║ Grammar ║ 76 ║ 84 ║ 74 ║
║ Dialect ║ 68 ║ 71 ║ 65 ║
║ Diacritization ║ 54 ║ 62 ║ 51 ║
║ Summarization ║ 78 ║ 83 ║ 76 ║
║ QA ║ 81 ║ 85 ║ 78 ║
║ Generation ║ 75 ║ 80 ║ 73 ║
║ Culture ║ 70 ║ 77 ║ 66 ║
╠════════════════╬═══════╬═══════╬═════════════╣
║ OVERALL ║ 73.0 ║ 78.6 ║ 70.3 ║
╚════════════════╩═══════╩═══════╩═════════════╝
arabench quick claude
arabench quick gpt4
arabench quick gemini
النتيجة — نتائج سريعة خلال 30 ثانية لأهم 3 فئات (translation, grammar, qa).
arabench compare claude gpt4
النتيجة المتوقعة:
claude vs gpt4 — Arabic Quality Comparison
━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━━
Translation: claude 87 ████████▋ vs gpt4 82 ████████▏
Grammar: claude 84 ████████▍ vs gpt4 76 ███████▌
Dialect: claude 71 ███████ vs gpt4 68 ██████▊
Winner: claude (+5.6 avg)
arabench leaderboard
يعرض ترتيب جميع المزوّدين المُقيّمين حسب المعدل العام.
arabench explain translation
arabench explain dialect
arabench explain diacritization
| الفئة | الوصف | أمثلة الاختبار |
|---|---|---|
| translation | دقة الترجمة عربي↔إنجليزي | مصطلحات تقنية، تعابير اصطلاحية |
| grammar | صحة القواعد النحوية والصرفية | إعراب، تصريف أفعال، جمع تكسير |
| dialect | فهم اللهجات الخمس | مصري، خليجي، شامي، مغاربي، عراقي |
| diacritization | دقة التشكيل | نصوص بدون تشكيل يُطلب تشكيلها |
| summarization | جودة التلخيص العربي | مقالات إخبارية، نصوص أكاديمية |
| qa | الإجابة على أسئلة بالعربي | ثقافية، تاريخية، علمية |
| generation | جودة توليد النصوص | مقالات، قصص، محتوى تسويقي |
| culture | الوعي الثقافي العربي | عادات، أمثال، سياق اجتماعي |