ميزان

إصدار تجريبي · ٠٫١

نَزِنُ النماذجَ اللغويةَ بميزانِ العربية

ميزان معيار مفتوح لتقييم النماذج اللغوية الكبيرة في العربية. في إحدى كفّتيه «المفاضلة»: يحكم فيها القرّاء بين إجابتين مجهولتين. وفي الأخرى «المعيار»: اختبار مغلق يقيس الكفاءة اللغوية بالدرجات.

المِعيارالمُفاضَلة
٢٦
أسئلة المفاضلة
١٧٠
الأحكام البشرية
١١٦
أسئلة المعيار
٠١

كفّتا الميزان

لا يكفي أن يُعجِب النموذجُ قارئه، ولا أن يجتاز اختبارًا منشورًا قد يكون حفظه. لذلك يجمع ميزان بين الحُكمين.

المُفاضَلة

  1. سؤال بالعربية
  2. إجابتان مجهولتان
  3. حكم القارئ
  4. ترتيب برادلي–تيري

المِعيار

  1. سؤال محجوب
  2. تصحيح آلي
  3. درجة لكل مهارة
  4. درجة كلية
شكل ١: مسارا الوزن في ميزان
٠٢

ما الذي نَزِنه؟

المهارات السبع التي يزنها «المِعيار»قريبًا

  1. ١فهم اللهجات

    فهم ألفاظ اللهجات العربية وتراكيبها ومقاصدها في سياقها، مع تركيز أولي على لهجات الخليج.

  2. ٢المفردات والدلالة

    معاني الألفاظ في سياقها، والمشترك اللفظي، والترادف والتضاد، والفروق الدقيقة بين الألفاظ، والتعابير الفصيحة.

  3. ٣الأمثال والتعابير

    فهم الأمثال والتعابير المتداولة ومواضع استعمالها.

  4. ٤النحو والصرف

    الإعراب والتراكيب والأبنية الصرفية في العربية الفصحى، مع تركيز على المواضع الدقيقة.

  5. ٥الإملاء والتشكيل

    قواعد الهمزات والتاء والألف، وتشكيل الجمل تشكيلًا تامًّا يُقاس بنسبة أخطاء التشكيل.

  6. ٦العروض والبلاغة

    بحور الشعر العربي الفصيح، والصور البيانية والمحسنات البديعية.

  7. ٧اتباع التعليمات

    الالتزام بتعليمات دقيقة تُفحص برمجيًا، منها قيود خاصة بالعربية كالأرقام الهندية والتشكيل التام.

٠٣

النتائج الأولية

ترتيب «المُفاضَلة» بحسب أحكام القرّاء

  1. ١Claude Fable 5.1Anthropic١٬٠٥٩
  2. ١Qwen3.8 MaxAlibaba١٬٠٤٨
  3. ١Claude Sonnet 5.5Anthropic١٬٠٤٦
  4. ١Claude Opus 5.5Anthropic١٬٠٤٣
  5. ١Kimi K3Moonshot AI١٬٠٢٧

يتشارك النماذج الترتيب نفسه ما دامت فترات الثقة متداخلة.

النتائج كاملة
٠٤

للاستشهاد

إذا أفدت من ميزان في عمل بحثي، فيُرجى الاستشهاد به على النحو الآتي:

@misc{mizan2026,
  title  = {Mizan: An Open Benchmark for Evaluating Large Language Models in Arabic},
  author = {{Mizan Contributors}},
  year   = {2026},
  note   = {Preview release v0.1},
  url    = {https://mizanbench.com}
}
٠٥

للتواصل

للاستفسارات، والتعاون البحثي، واقتراح الأسئلة والنماذج:

nawaf.yousef.alharbi@gmail.com

أو عبر منصة X:@NawafAi_