A DIRAYA SPECIALIZATION · دراية

Arabic AI evaluation and model improvement

Diraya's original Arabic work remains a real proof layer inside the broader professional AI capability system: evaluate, diagnose, improve, re-evaluate, and verify.

How Arabic fits Diraya

Diraya (Arabic: دراية) builds expert data and professional evaluation infrastructure for specialized AI capability. Arabic is an initial wedge, proving ground, and specialization—not the company boundary. The original Arabic corrective-data system lives inside the broader Diraya loop.

Formal Modern Standard Arabic

The existing prototype starts where small errors change meaning: Formal Modern Standard Arabic for education, institutional, and official workflows. It tests grammar, morphology, diacritics, syntax, and language-specific reasoning. Fluent-looking answers can still fail here.

Prototype artifact: Arabic preference evaluation

This excerpt shows the concrete structure behind the original methodology: a hard prompt, a rejected model answer, a proposed correction, and a reviewer rationale packaged as structured data.

Status: existing prototype draft. Formal expert audit remains pending; this artifact is not presented as signed-off gold.

Prompt

أعرِبْ ما تحته خطّ إعرابًا تفصيليًّا موجَّهًا لطالب الصفّ الثاني عشر: «سارَ القائدُ والجبلَ حتّى أدركَ الحصنَ». هل تُعرَبُ «الجبلَ» مفعولًا معه أم معطوفًا؟

Rejected (A)

الواوُ هنا تحتملُ العطفَ والمعيّةَ، والأفصحُ المدرسيُّ عندَ جمعٍ من المعربينَ حملُها على العطفِ؛ فـ«الجَبَلُ» معطوفٌ على «القائدُ» مرفوعٌ مثلهُ.

Proposed correction (B)

الراجحُ في هذا التركيبِ أنْ تُعرَبَ «الجَبَلَ» مفعولًا معهُ منصوبًا وعلامةُ نصبِه الفتحةُ الظاهرةُ، والواوُ واوُ المعيّةِ لا عاطفةٌ.

Draft reviewer rationale

الاستجابةُ (أ) تبدو متّزنةً لأنَّها ذكرتِ الاحتمالينِ، لكنَّها رجّحتِ العطفَ والرفعَ على تأويلٍ مجازيٍّ. الاستجابةُ (ب) ثبّتتِ المعيّةَ والنصبَ بعلّةٍ دلاليةٍ واضحةٍ.

Download the structured JSON artifact.

The Arabic loop inside the unified Diraya loop

  • Evaluate: test representative Arabic work
  • Diagnose: identify the linguistic or domain failure
  • Improve: use qualified experts to create the right corrective signal
  • Re-evaluate: run protected evaluation after intervention
  • Verify: measure whether performance improved and what remains unreliable

See how this specialization connects to the full Diraya capability loop and realistic professional evaluation environments.

Evaluate an Arabic capability

Start narrowly: one Arabic capability, one representative workflow, and one model or agent. A pilot can evaluate the system, diagnose failures, involve qualified experts where required, create corrective signals, and re-test what changed.

Evaluate an Arabic capability Back to Diraya home

ملاحظة بالعربية

تمثّل العربية تخصّصًا وميدانَ إثباتٍ حقيقيًا داخل دراية، وليست حدود الشركة. يبدأ المسار بتقييم القدرة العربية، ثم تشخيص الإخفاق، وإنشاء إشارة تصحيح بخبرة مؤهلة، وإعادة التقييم بصورة محمية، والتحقق مما إذا تحسّن الأداء.