Benchmark Suite

الـ 100-scenario holdout/stress suite المجمّد. هذه الصفحة تجعل المقارنة قابلة لإعادة التشغيل والتنزيل بدل أن تبقى مجرد ملف وثائقي.

← benchmark

Total

100

عدد السيناريوهات المجمّدة

Good

مطابق للمتوقع

Suspicious

يحتاج مراجعة

Bad

مرفوض

تنزيل benchmark-suite.zip Markdown report JSON report suite source eval markdown

Why this suite matters

This suite is the paper-facing holdout. It keeps the reference material separate from augmentation and lets us track the current analyzer on stress cases that are likely to fail if precedence breaks.

Expected	Predicted	Count
`['riddle_multi_clause', 'coordination']`	`1`

Suite metadata

Field	Value
Total	100
Good	99
Suspicious	1
Bad	0
Source	functional_syntax/data/user_scenario_test_suite_100.tsv
Evaluation	functional_syntax/data/user_scenario_test_suite_100_eval.json
Report	functional_syntax/docs/user_scenario_test_suite_100_eval.md

The JSON/Markdown/ZIP exports make this suite reproducible from the frozen artifacts without rerunning discovery.

Sample rows

#1 good

النداء → النداء

يا أحمد تعال الآن

Confidence: عالية · Slot: نداء → فعل · category matches expectation

#2 good

النداء → النداء

يا دكتور هل المريض بخير؟

Confidence: عالية · Slot: نداء → متمم / ملحق · category matches expectation

#3 good

النداء → النداء

أيتها المعلمة اشرحي الدرس

Confidence: عالية · Slot: نداء · category matches expectation

#4 good

النداء → النداء

أيها الطلاب انتبهوا جيدًا

Confidence: عالية · Slot: نداء → متمم / ملحق · category matches expectation

#5 good

النداء → النداء

يا رب اغفر لي

Confidence: عالية · Slot: نداء → فعل · category matches expectation

#6 good

النداء → النداء

يا أمي لقد وصلتُ

Confidence: عالية · Slot: نداء → فعل → متمم / ملحق · category matches expectation

#7 good

النداء → النداء

يا صاحب البيت تفضل

Confidence: عالية · Slot: نداء → فعل · category matches expectation

#8 good

النداء → النداء

يا زيد لا تتأخر

Confidence: عالية · Slot: نداء → متمم / ملحق → فعل · category matches expectation

#9 good

النداء → النداء

يا رجال الشرطة انتبهوا

Confidence: عالية · Slot: نداء → متمم / ملحق · category matches expectation

#10 good

النداء → النداء

يا خالد ثم تعال

Confidence: عالية · Slot: نداء → متمم / ملحق → فعل · category matches expectation

#11 good

استفهام نعم/لا → استفهام نعم/لا

هل فهمت الدرس؟

Confidence: عالية · Slot: أداة تمهيد / استهلال → فعل → مفعول · category matches expectation

#12 good

استفهام نعم/لا → استفهام نعم/لا

أذهب خالد إلى المدرسة؟

Confidence: عالية · Slot: فعل → فاعل → متمم / ملحق · category matches expectation