⚡ الخلاصة السريعة
ما لا يُحدَّد نطاقه، لا يمكن إثبات انحرافه.
ما هو نطاق الأداء المقبول؟
مجموعة الحدود الكمية والنوعية التي يُعدّ عندها سلوك النظام مقبولاً وفق قرارات المخاطر، تقييم الأثر، قيود التصميم، والاستخدام المقصود.
لماذا يهم في التدقيق؟
- يُحوِّل الالتزامات إلى معايير مقارنة.
- يجعل مراقبة الانحراف ذات معنى.
- يربط التحيّز وأداء الشرائح بحدود صريحة.
كيف يُوثَّق؟
- مقاييس أداء (دقة، استدعاء، F1، AUC) وعتبات.
- عتبات لأداء الشرائح الفرعية.
- عتبات مقاييس التحيّز (مثل الفارق الديموغرافي).
- عتبات كمون واستقرار.
- شروط تشغيلية (توزيع مدخلات مقبول، حجم حمل).
كيف يُدقَّق؟
- طلب الوثيقة المرجعية للنطاق.
- مطابقة مخرجات المراقبة على مدى فترة مع النطاق.
- طلب تحقيقات التنبيهات المتجاوزة للعتبة.
- التحقق من مراجعة النطاق بعد كل تغيّر جوهري.
جدول العناصر
| العنصر | مثال | الدليل | سؤال التدقيق |
|---|---|---|---|
| دقة إجمالية | ≥ 92٪ | تقرير مراقبة أسبوعي | كيف تُعالَج فترات دون العتبة؟ |
| أداء شريحة | ≥ 88٪ لكل شريحة | تقرير شرائح | ماذا يحدث عند فجوة > 5٪؟ |
| تحيّز | Equal Opp Diff < 0.05 | تقرير عدالة دوري | من يعتمد التجاوز المؤقت؟ |
| كمون | p95 < 400ms | لوحات SLO | متى يُصنَّف حادثاً؟ |
| توزيع مدخلات | PSI < 0.2 | تقرير انحراف | متى يُفتح تدقيق خارج الدورة؟ |
علاقته بالمراقبة والانحراف والتحيّز
نطاق الأداء هو المرجع الذي تُقاس عليه مراقبة الانحراف ومقاييس التحيّز وأداء الشرائح؛ بدونه لا يعدو "المراقبة" جمع أرقام دون قرار.
ما هو نطاق الأداء المعتمد
نطاق الأداء المعتمد (Performance Envelope) هو الحدود الموثقة التي يعمل ضمنها نظام الذكاء الاصطناعي بشكل موثوق: أنواع الإدخال، اللغات، النطاق الجغرافي والزمني، فئات المستخدمين، وحدود الدقة.
دور المدقق
يتحقق المدقق من أن:
- النطاق موثّق بوضوح.
- اختبارات القبول جرت داخل النطاق فقط.
- توجد ضوابط تكتشف الاستخدام خارج النطاق وتمنعه أو تُنبّه إليه.
- أي توسعة للنطاق مرت بمراجعة وتقييم أثر.
أدلة نموذجية
- بطاقة النموذج.
- تقارير اختبار حسب فئات النطاق.
- سجلات الاستدلال ونسبة الطلبات خارج النطاق.
- إشعارات المستخدم عند الوصول إلى حدود النطاق.
علاقة بالأطر
نطاق الأداء عنصر أساسي في ISO/IEC 42001 (السياق) وNIST AI RMF (Map/Measure) وقانون الاتحاد الأوروبي للذكاء الاصطناعي (متطلبات الأداء والدقة).
المفاهيم الرئيسية
- نطاق الأداء
- المراقبة
- التحيّز
- أداء الشرائح
الخطوات العملية
- 1اربط كل عتبة بقرار مخاطر مسبق
- 2أعِد مراجعة النطاق بعد أي تغيّر جوهري
- 3وثّق مسار التصعيد عند تجاوز العتبات
الأخطاء الشائعة
- ⚠اختيار عتبات دون ربطها بالأثر
- ⚠مراقبة دون قرارات موثّقة