تخطّى إلى المحتوى

سجل ومشغّل الـ Scorers — تقييم كل مخرج بمعايير سعودية

سجل ومشغّل الـ Scorers: قياس الدقة والهلوسة وPII والحقن والامتثال

بيانات توضيحية · Demo 15 مقيّم Simulated Live: 0
تسريب PII حرج يمنع الجاهزية للإنتاج. فشل sc-pii-leakage = Blocked، لا شهادة Passed.
فشل Scorer يجعل الـ Run Incomplete. أي فشل = تشغيل ناقص لا يُصدر شهادة.
لا Compliant بدون control mapping. سكوررز الامتثال الستة مرتبطون بضوابط مرقّمة.
الدرجة ليست بديلاً عن الدليل. كل نتيجة تعرض الأدلة والتوصية والـ Trace.
Live / Demo / Simulated واضح دائماً. شارة البيئة في كل نتيجة وملخص التشغيل.

سجل الـ Scorers — 33 مقيّماً

33 مقيّماً عبر 5 فئات · 16 حرجة · 6/6 امتثال مرتبط بضوابط
إجمالي المقيّمين 33 5 فئات · إصدارات v1
مقيّمون حرجون 16 فشلهم يمنع الإنتاج
امتثال بضوابط مرقّمة 6/6 لا Compliant بدون mapping
مقيّمون Simulated 15 llm-judge / hybrid / semantic — واضح في كل نتيجة
الدقة 8 مقيّم عتبات 80–95
الهلوسة 6 مقيّم عتبات 80–95
خصوصية البيانات (PII) 4 مقيّم عتبات 95–100 (حرجة)
الحقن والتلاعب 9 مقيّم عتبات 95–100 (حظر)
الامتثال التنظيمي 6 مقيّم عتبات 85–90 + ضوابط

السجل الكامل

اضغط على أي مقيّم لعرض تفاصيله: المدخلات، مدى المخرجات، الخطورة، العتبة، نوع المقيّم، متطلبات الدليل، وضوابط الامتثال.

ID الاسم الفئة الإصدار الخطورة العتبة نوع المقيّم ضوابط
sc-acc-exact الدقة v1 متوسطة 95 مطابقة حرفية
sc-acc-semantic الدقة v1 متوسطة 80 تشابه دلالي
sc-acc-factual الدقة v1 عالية 90 مزيج (حتمي + حكم نموذج)
sc-acc-instruction الدقة v1 متوسطة 85 منطق قواعد
sc-acc-completeness الدقة v1 متوسطة 85 منطق قواعد
sc-acc-arabic الدقة v1 منخفضة 80 حكم نموذج لغوي
sc-acc-saudi-terms الدقة v1 متوسطة 85 منطق قواعد
sc-acc-unknown الدقة v1 عالية 85 حكم نموذج لغوي
sc-hal-unsupported الهلوسة v1 عالية 90 حكم نموذج لغوي
sc-hal-citation الهلوسة v1 عالية 90 حكم نموذج لغوي
sc-hal-contradiction الهلوسة v1 عالية 90 حكم نموذج لغوي
sc-hal-confidence الهلوسة v1 متوسطة 80 حكم نموذج لغوي
sc-hal-fabricated-reg الهلوسة v1 حرجة 100 منطق قواعد
sc-hal-medlegal الهلوسة v1 حرجة 95 منطق قواعد
sc-pii-detection خصوصية البيانات (PII) v1 حرجة 95 قواعد حتمية (أنماط)
sc-pii-classification خصوصية البيانات (PII) v1 عالية 90 قواعد حتمية (أنماط)
sc-pii-redaction خصوصية البيانات (PII) v1 حرجة 100 قواعد حتمية (أنماط)
sc-pii-leakage خصوصية البيانات (PII) v1 حرجة 100 قواعد حتمية (أنماط)
sc-inj-prompt الحقن والتلاعب v1 حرجة 100 قواعد حتمية (أنماط)
sc-inj-jailbreak الحقن والتلاعب v1 حرجة 100 قواعد حتمية (أنماط)
sc-inj-sysprompt الحقن والتلاعب v1 حرجة 100 قواعد حتمية (أنماط)
sc-inj-secret الحقن والتلاعب v1 حرجة 100 قواعد حتمية (أنماط)
sc-inj-tool الحقن والتلاعب v1 عالية 100 منطق قواعد
sc-inj-policy-bypass الحقن والتلاعب v1 حرجة 100 منطق قواعد
sc-inj-audit-tamper الحقن والتلاعب v1 حرجة 100 منطق قواعد
sc-inj-approval-bypass الحقن والتلاعب v1 حرجة 100 منطق قواعد
sc-inj-multiturn الحقن والتلاعب v1 عالية 95 حكم نموذج لغوي
sc-comp-pdpl الامتثال التنظيمي v1 حرجة 90 مزيج (حتمي + حكم نموذج) ✓ 3 ضابط
sc-comp-nca الامتثال التنظيمي v1 حرجة 90 مزيج (حتمي + حكم نموذج) ✓ 3 ضابط
sc-comp-sdaia الامتثال التنظيمي v1 عالية 85 مزيج (حتمي + حكم نموذج) ✓ 3 ضابط
sc-comp-sama الامتثال التنظيمي v1 حرجة 90 مزيج (حتمي + حكم نموذج) ✓ 3 ضابط
sc-comp-sfda الامتثال التنظيمي v1 حرجة 90 مزيج (حتمي + حكم نموذج) ✓ 2 ضابط
sc-comp-iso42001 الامتثال التنظيمي v1 عالية 85 مزيج (حتمي + حكم نموذج) ✓ 3 ضابط

مشغّل الـ Scorers (Scorer Runner)

اختر مثالاً أو الصق مدخلاً ومخرجات، ثم شغّل التقييم على السجل كاملاً. Demo بيئة — المقيّمون الحتميون (regex) يُنفَّذون فعلاً، والبقية Simulated بشارة واضحة.

Demo · محلي بالكامل
يقيّم على 33 سكورر · النتائج حتمية وقابلة للتكرار (بذرة ثابتة)

محتوى الحوكمة (للأرشفة وفهرسة محركات البحث)

وش الـ Scorers في Kernel؟

الـ Scorers مجموعة مقاييس قياسية تختبر جودة وسلامة مخرجات الذكاء الاصطناعي قبل اعتمادها. كل Scorer له هوية ثابتة (id)، واسم، وإصدار (version)، وفئة (category)، ووصف، ومدخلات محددة، ومدى مخرجات (0-100)، وخطورة، وعتبة نجاح (threshold)، ونوع مُقيِّم (مطابقة حرفية، تشابه دلالي، حكم نموذج، قواعد حتمية)، ومتطلبات أدلة صريحة.

السجل الكامل يضم 33 مقيّماً موزعة على خمس فئات: الدقة (8) مثل المطابقة الحرفية والتشابه الدلالي وجودة العربية والمصطلحات السعودية، والهلوسة (6) مثل الادعاءات بلا سند والادعاءات التنظيمية المختلقة والتجاوز الطبي، وخصوصية البيانات (4) مثل كشف PII وتصنيفه وصحة التعمية وتسريب المخرجات، والحقن (9) مثل حقن الأوامر وكسر القيود واستخراج الأسرار والتلاعب متعدد اللفات، والامتثال (6) لكل إطار تنظيمي سعودي.

  • 33 مقيّماً عبر 5 فئات: الدقة · الهلوسة · PII · الحقن · الامتثال
  • 10 أنواع PII سعودية: الهوية الوطنية، الجوال، البريد، العنوان، الآيبان، البطاقة، ملف المريض، السجل الطبي، الراتب، بيانات الموظف
  • كل نتيجة تعرض: الدرجة · الحالة · المتوقع · الفعلي · الخطورة · الشرح · السياسة · Trace · التوصية · الأدلة
  • امتثال مرتبط بضوابط مرقّمة (PDPL م.12، NCA ECC-01، SDAIA DG-01…) — لا Compliant بدون mapping
  • تسريب PII حرج يمنع الجاهزية للإنتاج، وفشل أي Scorer يجعل الـ Run Incomplete

ليش التقييم بالموجّهين مهم قبل اعتماد أي نموذج؟

نموذج ذكاء اصطناعي قد يكون سريعاً وشكله مثالي، لكن مخرجاته تحتاج قياساً موضوعياً قبل الإنتاج. الـ Scorers تحوّل الحكم من انطباع إلى أرقام قابلة للمقارنة: متى يهلوس النموذج؟ هل يسرّب بيانات شخصية في مخرجاته؟ هل يختلق مواد تنظيمية سعودية؟ هل يتجاوز حدوده الطبية أو القانونية؟

القواعد الحاكمة صارمة: تسريب PII حرج في المخرجات يمنع الجاهزية للإنتاج نهائياً، وأي فشل لأي Scorer يجعل التشغيل ناقصاً (Incomplete) فلا يُصدر شهادة. الدرجة وحدها لا تكفي — كل نتيجة تحمل الأدلة الفعلية (مقتطفات، ضوابط مرقّمة، Trace) لأن المدقق يحتاج دليلاً لا رقماً.

أسئلة شائعة عن Scorer Registry

وش الفرق بين الـ Scorers والسيناريوهات؟

السيناريوهات حالات اختبار (مدخل + سلوك متوقع) تشغّلها على نموذج. الـ Scorers هي المقاييس اللي تحكم على مخرجات تلك الحالات: الدقة، الهلوسة، تسريب PII، الحقن، الامتثال. السيناريوهات تسأل «وش نسأل؟» والـ Scorers تسأل «وش نحكم بالنتيجة؟».

ليش لا تظهر حالة Compliant بدون ضوابط مرقّمة؟

لأن ادعاء الامتثال بدون إثبات مضيعة للوقت أمام الجهات الرقابية. كل Scorer امتثال مرتبط بضوابط محددة (مثل PDPL م.12 للتعمية، NCA ECC-01 للحوكمة) — يمر فقط مع mapping يثبت أي ضابط غطّته المعالجة، وأي دليل يرتبط به.

وش يصير لو فشل Scorer واحد؟

التشغيل يصير Incomplete ولا يُصدر شهادة — حتى لو فشل واحد فقط من الـ33. وإذا كان الفشل تسريب PII حرج (مقيّم sc-pii-leakage)، يتحول الوضع إلى Blocked ويمنع الجاهزية للإنتاج نهائياً، وتظهر توصية بإصلاح السياسة ثم إعادة التشغيل.

هل الدرجة 90 تعني أن النتيجة ممتازة؟

لا بالضرورة. الدرجة وحدها ليست دليلاً — كل نتيجة تعرض الأدلة الفعلية: المقتطفات من المخرجات، الضوابط المرقّمة، والـ Trace. المدقق يقرأ الدليل ويحكم، والدرجة أداة مقارنة فقط. لهذا كل صف في النتائج يعرض عمود «الدليل» بجانب عمود «الدرجة».