الأدلة الإرشادية
ما لا يمكن لتقييم أن يخبرك به
كل نتيجة من Oloproof ادعاء مقيس بحدود معلنة. تسرد هذه الصفحة الحدود التي تنطبق على كل نوع من الأنظمة؛ وتضيف كل صفحة من صفحات الدليل حسب النظام حدودها تحت «ما لا يمكن أن يخبرك به هذا».
ما لا تخبرك به أي نتيجة
- مدخلات لا تشبه المجموعة. القرار ادعاء عن المجتمع الذي تأخذ منه المجموعة عيّناتها، ولا يصلح إلا بقدر ما تكون المجموعة عيّنة منصفة لما سيواجهه نظامك. لا يستطيع Oloproof فحص ذلك؛ فنوع جديد من المدخلات أو حركة الشهر القادم يقعان خارجها (إلى أي مدى تصل النتيجة).
- أن فحصًا لا يمكن أن يفشل أبدًا. الفحص الذي نجح في كل الحالات الـ 300 يحدّ عدد مرات فشله (1.2% تقريبًا على الأكثر بثقة 95%)؛ وهو ليس برهانًا.
- كيف سيجيب نظامك في المرة القادمة. يقيس التشغيل إجابة واحدة لكل حالة ما لم تطلب replicates: (كتابة مجموعة اختبار).
- ما تعنيه درجات حَكَم لم يُفحص. الحَكَم الذي لم يُقارَن قط بوسوم الأشخاص يبقى UNVALIDATED، ومعدل نجاحه رأي الحَكَم. والسياسة التي فيها require_validated_evaluators: true ترفض أن تدعه يقرّر (الحُكّام).
- أن القاعدة فشلت حين تقول «لم يثبت بعد». تعني INSUFFICIENT_EVIDENCE أن الفترة ما زالت تمتد على جانبي الحد، لا أن النظام أخفق فيه؛ ويخبرك oloproof plan بعدد الحالات الإضافية التي تحسمها.
- الكلفة أو زمن الاستجابة، ما لم تطلبهما قاعدة. يغطي قرار الإصدار القواعد التي تعلنها سياستك؛ والميزانية على مُكمِّم لزمن الاستجابة أو على كلفة المهمة المقبولة قاعدة max: تضيفها (البوابات).
- هل ما زالت الإجابة المُعاد استخدامها حالية. المخرج أو الحكم المخزَّن مؤقتًا هو السابق، أُعيد استخدامه لأن تجزئة مدخلاته هي نفسها؛ والتغيير الذي لا تراه التجزئة (نموذج تغيّر خلف الاسم نفسه، أو ملف يقرؤه النظام ولا يستورده، أو متغير بيئة) لا يُرى (النسخ ومفاتيح التخزين المؤقت والإبطال).
- شريحة اخترتها بعد النظر. نتائج الشرائح ادعاءات تحت التصحيح المُعلَن للشرائح التي أعلنتها؛ أما قطع اخترته لأنه بدا مثيرًا للاهتمام فلا يحمل مثل هذا الضمان، والشرائح لا تحسم البوابة أبدًا (الشرائح).
- لماذا فشلت حالة. تقول المُقيِّمات ما حدث؛ والسبب يتطلب تدخلًا بجانب ضابط، وحتى عندها يسمّي Oloproof عاملًا يُختبر، لا سببًا ثابتًا.
- حالات مرتبة زمنيًا كأنها مستقلة. المجموعة التي تعلن time_order تُقرأ MANUAL_REVIEW بدل فترة تفترض حالات مستقلة (الحالات العنقودية).
- مقياس بلا فترة معتمدة. القاعدة التي تحتاج إلى فترة تعيد MANUAL_REVIEW أو INSUFFICIENT_EVIDENCE مع سببها بدل استعارة طريقة غير متحقق منها.
حسب نوع النظام
- الوكلاء
- RAG
- المصنِّفات ونماذج الانحدار
- التعلّم المعزّز
- الصور والصوت والفيديو
- المستخدمون المحاكَون
- رأي ثانٍ
إلى أين بعد ذلك
- ما يعمل اليوم: ما بُني، عائلة بعائلة.
- المفاهيم الأساسية: الفترات والمقامات والقرارات الأربعة.