أدلة عملية معمقة

قياس عدم اليقين في معدل استشهادات الذكاء الاصطناعي

ميز المعدل المرصود وحجم العينة وعدم اليقين الإحصائي عند تفسير مرصد الإجابات.

آخر تحديث :

تقارير ورسوم على مكتب لمراجعة البيانات. مشهد توضيحي دون بيانات حقيقية.

تقارير ورسوم على مكتب لمراجعة البيانات. مشهد توضيحي دون بيانات حقيقية.

هل المعدل دقيق بما يكفي لاتخاذ قرار؟

تخفي النسبة دون مقام هشاشتها. أربع إجابات من عشر وأربعون من مئة تعطيان المعدل نفسه بدقة مختلفة في نموذج ثنائي الحدين. يوضح فاصل Wilson الفرق ولا يحول أسئلة مختارة إلى عينة ممثلة للمستخدمين.

  1. حدد النجاح والمقام

    اختر قبل الجمع معياراً: رابط أو استشهاد يدعم الحقيقة أو إجابة صحيحة. صنف المشاهدة ثنائياً وسجل الفشل والاستبعاد وعدم الوصول دون تغيير القاعدة بعد رؤية النتائج.

  2. احفظ البروتوكول

    ثبت اللغة والواجهة والبلد والنموذج أو النمط والفترة. قد تعتمد المحاولات في المحادثة نفسها بعضها على بعض. افصل الطبقات عند تغير الشروط؛ تكرار سؤال لا يصنع تنوعاً.

  3. اقرأ المعدل والفاصل

    يطبق Wilson عند 95 % على مشاهدات ثنائية مستقلة باحتمال ثابت. يعمل مع صفر نجاحات أو نجاحها جميعاً. يصف مستوى الثقة تغطية الطريقة في تكرارات مماثلة لا احتمال صحة الاستشهاد.

  4. قرر بحذر

    احفظ المعدل والأعداد. إن عبر الفاصل عتبة القرار فخطط لجمع أوضح. مقارنة قبل وبعد بالأسئلة نفسها مزدوجة وتتطلب تحليل التغيرات؛ لا تختبر الأداة الفرق.

حساب فاصل Wilson عند 95 %

الحساب داخل المتصفح. لا ترسل الملفات أو القيم للخادم.

جاهز للحساب.

فقط ضمن الافتراضات المؤكدة. لا يصحح اختيار الأسئلة ولا يختبر الفرق بين سلسلتين.

حالات وقرارات

حالات نموذجية لإعداد التحقق، وليست وصفًا لمهام منفذة أو ملاحظات فعلية.

أربع من عشر

النتيجة 40 % وحوالي 16.8–68.7 %. ضمن الافتراضات تتوافق مع نطاق واسع من المعدلات ولا تثبت ترتيباً عاماً.

صفر من عشر

المعدل صفر لكن الحد الأعلى نحو 27.8 %. غياب الاستشهاد في العينة لا يثبت استحالته.

الدليل المطلوب حفظه

  • تعريف النجاح والأسئلة والاستبعادات وسياق الجمع.
  • عدد النجاحات k والمشاهدات n وتاريخ السلسلة.
  • طريقة Wilson ومستوى 95 % والافتراضات والعتبة.

مراجع رسمية

بروتوكولات ذات صلة

فحوص قبل الاستنتاج

  • هل عرف النجاح قبل العد؟
  • هل المشاهدات مستقلة والبروتوكول ثابت؟
  • هل فصلت النتيجة عن دقة الاستشهادات؟

أسئلة شائعة

هل 95 % تعني أن 95 % من الإجابات ستستشهد؟

لا. المعدل k/n. يصف 95 % طريقة الفاصل تحت الافتراضات المذكورة.

هل تداخل فاصلين يثبت غياب فرق؟

لا. ليس اختبار فرق وتحتاج المشاهدات المزدوجة معالجة مناسبة.