أدلة عملية معمقة

قياس عدم اليقين في معدل استشهادات الذكاء الاصطناعي

ميز المعدل المرصود وحجم العينة وعدم اليقين الإحصائي عند تفسير مرصد الإجابات.

آخر تحديث :

تقييم إجابات المساعدين والمراجع على شاشتين.

رسم توضيحي مولّد بالذكاء الاصطناعي

هل المعدل دقيق بما يكفي لاتخاذ قرار؟

تخفي النسبة دون مقام هشاشتها. أربع إجابات من عشر وأربعون من مئة تعطيان المعدل نفسه بدقة مختلفة في نموذج ثنائي الحدين. يوضح فاصل Wilson الفرق ولا يحول أسئلة مختارة إلى عينة ممثلة للمستخدمين.

  1. حدد النجاح والمقام

    اختر قبل الجمع معياراً: رابط أو استشهاد يدعم الحقيقة أو إجابة صحيحة. صنف المشاهدة ثنائياً وسجل الفشل والاستبعاد وعدم الوصول دون تغيير القاعدة بعد رؤية النتائج.

  2. احفظ البروتوكول

    ثبت اللغة والواجهة والبلد والنموذج أو النمط والفترة. قد تعتمد المحاولات في المحادثة نفسها بعضها على بعض. افصل الطبقات عند تغير الشروط؛ تكرار سؤال لا يصنع تنوعاً.

  3. اقرأ المعدل والفاصل

    يتعلق فاصل Wilson عند 95٪ هنا بمشاهدات ثنائية مستقلة ذات احتمال ثابت. يبقى قابلاً للحساب دون نجاح أو مع نجاح الجميع. يصف مستوى الثقة المنهج عند تكرار أخذ العينات لا حقيقة الاستشهاد أو تمثيل العينة.

  4. قرر بحذر

    احتفظ بالنسبة والأعداد والافتراضات وعتبة القرار. إن أعاق عدم اليقين القرار فأعد تصميم الجمع قبل تكرار المحاولات. تتطلب مقارنة قبل وبعد للأسئلة نفسها تحليل تغير مزدوجاً؛ فاصلان منفصلان لا يشكلان ذلك الاختبار.

ورشة قراءة البيانات

لا يختفي تصنيفان غير محسومين من النسبة

تحتوي دفعة DEMO على عشر إجابات مختلقة. النجاح اقتباس يسند الادعاء لا مجرد وجود رابط.

بيانات وسجلات افتراضية للتعلم: لا تأتي هذه النتائج من استعلام مباشر لأي خدمة.

40 % أم50 % أم نطاق تصنيف؟

أربع إجابات مسندة وأربع غير مسندة واثنتان غير محسومتين بعد القراءة. اختيرت المجموعة للتمرين ولم يثبت استقلالها أو تمثيلها.

إذا تجاوز الجدول الشاشة فمرره أفقياً؛ تعمل أسهم لوحة المفاتيح عند تركيز المنطقة.

40 % أم50 % أم نطاق تصنيف؟
القراءةالحسابما يصفه العددالقرار
حالة التصنيف4 مسندة؛ 4 غير مسندة؛ 2 غير محسومةعشر إجابات مستلمة لا عشرة أحكام ثنائية نهائيةاحفظ الحالتين المفتوحتين وسببهما.
الحصة المؤكدة من الدفعة4 / 10 = 40 %الإسناد المؤكد بالفعل في الدفعةلا تعتبر الحالتين المفتوحتين فشلاً ثابتاً.
النسبة بين المصنفة4 / 8 = 50 %نسبة مشروطة بحسم التصنيفاذكر الاستبعاديْن والمجموع عشرة أيضاً.
مخرجات إعادة القراءة الممكنة4 / 10 إلى6 / 10: 40–60 %نطاق تصنيف لا فاصل ثقةاحسم التصنيفات قبل استخدام نموذج ثنائي.

ما الذي يعلن دون اختلاق دقة إحصائية؟

افتح كل اقتراح لمقارنة تشخيصه. قد تبقى فحوص إضافية ضرورية.

50 % من عشر إجابات دون تحفظ

لا؛ مقام50 % ثمانية. يخفي ذلك تغير المجموعة والتصنيفين المفتوحين.

40–60 % فاصل ويلسون95 %

لا؛ تأتي الحدود من مخرجات التصنيف الممكنة فقط ولم تحسب احتمالات معاينة.

أربع اقتباسات مسندة من عشرة وحالتان غير محسومتين

نعم. أضف النسبة المشروطة إن أفادت وصف المجموعة. عدم يقين التصنيف غير عدم يقين المعاينة.

سجل تصنيف افتراضي

الدفعة: DEMO، عشر إجابات مختارة
القاعدة: اقتباس يسند الادعاء
المحسوم: 4 مسندة و4 غير مسندة
المفتوح: 2، مقاطع للمراجعة
المؤكد: 4/10؛ المشروط: 4/8
مخرجات التصنيف: 40–60 % دون مستوى ثقة
التالي: حسم موثق للحالتين

لا يقيس النطاق سلوك النموذج المستقبلي أو تحيز المجموعة. لا تستبدل عشرة بثمانية تلقائياً في كل حساب.

توثيق القواعد منفصل عن الأمثلة الافتراضية

مقارنة حالات وتمارين أخرى

أربع من عشر

تعطي أربعة نجاحات من عشرة نسبة 40٪ وفاصل Wilson عند 95٪ يقارب 16.8–68.7٪ وفق الافتراضات المحددة. تخفي النسبة وحدها هذا الاتساع ولا تسمح بترتيب عالمي للخدمات.

صفر من عشر

المعدل صفر لكن الحد الأعلى نحو 27.8 %. غياب الاستشهاد في العينة لا يثبت استحالته.

نسبة مرتفعة لا تثبت دائماً تجاوز العتبة

تعطي ثمانية عشر نجاحاً من عشرين نسبة 90٪. وفق الافتراضات الثنائية المحددة يبلغ فاصل Wilson عند 95٪ نحو 69.9–97.2٪. إذا تطلب القرار تجاوز 80٪ فلا يؤكد الحد الأدنى ذلك. انشر الأعداد وقاعدة القرار.

عشرون إعادة ليست عشرين حالة

حالة افتراضية: يُكرر السؤال نفسه عشرين مرة في محادثة واحدة، بينما تتضمن مجموعة أخرى عشرين حاجة مختلفة. تساوي النسب لا يجعل التنوع والاعتماد قابلين للمقارنة. احتفظ بمعرف السؤال والجلسة، وصف المجموعات قبل حساب المؤشر الإجمالي.

من الملاحظة إلى القرار

النسبة المشاهدة نفسها ودقة مختلفة جداً

تعطي مجموعتان افتراضيتان 40٪: أربعة نجاحات من عشرة وأربعون من مئة. يفترض الحساب مشاهدات ثنائية مستقلة ذات احتمال ثابت. لا تثبت الفواصل تمثيل الأسئلة.

حالة تعليمية خيالية: توضح الأعداد والتواريخ المنهج ولا تصف مهمة حقيقية.

اقرأ العرض إلى جانب النقطة

من اليسار إلى اليمين: 0 إلى 100٪. النطاق فاصل Wilson عند 95٪ والعلامة الرأسية النسبة المشاهدة 40٪.

  • 4 / 1040 % · 16.8–68.7 %
  • 40 / 10040 % · 30.9–49.8 %
جدول قراءة الحالة
الملاحظةالتحقق المفيدالخطوة التالية
4 نجاحات من 10النسبة 40٪؛ فاصل Wilson عند 95٪: ‏16.8–68.7٪.يبقي عرض يقارب 51.9 نقطة مئوية عدم يقين كبيراً.
40 نجاحاً من 100النسبة 40٪؛ فاصل Wilson عند 95٪: ‏30.9–49.8٪.العرض نحو 18.9 نقطة؛ ويظل فحص المنهج ضرورياً.
نسبة واحدة وقاعدتان مختلفتانيغير العدد الدقة ضمن النموذج.اعرض النجاحات والمجموع والفاصل والافتراضات معاً.
اختر قرارك — هل تعادل مئة إعادة مئة حالة؟

شرح الإجابة

لا. لا يثبت عدد الصفوف الاستقلال أو التنوع. احفظ السؤال والجلسة والظروف وافحص مجموعات الإجابات التابعة. إن لم يدعم المنهج الاستدلال الاحتمالي فاعرض وصفاً لنتائج العينة.

المنهج: فاصل Wilson ثنائي الطرف عند 95٪ مع z ≈ 1.96. الأعداد افتراضية والحدود مقربة إلى عُشر نقطة مئوية. NIST — Confidence intervals for proportions

تمرين مع الحل

أربع إجابات غير مقروءة ليست أربع حالات بلا إحالة

مثال افتراضي: القيم والوثائق لتعلم الطريقة ولا تصف مؤسسة حقيقية.

فئات العينة منفصلة ولا تعني الإجابة غير المقروءة غياباً مرصوداً للاستشهاد.

إذا تجاوز الجدول الشاشة فمرره أفقياً؛ تعمل أسهم لوحة المفاتيح عند تركيز المنطقة.

المعطيات الأولية
الملاحظةالعدد
استشهاد مرصود12
مقروءة دون استشهاد4
يتعذر فحصها4

ما ينبغي التحقق منه

  1. افصل فشل القراءة عن الغياب المشاهد.
  2. احسب المعدل بين المقروءة.
  3. اذكر الحدود الوصفية للمجموعة كلها.
قراءة الحل

الحل والقرار

بين 16 مقروءة يكون 12/16 = 75 %. وبين 20 يتراوح العدد من 12 إلى 16، أي 60–80 % حسب المجهولات. هذه حدود بيانات مفقودة لا مجال ثقة ويلسون. لا تجعل المعالجة المجهول مشاهدة.

إذا تغيرت الحالة

بعد استرجاع الأربع، استبدل المجهولات بحالاتها الفعلية وانشر نسخة الحصيلة المعدلة.

السجل الواجب حفظه

احفظ الأعداد بالحالة والمقامات وسبب عدم القراءة وقاعدة الاستبعاد.

الدليل المطلوب حفظه

  • تعريف النجاح والأسئلة والاستبعادات وسياق الجمع.
  • عدد النجاحات k والمشاهدات n وتاريخ السلسلة.
  • طريقة Wilson ومستوى 95 % والافتراضات والعتبة.
  • عتبة محددة مسبقاً والنسب المشروطة إن وجدت والجلسات وإخفاقات الوصول مسجلة منفصلة.

مراجع رسمية

بروتوكولات ذات صلة

فحوص قبل الاستنتاج

  • هل عرف النجاح قبل العد؟
  • هل المشاهدات مستقلة والبروتوكول ثابت؟
  • هل فصلت النتيجة عن دقة الاستشهادات؟

أسئلة شائعة

هل 95 % تعني أن 95 % من الإجابات ستستشهد؟

لا. المعدل k/n. يصف 95 % طريقة الفاصل تحت الافتراضات المذكورة.

هل تداخل فاصلين يثبت غياب فرق؟

لا. ليس اختبار فرق وتحتاج المشاهدات المزدوجة معالجة مناسبة.

كيف نحسب إجابة يتعذر الوصول إليها تقنياً؟

حدد القاعدة قبل الجمع. تحتاج النسبة بين الإجابات المقروءة إلى عدد إخفاقات الوصول وإجمالي المحاولات. لا تعتبر كل إجابة متعذرة غياباً للاستشهاد تلقائياً ولا تستبعدها دون بيان.

كيفية التعامل مع حالة صعبة في تصنيفها؟

إعداد فئة غير مؤكدة ووصف السبب. القراءة الثانية يمكن أن تحدد الحكم؛ لا ينبغي أن يزيل الحدود أو يفرض تأكيدًا لا يسمح به الحالة.

القياس / مصادر الظهور

ظهور الرابط والاستشهاد والزيارة: ثلاث ملاحظات مختلفة

يحدث الظهور في إجابة ذكاء اصطناعي وتلقي زيارة للموقع في مرحلتين مختلفتين. اختر المؤشر الذي يجيب عن سؤالك قبل مقارنة الفترات.

  1. إتاحة الوصول

    قد يجعل الزحف الصفحة متاحة للبحث.

  2. الظهور أو الاستشهاد

    قد يظهر رابط في إجابة دون أن يتلقى نقرة.

  3. تلقي زيارة

    يسجل الموقع وصولاً ضمن حدود نظام القياس المستخدم.

أي تقرير تستخدم وما حدود الاستنتاج؟
مصدر الملاحظةما الذي يُقاسحدود التفسير
Google · الذكاء الاصطناعي التوليدي في Search Console
الوثائق الرسمية
مرات ظهور الروابط في AI Overviews وAI Mode، مع إمكان التفصيل بحسب الصفحة والبلد والجهاز.تعتمد الأيام توقيت المحيط الهادئ PT. قد يختلف إجمالي الموقع عن مجموع صفوف الصفحات بسبب التجميع. توضح Google أن غياب التقرير يحدث عادةً عندما يتلقى الموقع عدداً غير كافٍ من مرات الظهور في هذه الميزات.
Bing Webmaster Tools · AI Performance
الوثائق الرسمية · إعلان Bing
الاستشهادات الظاهرة والصفحات المستشهد بها في تجارب الذكاء الاصطناعي المدعومة؛ تُجمع استعلامات grounding في مجموعات.الاستشهاد ليس نقرة ولا ترتيباً ولا مقياساً لأهمية الصفحة. ولا تعيد مجموعات الاستعلامات عرض المطالبات الفردية. تمثّل الاستعلامات المعروضة عيّنة من نشاط الاستشهاد.
قياس الموقعالزيارات والإجراءات المسجلة وفق إعدادات القياس لديك.الزيارة المنسوبة لا تمثل جميع مرات الظهور. غياب المرجع أو حجب القياس يحدان من الإسناد.
مجموعة أسئلة موثقةوجود الاستشهادات ودقتها ضمن مجموعة إجابات تمت ملاحظتها.تعتمد النتيجة على الأسئلة والوضع واللغة والتاريخ، ولا تصف جميع المستخدمين.

تدخل مرات الظهور في تقرير Google للذكاء الاصطناعي ضمن نطاق Web في Search Console؛ فلا تضفها إلى إجمالي Web. قارن الظهور والاستشهادات والزيارات كلّاً على حدة.

مقارنة نطاق ملاحظتين

تاريخ الاطلاع على الوثائق .

مرجع موثق

التشتت وعدم اليقين: فصل الانحراف والخطأ المعياريين

يصف التشتت المشاهدات وعدم اليقين تغير التقدير ضمن نموذج. لا تجعلهما الوحدة المشتركة قابلين للتبادل.

التشتت وعدم اليقين: فصل الانحراف والخطأ المعياريين
المرجعالقيمة أو الصيغةما الذي يحدده
Sample varianceΣ(xᵢ − mean)² / (n − 1)يقسم تباين العينة على n − 1. تختلف القسمة على n؛ وثق المقام.
Sample SD√varianceجذر التباين بالوحدة الأصلية؛ وحدة التباين مربعة. لا يثبت انحراف كبير خطأ جمع.
IQRQ3 − Q1⁦Q3⁩ ناقص ⁦Q1⁩ يصف الوسط ويعتمد اصطلاح الربيعات؛ احفظ الخوارزمية.
Rangemax − minالأكبر ناقص الأصغر حساس للأطراف وليس فترة ثقة.
SE(mean)s / √n · assumptions requiredتحتاج ⁦s/√n⁩ إطاراً واستقلالاً؛ لا تكفي لكل مسح موزون أو سلسلة أو تكرار.
n < 2R sd(): NAتعيد R ⁦sd()⁩ قيمة ⁦NA⁩ مع صفر أو مشاهدة واحدة. لا تستبدلها بصفر.

ما يُحفظ في الملف

تحتاج الفترة نموذجاً ومستوى وطريقة. قد تعتمد استشهادات الذكاء والاستجابات المتكررة بعضها على بعض؛ لا تخفض زيادة الصفوف عدم اليقين كما في المستقلات بالضرورة.

هل أقارن أشرطة SD وSE؟

بعد تحديد معناها فقط. يصف SD التشتت وSE تقدير المتوسط ضمن نموذج. لا يثبت شريط أقصر تشتتاً سكانياً أقل.

الوثائق الأصلية

تاريخ الاطلاع على الوثائق .

مرجع موثق

النسبة المرصودة: ذكر العدد وفترة ويلسون

تعطي خمس حالات إيجابية من عشرين نسبة 25٪ مثل 250 من 1000. لكن دقة التقديرين تختلف ضمن نموذج ثنائي مناسب. يفصل المستكشف بين النسبة المرصودة ومستوى الثقة والحدود المحسوبة.

النسبة المرصودة: ذكر العدد وفترة ويلسون
المرجعالقيمة أو الصيغةما الذي يحدده
Observed proportionx / nيمثل x الحالات الإيجابية وفق معيار محدد ويمثل n جميع الحالات القابلة للتقييم. لا تُعد الإجابة الغائبة أو غير القابلة للحسم سلبية؛ وثّق الاستبعادات منفصلة.
Wilson scoretwo-sidedويلسون فترة درجات ثنائية الطرف. لا يساوي مركزها عادة x/n وتبقى الحدود بين 0 و1. ليست فترة والد ولا فترة كلوبّر–بيرسون الثنائية الدقيقة.
Confidence level90% · 95% · 99%المستويات 90٪ و95٪ و99٪ مع الكمية الطبيعية المقابلة. تصف الثقة تغطية الإجراء عبر عينات متكررة، لا احتمالاً لاحقاً لهذه الفترة وحدها.
x = 0upper limit > 0عندما ⁦x = 0⁩ و⁦n > 0⁩ يبقى الحد الأعلى موجباً. غياب الحدث في الرصد لا يثبت استحالته. لا تُحسب فترة عند ⁦n = 0⁩.
Sampling modelindependent · common probabilityيفترض النموذج تجارب مستقلة باحتمال مشترك. لا يضمن تكرار الاستعلام نفسه أو تجميع الحالات أو اختيار عينة ميسرة هذه الشروط تلقائياً.

استكشاف نسبة

تمرين تعليمي دون رصد خدمة حقيقية. تعني الإيجابية والسلبية المعيار المعلن فقط.

شروط النموذج: تجارب مستقلة باحتمال مشترك. لا تجعل الفترة العينة المختارة والتكرارات التابعة ممثلة للمجتمع.

أدخل أعداداً صحيحة تحقق ⁦1 ≤ n ≤ 1000000⁩ و⁦0 ≤ x ≤ n⁩.

يبقى الحساب في المتصفح دون إرسال المدخلات أو إنشاء ملف.

حُسبت النتائج · x = 5 · n = 20 · 95%

النسبة المرصودة (٪)
25
الحد الأدنى (٪)
11.18617
الحد الأعلى (٪)
46.870088
العرض (نقاط مئوية)
35.683918
فترة ويلسون والنسبة المرصودةتمثل النقطة x/n والخط فترة ويلسون ثنائية الطرف. يبقى المحور من 0 إلى 100٪ وترد القيم أعلاه.0%25%50%75%100%Wilson · 95%
تمثل النقطة x/n والخط فترة ويلسون ثنائية الطرف. يبقى المحور من 0 إلى 100٪ وترد القيم أعلاه.

الصيغة واصطلاح الحساب

z = {"90":1.6448536269514715,"95":1.9599639845400536,"99":2.5758293035489}
p = x/n; D = 1 + z²/n
center = (p + z²/(2n)) / D
half = z × sqrt(p(1−p)/n + z²/(4n²)) / D
Wilson = [center − half, center + half]

تستخدم p الصغيرة جداً الصيغة العلمية بدلاً من عرضها صفراً. تُقرب النتائج الأخرى إلى ست منازل.

أمثلة محسوبة عند 95٪: يحتفظ الجدول بهذا المستوى عند تغيير المحدد.
x / nالنسبة المرصودة (٪)الحد الأدنى (٪)الحد الأعلى (٪)العرض (نقاط مئوية)
0 / 50043.44824643.448246
1 / 5203.62241162.44653758.824126
5 / 510056.55175410043.448246
5 / 202511.1861746.87008835.683918
25 / 1002517.54521134.30446416.759252
250 / 10002522.4153127.7760285.360718
0 / 100003.699353.69935
100 / 10010096.300651003.69935

كل الأمثلة تعليمية لشرح الحساب وليست بيانات أداء تجارية.

الثقة ليست احتمال صحة الادعاء. ولا تقيس قيمة p ذلك الاحتمال أيضاً.

ما يُحفظ في الملف

أمثلة تعليمية أصلية لا تقيس خدمة حقيقية. تغطية ويلسون تقريبية ولا تضمن 95٪ لكل حجم. لا تصحح تحيز الاختيار أو الاعتماد أو أخطاء التقييم ولا تتنبأ بتغير المحرك لاحقاً.

ماذا يُنشر مع نسبة الاستشهاد؟

اذكر x وn ومعيار الإيجابية والاستبعادات والاستعلامات واختيارها والإصدارات والتواريخ والوحدة المستقلة وطريقة الفترة. وجود الاستشهاد لا يثبت صحته؛ افحص ذلك منفصلاً.

الوثائق الأصلية

تاريخ الاطلاع على الوثائق .

قراءة موسعة / تطبيق عملي

بيان ما تسمح النتائج بتأكيده

تظهر سلسلتين من الإجابات معدلات الاقتباس المختلفة. وتتضمن المسألة تحديد ما إذا كان الفجوة يصف التغيرات المتكاثرة أو ببساطة تكوين الأسئلة التي تم اختبارها.

آخر تحديث في .

الفحوص ذات الأولوية

دراسة الموظفين والتكرار والاعتماد بين الملاحظات. تقسيم النتائج حسب الفئة عندما تتعلق الأسئلة بأهداف أو مستويات صعوبة مختلفة.

أخطاء التفسير

نسبة محددة يمكن أن تعطي انطباعًا خاطئًا من الصلابة. لا يزال عينة صغيرة أو مجموعة موجهة محدودة ، حتى مصحوبة بالأقواس والرسومات.

وثيقة العمل التي ينبغي حفظها

يظهر ملاحظة عدم اليقين عدد الحالات والقانون التصنيف والتغيرات التي تم ملاحظتها. وتحدد المقارنات المضادة والملاحظات الإضافية اللازمة.

مثال / قراءة الأرقام

الظهور لا يعني دائماً تمثيلاً دقيقاً

بيانات افتراضية لشرح المنهج؛ ليست نتائج عملاء أو قياسات لهذا الموقع.

الظهور لا يعني دائماً تمثيلاً دقيقاً
الملاحظةالعددالقراءة
أسئلة العينة40قاعدة ثابتة للمقارنة.
إجابات تذكر العلامة1212 / 40 = 30 % من العينة.
إجابات تصف العرض بدقة88 / 40 = 20 % من العينة؛ 8 / 12 ≈ 66.7 % من الإشارات.
عرض حدود التفسير

ما لا تثبته هذه الأرقام

لا تقيس هذه الأرقام حصة السوق أو المبيعات. قد تكون الإشارة غير دقيقة. أرفق العينة والتاريخ واللغة وعدد التكرارات.