Guías prácticas detalladas

Medir la incertidumbre de una tasa de citas de IA

Distinguir tasa observada, tamaño muestral e incertidumbre estadística en un observatorio de respuestas de IA.

Actualización :

Informes y gráficos en una mesa de revisión de datos. Escena ilustrativa, sin datos reales.

Informes y gráficos en una mesa de revisión de datos. Escena ilustrativa, sin datos reales.

¿La tasa es suficientemente precisa para decidir?

Una proporción sin denominador oculta fragilidad. Cuatro respuestas citadas de diez y cuarenta de cien dan la misma tasa, con distinta precisión bajo un modelo binomial. Wilson explora la diferencia, pero no convierte un panel elegido en una muestra representativa de usuarios.

  1. Definir éxito y denominador

    Elija antes de recopilar qué cuenta: enlace, cita que respalda el dato o respuesta correcta. Puntúe observaciones binarias con esa regla. Documente fallos, exclusiones e inaccesibilidad sin cambiar la regla tras ver resultados.

  2. Conservar protocolo

    Fije idioma, interfaz, país, modelo o modo y periodo. Repeticiones en una conversación pueden ser dependientes. Separe estratos cuando cambien condiciones; repetir una pregunta no crea diversidad.

  3. Leer tasa e intervalo

    Aplica Wilson al 95 % para observaciones binarias independientes y probabilidad estable. Funciona con cero o todos los éxitos. La confianza describe cobertura del método en repeticiones comparables, no probabilidad de verdad de una cita.

  4. Decidir con rigor

    Guarde tasa y cantidades. Si el intervalo cruza el umbral operativo, planifique una recopilación mejor definida. Un antes/después con iguales preguntas está emparejado y necesita analizar cambios; esta herramienta no contrasta diferencias.

Calcular intervalo Wilson al 95 %

Cálculo en su navegador. No se envían archivos ni valores al servidor.

Listo para calcular.

Solo bajo supuestos confirmados. No corrige selección del panel ni contrasta diferencias entre series.

Situaciones y decisiones

Situaciones tipo para preparar un control. No describen misiones realizadas ni observaciones reales.

Cuatro de diez

Da 40 % y aproximadamente 16,8–68,7 %. Bajo los supuestos, es compatible con un rango amplio de tasas. No acredita una clasificación universal.

Cero de diez

La tasa es cero, pero la cota superior ronda 27,8 %. Ninguna cita en la muestra no demuestra imposibilidad de cita.

Prueba que conservar

  • Definición del éxito, panel, exclusiones y contexto.
  • Éxitos k, observaciones n y fecha.
  • Wilson, nivel 95 %, supuestos y umbral.

Referencias oficiales

Protocolos relacionados

Comprobaciones antes de concluir

  • ¿Se definió éxito antes de contar?
  • ¿Son independientes las observaciones y estable el protocolo?
  • ¿Se separa el resultado de la exactitud de citas?

Preguntas frecuentes

¿95 % significa que se citará el 95 % de respuestas?

No. La tasa es k/n. El 95 % califica el método de intervalo bajo los supuestos.

¿El solapamiento de intervalos demuestra ausencia de diferencia?

No. No es una prueba de diferencia; las observaciones emparejadas necesitan tratamiento adecuado.