Math Says Yes

Término de glosario

Significación estadística

Una etiqueta que significa que un resultado sería inusual si el puro azar fuera lo único que ocurre, típicamente un valor p por debajo de 0,05.

Intuición visual

ordinary under model

surprise zone

observed

A small p-value lands far into the surprise zone

'Significativo' solo significa que el resultado observado cae en la zona de sorpresa, demasiado lejos como para culpar cómodamente al azar.

Ejemplo

En un ensayo ilustrativo, 60 de 100 pacientes tratados se recuperan frente a 45 de 100 con placebo —un cercano a 0,03, por debajo de la línea habitual de 0,05—, por lo que la diferencia se denominaría estadísticamente significativa.

Cómo funciona

Lanza una moneda 100 veces y obtén 61 caras: si la moneda fuera justa, un resultado tan desequilibrado sería raro, por lo que lo llamamos estadísticamente significativo. Eso es todo lo que la etiqueta certifica: difícil de culpar solo al . No significa que el efecto sea grande, importante o probado: con una enorme, una diferencia trivial de 0,2 puntos puede ser significativa, y con una muestra pequeña, un gran efecto real puede no superar la prueba.

Conceptos

Un valor p es la probabilidad de ver datos al menos tan extremos si un modelo nulo específico fuera verdadero. No es la probabilidad de que la afirmación sea falsa, ni la posibilidad de que el resultado haya sido aleatorio, ni una medida de cuán grande o importante es el efecto.

Potencia estadística

La potencia estadística es la probabilidad de que un estudio detecte un efecto de un tamaño determinado si ese efecto es real. Los estudios con baja potencia pueden pasar por alto efectos reales, mientras que los estudios muy grandes pueden detectar efectos demasiado pequeños para importar en la práctica.

Lecciones

Una curva de campana con una pequeña cola resaltada separada de la curva principal.

Una p pequeña no es una prueba

Un valor p pequeño dice que los datos serían sorprendentes bajo un modelo nulo, no que la afirmación sea probablemente verdadera o importante.

Datos relacionados

Trucos de datos

Una etiqueta con un valor p pequeño junto a la curva de un modelo nulo con la cola resaltada.

Un valor p no es la probabilidad de que tu resultado sea incorrecto

Un valor p es una prueba de sorpresa: pregunta con qué frecuencia aparecería un resultado así de extremo si realmente no hubiera ningún efecto. No te dice la probabilidad de que tu resultado sea incorrecto.

Riesgo y decisiones

Una línea de señal tenue oculta dentro de puntos ruidosos, con una muestra más grande que la revela.

Potencia estadística: un estudio pequeño puede pasar por alto un efecto real

Un estudio puede reportar "sin efecto claro" simplemente porque era demasiado pequeño y ruidoso como para detectar uno real.