El contraste de hipótesis es un marco para usar datos muestrales y decidir entre dos afirmaciones rivales sobre una población:
- Hipótesis nula : la afirmación por defecto / "nada interesante" (p. ej. la moneda es justa, el fármaco no tiene efecto).
- Hipótesis alternativa : lo que sospechamos / queremos demostrar.
Procedimiento:
- Plantear y .
- Elegir un nivel de significación (comúnmente 0,05) — la probabilidad de rechazo falso (error de tipo I).
- Calcular un estadístico de prueba a partir de los datos (puntuación z, estadístico t, chi-cuadrado, razón F).
- Calcular el valor p — la probabilidad, bajo , de observar datos al menos tan extremos.
- Decidir: si , rechazar ; en caso contrario, no rechazar.
Dos tipos de error:
- Tipo I: rechazar una verdadera (probabilidad ).
- Tipo II: no rechazar una falsa (probabilidad ); es la potencia.
Confusión común: "no rechazar" ≠ "aceptar ". La ausencia de evidencia no es evidencia de ausencia — tamaños muestrales pequeños pueden ocultar efectos reales.
Este marco sustenta los ensayos clínicos, las pruebas A/B, el control de calidad y la mayoría de las afirmaciones publicadas de "significación estadística".