Comparación e inferencia estadística.
Una diferencia observada necesita contexto e incertidumbre.
Un canal puede tener un resultado mayor en la muestra. Debemos revisar magnitud, composición y precisión antes de generalizar.
Entienda el enfoque antes de entrar al detalle.
Un canal puede tener un resultado mayor en la muestra. Debemos revisar magnitud, composición y precisión antes de generalizar.
Una lectura visual de Comparación e inferencia estadística
Qué información y condiciones se necesitan.
Estimador, grupos, dependencia, bases y diseño.
Diferencias en diferencias
Compare cambios entre grupos, no solo un antes y un después.
Consultar esta rutaDiferencias entre proporciones y promedios
Compare resultados que tienen la misma definición.
Consultar esta rutaCómo funciona y cómo debe aplicarse.
La inferencia evalúa qué conclusiones admite una estimación bajo el diseño y sus supuestos. Comparar significa estimar una diferencia y su incertidumbre; no solo encontrar el grupo con la cifra mayor. Deben distinguirse significancia estadística, tamaño del efecto y relevancia práctica. Con una muestra muy grande, una diferencia pequeña puede ser detectable y aun insuficiente para justificar una decisión.
Procedimiento y decisiones de aplicación
Formular contraste
Definir parámetro, grupos, comparación unilateral o bilateral y umbral de decisión antes de revisar resultados.
Reconocer dependencia
Usar procedimientos para grupos independientes, pares o conglomerados según corresponda. Comparar dos olas del mismo panel como independientes pierde información o distorsiona la incertidumbre.
Interpretar
Presentar diferencia, intervalo y valor p cuando sea pertinente. Si se exploran muchas comparaciones, gestionar multiplicidad o identificar expresamente el análisis exploratorio.
Del procedimiento a una conclusión sustentada.
Una diferencia de satisfacción de 2 puntos con un intervalo de −1 a 5 no sustenta una conclusión clara de mejora bajo el contraste planteado. Tampoco prueba igualdad. Para demostrar equivalencia se necesita un margen de equivalencia definido y un procedimiento específico. La falta de significancia no reemplaza ese análisis.
Decisiones que estructuran su aplicación
Cada paso tiene una comprobación distinta; el procedimiento desarrollado arriba precisa qué se decide y qué evidencia se conserva.
Controles que determinan la interpretación
| Criterio | Qué se comprueba |
|---|---|
| Diseño | Ajustar errores estándar a pesos, estratos y conglomerados. |
| Multiplicidad | No seleccionar solo los contrastes favorables de una tabla extensa. |
| Relevancia | Relacionar el efecto con costos, riesgos y magnitudes de interés. |
Tabla de estimaciones y diferencias, intervalos, criterios de contraste y conclusión delimitada para cada comparación.
¿Cuándo debe atenderse la multiplicidad?
Cuando el conjunto de contrastes forma parte de una misma búsqueda de evidencias, probar muchos aumenta oportunidades de falsos positivos. Se define una familia de hipótesis y un método acorde con el propósito, como control del error familiar o de descubrimientos falsos. No conviene escoger el ajuste después de mirar qué resultados sobreviven.
Aplicación en el portafolio
Experimentación creativa
Consultar esta soluciónExperiencia del cliente
Consultar esta soluciónFuentes técnicas para ampliar la lectura
Continúe por una ruta relacionada.
Referencias para profundizar
Revisemos la aplicación en su estudio.
Definamos cómo utilizar Comparación e inferencia estadística con la información disponible y el alcance que requiere su proyecto.