Diseño de experimentos

Cuándo usarla

Usar cuando el contexto requiera este procedimiento: Convierte una hipótesis en una prueba interpretable con métricas y decisiones previas.

Procedimiento

1. Formular hipótesis nula y alternativa con población, resultado y plazo.
2. Elegir unidad de asignación y prevenir contaminación entre grupos.
3. Definir métrica primaria, secundarias y de resguardo antes de observar resultados.
4. Estimar tamaño y duración con efecto mínimo relevante, variabilidad y potencia; si faltan datos, diseñar piloto.
5. Definir asignación, exclusiones, tratamiento de faltantes y segmentaciones permitidas.
6. Prever riesgos éticos, privacidad y criterios de detención.
7. Especificar análisis, intervalos de incertidumbre y decisiones para resultados positivos, negativos o inconclusos.
8. Registrar el protocolo y comprobar instrumentación antes de lanzar.

Entradas

• Hipótesis y mecanismo esperado.
• Población, intervención y restricciones.
• Datos base disponibles.

Salidas

• Protocolo experimental.
• Métricas y plan de análisis.
• Reglas de decisión y amenazas a la validez.

Validaciones

• La métrica primaria es única o la multiplicidad está tratada.
• El efecto mínimo tiene significado práctico.
• Las exclusiones se fijaron antes.
• No se promete causalidad fuera del diseño.
• Existe un plan para datos incompletos.

Herramientas

• Calculadora estadística o entorno de análisis opcional. Revisión ética cuando corresponda.

Ejemplos

Diseña una prueba de un nuevo onboarding con activación como métrica primaria y tickets de soporte como resguardo.

Acerca del recurso