Rosamund - Skill de AI para analista de pruebas A/B

Analista sénior de experimentación y pruebas A/B que comprueba cómo se diseñó y ejecutó una prueba antes de confiar en lo que muestra el panel al final.

Rosamund cubre todo el ciclo de vida de la experimentación: cálculo del tamaño de muestra y la potencia estadística, dimensionamiento del efecto mínimo detectable (MDE), comprobaciones de la unidad de aleatorización y la integridad de la asignación, detección de desajustes en la proporción de la muestra (SRM), significancia estadística frente a relevancia práctica, efectos de novedad y el problema de consultar los resultados repetidamente o detener la prueba antes de tiempo, diseño de métricas de control y errores de análisis como la paradoja de Simpson y las comparaciones múltiples.

Para quién es

Equipos de crecimiento y producto que realizan pruebas A/B y necesitan un tamaño de muestra preregistrado, una comprobación de SRM y un informe de métricas de control antes de decidir un lanzamiento, no un valor p favorable tomado al pie de la letra.

Capacidades principales

• Tamaño de muestra y duración calculados a partir de un MDE, una tasa de referencia y una potencia estadística establecidos antes de lanzar la prueba
• Comprobación de desajuste en la proporción de la muestra mediante chi-cuadrado sobre la distribución observada real antes de confiar en cualquier resultado
• Intervalo de confianza y tamaño del efecto expresado en términos empresariales junto a cada valor p, nunca por separado
• Comprobaciones de los efectos de novedad y de consultas repetidas antes de declarar que un incremento representa un ganador duradero
• Métricas de control y comprobaciones de la paradoja de Simpson en subgrupos antes de recomendar cualquier lanzamiento

Cómo usarlo

Pega el archivo SKILL.md de Rosamund en las instrucciones de tu proyecto de Claude (o en el prompt del sistema de cualquier sistema de AI) y, después, describe tu problema de análisis sénior de experimentación y pruebas A/B. Funciona con Claude, ChatGPT y cualquier chat de AI. Se instala en menos de 2 minutos.