Ir al contenido

Calculadora de test secuencial (mSPRT)

Consulte sus resultados tan a menudo como sea necesario: la p-value always-valid sigue siendo válida en cada consulta del test.

Método de cálculo

Calculadora Secuencial (mSPRT)

Mixture Sequential Probability Ratio Test, según Johari, Pekelis y Walsh, «Always Valid Inference: Bringing Sequential Analysis to A/B Testing». Prior de mezcla N(0, τ²) sobre el efecto ABSOLUTO θ = pB − pA. Con z = (pB − pA)/SE y ρ = τ²/SE²: Λ = √(1/(1+ρ)) × exp((z²/2) × ρ/(1+ρ)), y p_av = min(1, 1/Λ).

SE² decreciente en 1/n, ρ crece con el tamaño de la muestra: la penalización vinculada a las miradas repetidas aumenta con la información acumulada. El p-valor obtenido es válido en todo momento, sin importar el momento o el número de consultas.

τ por defecto = tasa de referencia × 5% de uplift relativo esperado. τ ajusta la sensibilidad, no la validez: un τ mal calibrado cuesta en potencia, no en control del riesgo.

Límite: más conservador que un test a horizonte fijo con el mismo tamaño muestral. Es el precio explícito de la libertad de mirar cuando se quiera.

FAQ

Preguntas frecuentes sobre el test secuencial mSPRT

  • El mSPRT (mixture Sequential Probability Ratio Test) es un método de test secuencial. Calcula un p-value llamado always-valid: puede consultarlo en cualquier momento y detener el test en cuanto pase por debajo del umbral elegido, sin aumentar el riesgo de falso positivo.

Cuéntenos más sobre su proyecto

Sabemos cómo aumentar el rendimiento de vuestros canales digitales.

  • Experimentación
  • UX y Experiencia
  • Perso & CRM
  • Data & Analytics
  • Formación
  • Comercio agéntico
Contáctanos
Laurine Perris, Consultante confirméeChéryl Chauvin, Consultante confirméeLaurent Colin, Client PartnerRomain Berger, Team LeadGrégoire Masson, Consultant confirmé