Calculateur de test séquentiel (mSPRT)

Mixture Sequential Probability Ratio Test, d'après Johari, Pekelis et Walsh, « Always Valid Inference: Bringing Sequential Analysis to A/B Testing ». Prior de mélange N(0, τ²) sur l'effet ABSOLU θ = pB − pA. Avec z = (pB − pA)/SE et ρ = τ²/SE² : Λ = √(1/(1+ρ)) × exp((z²/2) × ρ/(1+ρ)), et p_av = min(1, 1/Λ).

SE² décroissant en 1/n, ρ croît avec la taille d'échantillon : la pénalité liée aux regards répétés augmente avec l'information accumulée. La p-value obtenue est valide à tout instant, quel que soit le moment ou le nombre de consultations.

τ par défaut = taux de référence × 5 % d'uplift relatif attendu. τ règle la sensibilité, pas la validité : un τ mal calibré coûte en puissance, pas en contrôle du risque.

Limite : plus conservateur qu'un test à horizon fixe sur le même effectif. C'est le prix explicite de la liberté de regarder quand on veut.