Calcolatore di test sequenziale (mSPRT)

Mixture Sequential Probability Ratio Test, secondo Johari, Pekelis e Walsh, «Always Valid Inference: Bringing Sequential Analysis to A/B Testing». Prior di mescolanza N(0, τ²) sull'effetto ASSOLUTO θ = pB − pA. Con z = (pB − pA)/SE e ρ = τ²/SE²: Λ = √(1/(1+ρ)) × exp((z²/2) × ρ/(1+ρ)), e p_av = min(1, 1/Λ).

SE² decrescente in 1/n, ρ cresce con la dimensione del campione: la penalità legata agli sguardi ripetuti aumenta con l'informazione accumulata. La p-value ottenuta è valida in qualsiasi momento, indipendentemente dal momento o dal numero di consultazioni.

τ predefinito = tasso di riferimento × 5% di uplift relativo atteso. τ regola la sensibilità, non la validità: un τ mal calibrato costa in potenza, non in controllo del rischio.

Limite: più conservativo di un test a orizzonte fisso sullo stesso campione. È il prezzo esplicito della libertà di guardare quando si vuole.