2つのバリアント間のパフォーマンスの最小差異（例：コンバージョン率、訪問者あたりの収益）であり、サンプルサイズ、信頼水準、統計的検出力を考慮した上で統計テストが確実に検出できるものです。CROとA/B testingの取り組みにおいて、MDEはテストが統計的に有意と識別できる最小の変化量を定義することを可能にします。
MDEが高すぎると実際には存在するが小さな効果を見逃すリスクがあり、逆にMDEが低すぎると確実に検出するために大量のトラフィックが必要になります。したがって、ビジネス上の課題、利用可能なトラフィック量、テストの目的に応じて調整すべき重要なパラメータです。適切に設定することで、潜在的なインパクトに基づいてテストの優先順位付けを行い、ランダムな変動に基づく意思決定を避けることができます。
Autres termes : Statistiques
用語集をすべて見る- Approche Frequentist (A/B test)Une approche statistique qui estime les paramètres du modèle en se basant uniquement sur les données observées, sans utiliser d'informations a priori.Statistiques
- Bayesian (A/B test)Une approche statistique qui utilise la probabilité pour représenter l'incertitude sur les paramètres du modèle.Statistiques
- Confiance statistiqueNiveau de certitude que l'on a dans les résultats d'un test statistique.Statistiques
- Faux NégatifsRésultats qui manquent à détecter un effet qui est réellement présent.Statistiques
- Faux PositifsRésultats indiquant à tort qu'un effet est présent alors qu'il ne l'est pas.Statistiques
- Mann-Whitney U TestUn test non paramétrique utilisé pour comparer deux échantillons indépendants afin de déterminer s'ils proviennent de la même distribution.Statistiques