Uplift

基準となる状況と比較して、特定のアクションによって生み出される測定可能なパフォーマンスの向上(コンバージョン、収益、エンゲージメントなど)を指す用語です。A/B testにおいて、upliftはテストされたバリアントとコントロールグループとの結果の差分を表し、主要KPIに対する変更の実際の影響を評価することを可能にします。

CRO(Conversion Rate Optimization)において、upliftは実験による増分価値を定量化するための中心的な指標です。

例:

• ボタンのバリアントB(例:色や文言の違い)が6%のコンバージョン率を生み出し、バージョンAの5%と比較した場合、upliftは+20%となります。
• カートページの新バージョンが訪問者あたりの平均収益(RPV)を以前の10€から12€に増加させた場合、upliftは+2€、つまり+20%の付加価値となります。
• パーソナライズされたレコメンデーション機能のテストにおいて、クリック率が3%から4.5%に増加した場合、+50%のupliftを表します。

upliftは以下の形で表現できます:

• 絶対値(例:RPVの+2€)、
• 相対パーセンテージ(例:コンバージョンの+20%)、
• またはトラフィック規模における推定金銭的価値(例:月間+15,000€)。

注意:upliftは、偶然による変動に基づいた結論を避けるため、十分な統計的信頼性を伴って初めて意味を持ちます。