ホールドアウトテストを作成する
ホールドアウトテストの目的は、Roktの統合なしのウェブページまたはページセットのパフォーマンスを、Roktを使用した同じページのパフォーマンスと比較することです。これにより、ユーザーのセットをホールドアウトグループ（コントロールとしても知られています）に割り当てることによって、顧客行動への長期的な影響を正確に測定することができます。この顧客グループは、Roktの統合を表示することが除外され、長期間にわたって基本的な体験に留められます。
顧客体験の影響を測定することに加えて、このデータを使用してRoktの統合や最適化の取り組みの効果を示すことができ、Roktがあなたの利益にどのように貢献しているかを科学的に証明することができます。
ホールドアウトテストを作成する
- my.rokt.com にログインし、ホームページでアカウントをクリックします。
- トランザクションをクリックします。
- 実験をクリックします。
- 実験を追加をクリックします。
- 実験名を入力します。
- 実験タイプとしてページホールドアウト実験を選択します。
- 続行をクリックします。
- 仮説を入力します。
- 成功指標を選択します。
- オプション セカンダリ指標を選択します。
- 最小向上率のパーセンテージを入力します。
- 実験ページを選択します。
- 実験を実行するためのオーディエンスを選択します。
- 次へをクリックします。
バリアントを設計する
次のステップは、元の体験を模倣したホールドアウトバリアントを定義し、仮説をテストすることです。Roktの統合とページの最適化から得られる結果に対する比較のポイントとなる正確なベースライン（コントロールとして知られている）が存在することを確認することが重要です。
ベースライン体験は、あなたのウェブサイトにある既存の体験を密接に再現する必要があります。これには、あなたのページのデザインやレイアウト、顧客に表示されるオファー（ある場合）を含みます。
ホールドアウトバリアントを構成する際には、次の2つのオプションから選択できます。
- Roktなしでページを表示: ホールドアウトグループに割り当てられた顧客にRoktのレイアウトを表示するつもりがない場合は、このオプションを選択してください。
- 既存の体験を再現するRoktレイアウトを表示: ページ内の一部のコンテンツを置き換えるためにRoktレイアウトを構成したい場合は、このオプションを選択してください。たとえば、Roktがあなたの決済ページの既存の保険オプセルを置き換えている場合です。詳細については、レイアウトの作成方法を参照してください。
ページのベースラインパフォーマンスを確立するためには、あなたのレイアウトが既存の体験と同一のデザイン、インタラクション、位置、コピーであることが重要です。これにより、Rokt最適化された体験からの影響と価値を測定する際に、正確な比較ポイントが確保されます。
トラフィック配分を設定する
トラフィック配分ステップは、ホールドアウトグループに含める顧客の数を定義するために使用されます。数値を入力するか、スライダーを使用して、あなたの実験コホートに含めるページを訪問するすべての顧客の割合を指定します。
Roktの最適化の影響を測定するために、5%のコントロールを推奨します。
実験を開始する
顧客がホールドアウトに顧客を割り当て始める準備ができたら、実験を開始をクリックしてください。ステータスフィールドにライブと表示されると、実験がページ上で実行中です。ほとんどの実験は、5分以内にライブになります。