材
採
用
向
け
サ
|
ビ
ス
LPのテスト記録の残し方|仮説・結果・次の一手

LPのABテストは、1回やって終わりにすると、あとで「何を変えたのか」「なぜそう考えたのか」が分からなくなります。担当者が代わったとき、半年後に同じテストを繰り返してしまったとき、結果が良かったのか悪かったのかを数字だけで思い出すのは難しいものです。
この記事は、LPのテストや改善を記録として残す方法をまとめたものです。記録に書く項目、表のひな形、記録を次のテーマ選びに使う方法を説明します。ABテストの進め方は動画ありとなしのABテストに譲り、ここでは「記録の残し方」に絞ります。LPO全体の流れは「動画を活用したLPO」にまとめています。
この記事の要点
- 記録は、仮説、変更点、期間、見た数字、結果、次の一手の6項目があれば足りる。1件ずつ表の1つの段にまとめる
- 変えた点が1つに絞れていないテストは、結果を記録しても次に使えない。変更点の欄が複数になったら、テストの設計を見直す
- 「負けたテスト」「差が出なかったテスト」も残す。同じ仮説を繰り返さないための記録になる
- 動画を入れたテストは、動画の内容、置いた場所、話し手も記録する。エース不動産やKINSは、ABテストで改善を続けている
記録に書く項目
記録は、書く項目を絞ったほうが続きます。項目が多いと、忙しいときに書かれなくなります。次の6項目を基本にします。
| 項目 | 書くこと | 書き方の例 |
|---|---|---|
| 仮説 | 何が原因で、何を変えると、何が変わると考えたか | 申込みボタンの前に解約の説明がなく、不安で止まっているのではないか |
| 変更点 | Aと比べて何を変えたか。1つだけ | 申込みボタンの前に、解約方法の動画を置く |
| 期間と対象 | 開始日、終了日、対象の流入元・端末 | 開始日と終了日、広告からの流入のみ |
| 見た数字 | 何を何で割ったか。分母も書く | CVR(CV÷セッション)、フォーム到達率 |
| 結果 | A、Bの数字と、判定 | AとBの数字、差があったかどうか |
| 次の一手 | 結果を受けて次にやること | 同じ位置で別の動画を試す、本文に反映する、終了する |
仮説は「原因」まで書く
「動画を置いたらCVRが上がるのではないか」という書き方では、結果が出たときに何が分かったのかが残りません。「申込みボタンの前で、解約の条件が分からず止まっているのではないか」のように、原因の推測まで書くと、結果が外れたときに「原因の推測が違った」と整理できます。
変更点は1つだけ書く
変更点の欄に複数の内容が入るときは、テストの設計が混ざっています。見出しもボタンも動画も同時に変えると、結果が良くても悪くても、どの変更の影響かが分かりません。1回のテストでは変える点を1つに絞ります。
分母と期間を残す
CVRは、分母にセッションを使うか、ユーザーを使うか、PVを使うかで数字が変わります。記録には、何で割った数字かを残します。比べるAとBでは、同じ分母を使います。計算の方法は、CVRの計算方法で扱います。
期間も同じです。開始日と終了日がないと、後から他の施策や広告の変更と重なっていたかどうかを調べられません。
表のひな形
記録は、表計算ソフトやドキュメントの表で十分です。1件を表の1つの段にして、次のように並べます。
| 番号 | 日付 | 場所 | 仮説 | 変更点 | 期間 | 見た数字 | A | B | 判定 | 次の一手 |
|---|---|---|---|---|---|---|---|---|---|---|
| 1 | (開始日) | 申込みボタンの前 | 解約の条件が分からず止まっている | 解約方法の動画を置く | (開始日〜終了日) | CVR(CV÷セッション) | (数字) | (数字) | 差あり/差なし/判断できず | 動画の話し手を変えて再テスト |
判定の欄は、「勝ち」「負け」の二択にしないほうが後で役に立ちます。訪問者が少なく差が判断できなかったテストは「判断できず」と書きます。その場合の次の一手は、期間を延ばす、流入の多い別のページで試す、などになります。
動画のテストで追加する欄
動画を入れたテストでは、次の欄を足します。
| 追加する欄 | 書くこと |
|---|---|
| 動画の内容 | どの疑問に答える動画か |
| 置いた場所 | ファーストビュー、説明の途中、申込みボタンの前など |
| 話し手 | 担当者、代表、演者など |
| 選ばれた選択肢 | VideoChooseで計測できる、選ばれた選択肢や動画・選択肢のクリック数 |
VideoChooseで計測できるのは、選ばれた選択肢、動画・選択肢のクリック数、動画を見てCVした数です。どの質問が多く選ばれたかを記録しておくと、次にどの疑問の動画を作るかを決める材料になります。
記録を次のテーマ選びに使う
記録は、残すだけでは役に立ちません。数件たまったら、次の見方で振り返ります。
結果をテーマごとに整理する
記録に「場所」の欄を作っておくと、「ファーストビューのテストは差が出やすい」「申込みボタンの前は差が出ない」のような傾向が見えます。自社のLPで反応のあった場所を優先して、次のテストを計画します。
負けたテストと差が出なかったテストを読み返す
仮説が外れたテストには、「訪問者がそこでは止まっていない」という情報が入っています。同じ場所で別の施策を試す前に、本当にそこで止まっているのかを、ヒートマップやスクロール率で確認します。
次の一手の欄から次の計画を作る
記録の「次の一手」の欄を並べると、そのまま次の1〜2か月のテスト計画になります。優先順位の付け方は、「LPO施策の優先順位をどう決める?仮説づくりとABテストの進め方」で説明しています。この記事は、その記事で決めた施策を記録に残す部分を担当します。
事例:ABテストで改善を続けるエース不動産とKINS
記録を残す意味がよく表れるのは、テストを繰り返している事例です。
エース不動産の導入事例では、新宿区で、入居審査に不安がある人の部屋探しを扱う不動産仲介が、担当者による動画で問い合わせ前の「顔が見えない不安」を減らしています。問い合わせ数は「導入前比で142.3%向上」と記載されています。運用では、提供元がABテストの設計から具体的な改善施策まで整理して提案し、同社の作業は提案内容の最終確認が中心だったと書かれています。何をテストしたかの内容は事例ページには載っていません。
KINS(KINS PRIME)の導入事例では、ABテストによる検証を重ねて勝ちパターンを特定しています。担当者の発言として「コンバージョンレートが導入前と比べて150%向上が見えています」と紹介されています(導入企業の実感)。ABテストの設計から改善提案まで、提供元が一貫して整理したため、同社の作業は基本的に最終確認だけだったとも述べられています。「すべてのケースで同様の成果を保証するものではありません」という注記があります。
どちらの事例でも、ABテストを一度きりではなく継続して回しています。継続するには、過去のテストの結果が参照できる状態であることが前提です。
記録を続けるための運用
- 書く担当者を決める。 テストを設計した人が、開始時に仮説と変更点、終了時に結果と次の一手を書く
- 開始前に書く項目と、終了後に書く項目を分ける。 仮説・変更点・期間・見る数字は開始前に書く。結果を見てから仮説を書き換えると、記録の意味がなくなる
- 記録の置き場所を1か所にする。 複数のドキュメントに分散すると、読み返されなくなる
- 月に1回、記録を見直す日を決める。 次の一手の欄を整理して、次のテストの優先順位を決める
よくある質問
記録はどのくらい細かく書けばよいですか?
6項目(仮説、変更点、期間、見た数字、結果、次の一手)が埋まっていれば足ります。細かく書きすぎると続きません。数字は、後で計算し直せるように、割合だけでなく元の数(PVやCVの件数)も書きます。
差が出なかったテストも記録しますか?
記録します。「差が出なかった」ことも、その仮説を同じ形で繰り返さないための情報です。判定は「判断できず」と書き、訪問者数が足りなかったのか、変更が小さかったのかを一言メモします。
動画を入れる前後の比較も、この表に書けますか?
書けますが、前後の比較は、季節や広告の変更の影響を受けます。備考の欄に、その期間にあった他の変更を書いておきます。可能なら、同時期にあり・なしを比べるテストにします。
ツールは何を使えばよいですか?
表計算ソフトやドキュメントなど、担当者全員が見られるもので足ります。専用のツールを入れる前に、まず項目を決めて数件を書いてみてください。
まとめ
- 記録は、仮説・変更点・期間・見た数字・結果・次の一手の6項目。1件を表の1つの段にする
- 変更点は1つに絞り、CVRは分母も残す。動画のテストでは、動画の内容・置いた場所・話し手も書く
- 差が出なかったテストも「判断できず」として残し、次の一手の欄を次のテスト計画に使う
- エース不動産もKINSも、ABテストで改善を続けている。継続のためには、過去の結果を読み返せる記録が必要
動画を入れたLPのテスト設計や記録の取り方は、資料請求・お問い合わせからご相談ください。
関連記事:動画を活用したLPO/LPO施策の優先順位をどう決める?
テーマ別の記事一覧:動画チャットボット
ブログ記事一覧へ