LINE公式アカウントのA/Bテストのやり方｜終了後の代替手順

代わりの手順——絞り込み配信を分けて使う

LINEヤフー社は、終了の案内の中で「既存の機能と設定を利用して、A/Bテストに近しい配信を実施できる」として手順を示しています。中身は絞り込み配信を回数で分けるというものです。2案を比べる場合は、配信が3回になります。

1. 文面Aを、一部の人に送る。配信先を「絞り込み」に設定し、比較の基準になるほうを先に配信します
2. 1で送った相手を除外して、文面Bを送る。配信先「絞り込み」＞「過去の配信」で、1の配信を指定して対象から外します
3. （3案目を比べるなら）同じように、これまでの相手を除外して送る
4. 反応が良かった文面を、残り全員に送る。ここでも、これまでに送った相手をすべて除外します

肝は2番目です。除外を忘れると、同じ人にAとBの両方が届きます。比較にならないうえ、その人に2通ぶんの通数がかかります。通数の数え方はLINEメッセージの「1通」の数え方にまとめています。

付いてくる条件は3つ

この手順には、知らないと必ず詰まる条件があります。始める前に自分のアカウントで満たせるかを確認してください。

加えて、「過去の配信」として選べるのは、絞り込みを設定して送った配信だけです。ここが最大の落とし穴で、1通目を「すべての友だち」宛てで送ってしまうと、2通目で除外する相手を指定できません。比較を始めると決めた時点から、1通目を絞り込み配信にしておいてください。

未認証アカウントの場合は、先に認証を申請するか、タグで対象を分ける方法に切り替えることになります。認証済アカウントの位置づけと申請はLINE公式アカウントの認証済アカウントとは、絞り込みの作り方そのものはLINEセグメント配信とは？やり方と活用例を参照してください。

始める前に決める3つ

手順よりも先に決めておくことがあります。ここが曖昧なまま送ると、結果を見ても何も決められません。

• 何を比べるかを1つだけ決める（文面か、画像か、時間か）
• どの数字で勝ちとするかを先に決める（後述しますが、基本はクリック率）
• いつ判定するかを決める（配信の24時間後、など）

3番目が抜けると、「もう少し待てば逆転するかも」と判定が先延ばしになり、2週間の期限を過ぎて本配信ができなくなります。判定の時刻を、配信を作るときにカレンダーへ入れてしまうのが確実です。

比べるのは、1回に1か所だけ

文面も画像も配信時間も変えたBを作ると、勝っても負けても理由が分かりません。変えるのは1か所にしてください。それ以外はまったく同じにします。

配信時間を比べる場合だけは注意が必要です。同じ日に12時と20時で送ると、20時のグループは「その日の出来事」の影響を受けます。時間帯の比較は、曜日をそろえて別の週に行うほうが読みやすくなります。頻度と時間帯の考え方はLINE配信の頻度と時間帯にまとめました。

何人ずつ送れば、差を読めるのか

ここがいちばん誤解されるところです。50人ずつ送って「Aは4人、Bは2人がクリックした。Aの勝ち」と決めてしまうと、多くの場合はただの偶然を読んでいます。人数が少ないほど、同じ内容を2回送っても結果はばらつきます。

これはあくまで実務上の目安です。厳密に判定したい場合は統計の検定が必要ですが、店舗の運用でそこまでやる必要はありません。「僅差は引き分けとして扱い、次のテストに進む」と決めておけば十分です。

そして、友だちが数百人に満たないうちは、比較よりも先にやることがあります。母数が小さい状態で文面を磨いても、読み取れる差が出ないからです。まずは友だちが増えない原因の切り分けと、実際に届いている人数（ターゲットリーチ）の確認を先にしてください。配信の内容そのものに手応えがない場合は、LINE配信の反応がないの切り分けが先です。

勝ち負けは「クリック率」で決める

LINE公式アカウントには、メールのような「開封」の指標はありません。読まれたかどうかを直接は測れないため、実際に動いたかどうかをリンクのクリックで測ります。

• クリック率——比較の基本。リンクを1本だけ入れておくと、読み取りが単純になります
• その後の行動——予約数・来店数・注文数。数は少なくても、いちばん意味のある指標です
• ブロック数——短期の反応が良くても、ブロックが増えていれば失敗です。必ず同時に見てください

指標の定義と見る順番はLINE配信の開封率とクリック率、運用全体で見る数字はLINE運用で見るべき数字7つにまとめています。

結果は1行で残す

1回の比較で分かることは、それほど大きくありません。価値が出るのは記録が溜まってからです。次の6項目を1行で残してください。

• 日付
• 比べた場所（最初の1行／画像／ボタンの文言など）
• AとBの内容（実際の文言をそのまま）
• それぞれの配信人数
• それぞれのクリック率とブロック数
• 採用したほう（引き分けなら「引き分け」）

10回ぶん溜まると、「自店の客は数字より具体名に反応する」「画像を入れると押されない」といった傾向が見えてきます。これは他店の事例では代わりになりません。配信のネタ出しは配信ネタの作り方にありますが、どれが効くかは自店のこの記録が決めます。

よくある失敗

最後の1つは、比較以前の話です。送る前にテスト送信で自分の端末に届かせ、表示とリンクを確認してください。送ってしまった場合の取り消しの範囲はLINE配信の誤送信は取り消せる？にまとめています。

よくある質問

管理画面をどれだけ探してもA/Bテストが見つかりません

探しても出てきません。2025年3月5日に提供が終了し、同月26日には分析画面の項目も削除されています。プランや権限の問題ではないため、この記事の絞り込み配信の手順に切り替えてください。

未認証アカウントでもできますか

「過去の配信」での絞り込みは認証済アカウントとプレミアムアカウントで利用できる機能です。未認証の場合は、先に認証を申請するか、タグであらかじめ2つのグループを作っておき、それぞれに送る形に置き換えてください。グループの作り方はセグメント配信にあります。

2回に分けると、通数は2倍かかりますか

かかりません。通数は「届いた人の数」で数えます。100人を50人ずつに分けて送れば、合計は100通で、全員に1回送った場合と同じです。ただし除外を忘れて同じ人に2通届けば、その人のぶんは2通として数えられます。

ステップ配信でも比べられますか

同じ考え方は使えますが、途中で文面を差し替えると、前に登録した人と後から登録した人で条件が変わり、比較になりません。ステップ配信では1通ずつ、一定期間ごとに区切って比べるほうが確実です。分岐の作り方はLcallでステップ配信を作る手順にまとめています。

何回くらい続ければ意味がありますか

月1回でも構いません。大事なのは回数よりも記録が残っていることです。毎回思いつきで変えて記録を残さない運用を1年続けるより、月1回でも6回ぶん残っているほうが、自店で効く型ははっきりします。

勝ったほうの文面を、次回もそのまま使っていいですか

同じ文面を繰り返すと、そのうち反応が落ちます。勝ったのは文面そのものではなく「その考え方」だと捉えてください。「具体的な数字を入れたほうが押された」なら、次回は別の数字で作ります。

LCALL（自社サービス・PR）では、配信・シナリオでタグや行動をもとに宛先を絞り込み、「前回この配信を送った人」を外して次を送る形の配信を作れます。誰にどの文面を送ったかは友だち・顧客管理に残るため、除外の指定を手で管理する必要がありません。クリックされた後の質問は受信箱にまとまり、よくある質問はAI自動応答が一次対応します。配信・シナリオ・タグ・受信箱・AI自動応答はLite（月額9,800円）から標準搭載です。プランの内訳は料金ページ、「何をどう比べればいいか」の設計からのご相談は無料相談で承ります。

まとめ

• A/Bテスト機能は2025年3月5日に終了。管理画面に無いのが正常
• 代わりは絞り込み配信を分けて使う。2案なら配信は3回
• 1通目から絞り込みで送る。全員宛てにすると除外できない
• 条件は3つ——1回50人以上・認証済（またはプレミアム）・2週間以内
• 変えるのは1回に1か所だけ。2か所変えると理由が分からない
• 母数が小さいうちは2倍以上の差だけを差として扱う
• 勝敗はクリック率。ブロック数を必ず同時に見る
• 価値が出るのは10回ぶんの記録が溜まってから