A/B 測試是將群發訊息分成兩種模式分別發送，以實際數據驗證哪一種更有效的功能。比較文案或訴求不同的兩個版本，將勝出的做法活用到下一次發送。
什麼是 A/B 測試
A/B 測試是將同一則發送分成兩種模式送出，比較開啟率與點擊率的功能。
在模式A（主要）與模式B（次要）設定不同的訊息並發送後，系統會分別彙整兩者的結果。數值較高的一方會顯示為「勝出版本」，因此可以根據數據而非感覺來決定改善方向。
只要知道改變什麼會影響反應，下一次發送的精準度就會提升。建議把分析交給行銷代理，將 A/B 測試作為判斷的依據。
把分析交給代理
發送結果的比較與下一步的規劃，都可以向行銷代理諮詢。
自動模式或諮詢模式的代理，會根據過去的發送數據整理「哪個模式有效」「下次該嘗試什麼」。A/B 測試結果出爐後，問它「這個結果該怎麼解讀？」，它就會提出勝出版本的傾向與下次的活用方式。
代理提出的內容，可透過核准操作決定是否進行。內容滿意就選擇 「執行」，要暫緩就選擇 「先不用了」。想自行細部設定時，請使用下一節的手動步驟。
建立 A/B 測試
A/B 測試從群發訊息的編輯畫面建立。
- 以 「建立新訊息」 建立新的發送，或開啟既有的發送
- 在編輯畫面的 「其他操作」 選擇 「建立 A/B 測試」
- 在確認對話框選擇 「建立」。原本的發送內容會儲存為草稿，成為模式A
- 切換到模式B的畫面，編輯想比較的訊息內容
- 確認內容後，排程或送出發送
模式A與模式B的角色
模式A與模式B可編輯的項目不同。共通的發送條件在模式A這一側管理。
| 模式 | 角色 | 可編輯的項目 |
|---|---|---|
| 模式A（主要） | 作為基準的發送 | 名稱、訊息、發送設定、發送對象、發送者 |
| 模式B（次要） | 用來比較的另一個版本 | 名稱、訊息 |
發送對象、發送時間、發送者等發送設定在模式A設定後，會共通套用到兩個模式。模式B能變更的只有名稱與訊息。
可以測試的元素
A/B 測試比較的是訊息本身的差異。發送對象與發送時機兩個模式共通，因此驗證的主要是「內容」。
| 測試對象 | 比較範例 |
|---|---|
| 訊息文案 | 輕鬆的語氣 與 正式的語氣 |
| 訴求切入點 | 強調限定感 與 強調優惠感 |
| 訊息類型 | 文字 與 圖文訊息 |
| 圖片或按鈕的呈現方式 | 含圖片的圖文訊息 與 純文字 |
一次測試只改變一個元素，結果會更容易解讀。同時改變多個元素，將難以判斷是哪個差異發揮了作用。
查看結果
A/B 測試的結果在發送的詳情畫面查看。
發送後，系統會彙整各模式的數值，反應較好的一方會顯示為 「勝出版本」。兩者沒有差異時，會顯示 「平手」。
| 指標 | 說明 |
|---|---|
| 到達率 | 訊息送達的比例 |
| 開啟率 | 訊息被開啟的比例 |
| 點擊率 | 訊息內連結被點擊的比例 |
| 勝出版本 | 比較指標後成效較高的模式 |
結果也可以在各模式的明細表中查看，包含發送數、到達數、開啟數、點擊數等。
取消 A/B 測試
建立的 A/B 測試可以恢復為一般的群發訊息。
在編輯畫面的 「其他操作」 選擇 「取消 A/B 測試」，在確認對話框繼續操作後，會恢復為沿用模式A內容的一般發送。此時模式B輸入的內容會被刪除。想保留模式B的內容時，請在取消前先複製為另一則發送。
遇到問題時
整理 A/B 測試容易卡關的地方與處理方式。
- 結果沒有差異：模式A與模式B的差異可能太小。除了文案語氣，也可以大幅改變訴求切入點或訊息類型等可能影響反應的元素。
- 模式B有無法編輯的項目：模式B可編輯的只有名稱與訊息。想變更發送對象、發送時間或發送者時，請切換到模式A設定。
- 判斷依據不足：發送對象太少時，即使出現差異也難以判斷是巧合還是實力。以能觸及足夠人數的發送來測試，結果會更可靠。