A/B測試在推送中的應用
A/B測試在各類網站設計中已經是比較常見的,本文著重講講A/B測試在應用推送領域的作用,這里包括安卓推送,iOS推送等。
目前國外開通A/B測試的推送服務商只有swrve,而國內的消息推送技術服務商個推也在前不久發布的2.0 產品Smart Push中集成了A/B測試的功能。
小編聯系到個推相關的負責人,拿到了一個測試賬號,用實際的操作詳解A/B測試在推送中的作用。
個推的Smart Push需開通相應的服務才能使用,其中包括智能推送(給用戶打上標簽)、A/B測試等功能。
登陸個推開放平臺后,在智能推送中找到了新建A/B測試的入口,點擊后進入如下界面。
小編首先進行的是針對同類人群對于不同文案的測試。選擇應用,確定推送時間配置完成后,勾選A、B目標用戶屬性相同,這時可進一步劃分用戶的屬性,比如根據給用戶打上的Tag來劃分,或是根據智能標簽分組,小編選擇的所有用戶,設置測試的人數及比例后點擊下一步:推送詳情。
在推送詳情中,可選擇透傳/打開應用/啟動應用三種動作,小編選擇的是啟動應用,通知標題和內容做了兩種不同的文案,一種是滿100-10,另一種是滿150-15,這里的目標僅僅是通過不同的文案測試用戶的點擊轉化率,而并沒有在應用中做實際的活動頁面。點擊完成即可發送該推送。
之后自動跳轉到A/B測試列表,這里可以看到歷史推送記錄的詳情和報表。
通過報表我們能清晰的看到兩種文案的統計數據,便于我們進一步的分析和修改文案。
另外,除了對相同人群進行A/B測試,也可以進行相同的文案對不同用戶的測試。小編又新建了一個A/B測試,A組根據智能標簽選擇了三省(注:東三省)的用戶,B組選擇了浙江標簽的用戶。
點擊下一步后可以設置具體的推送信息,由于是推送相同的文案,因此在B組推送詳情中勾選“與A組設定完全相同”,然后設置好A組的文案后點擊完成即可發送。同樣也可以在推送的報表中看到這個文案對于兩類用戶的反饋數據。
結語:A/B測試在推送中的應用非常廣泛,結合推送服務商提供的智能推送標簽等功能可將推送的分組做到更多的細分。提前進行小規模的A/B測試,對于擁有龐大用戶量的應用非常重要,根據反饋調整推送文案,隨后再進行大規模的推送,將比不做A/B測試就直接推送可靠許多。A/B Testing在幫助精準推送方面起了巨大作用,個推在這一技術上是處于領先地位的,希望國內其他推送服務商也能盡快提供A/B測試的功能,共同將推送服務做得更好更準,同時也能拯救很多產品運營人員。