AppAdhoc A/B Testing客戶案例

用A/B測試持續提升產品

墨跡天氣分享圖標優化

公司簡介

墨跡天氣提供最專業、最穩定的天氣查詢服務,讓人們能夠知曉天氣變化,提前做好出行計劃,更智能的生活。墨跡天氣陸續在Android、iOS、Windows Phone手機平臺推出了國際版,支持196個國家70多萬個城市及地區的天氣查詢,分鐘級、公里級天氣預報,幫助用戶更好做出生活決策。2013年,首創時景天氣——實時天氣照片的眾包平臺。通過智能識別,根據照片信息自動進行天氣信息校正,實現了UGC輔助PGC,PGC指導UGC的良性循環。2014年,墨跡天氣將軟件延伸到硬件,首次發布空氣檢測智能硬件——空氣果,智能硬件讓空氣連接,不僅提供戶外的天氣信息還關心用戶室內空氣質量,室內和室外的結合,將人們的生活場景描述的更加完整化。墨跡天氣通過軟硬結合的方式,將業務由宏觀天氣擴展到微觀的個人家居環境,打造環形移動互聯網生活體驗。2016年,墨跡注冊用戶超過5億,提出并踐行“天氣+”,以氣象大數據為基礎,將天氣作為入口,提供給用戶更多生活化、場景化的服務。

 

案例背景

為了擴大產品的社交傳播,產品部門希望新版本可以增加用戶在客戶端內使用分享按鈕的次數,提高分享按鈕的轉化率。為此他們策劃了三套優化方案,用來驗證哪種分享圖標的樣式效果最好。在決定新版本執行哪個優化方案之前,他們希望有具體、客觀的數據來了解不同方案對分享點擊率的影響,從而做出產品的最終決策。

 

測試方案

AppAdhoc A/B Testing采用科學的試驗流量分割,使得每一組試驗對象具備一致的用戶特征,并在試驗過程中也可以隨時調整用戶流量,使企業可以在新版本上線之前,以最低成本觀察客戶對多個優化方案的數據反饋。同時,根據試驗的數據發現客戶反饋最好的版本,作為最終的新版本迭代方案。

產品部門將策劃的三套優化方案集成到AppAdhoc A/B Testing中,生成了包含3個試驗版本和1個原始版本的 A/B測試 雛形。

方案一:原始版本,分享圖標樣式為兩條直線連接的三個空心圓。

方案二:相比原始版本,分享圖標為圓形由空心變為實心。

方案三:分享圖標為長方形上部空出+向上的箭頭。

方案四:分享圖標為長方形右上角空出+向右上方的箭頭。

%e5%9b%9b%e7%a7%8d%e6%96%b9%e6%a1%88%e5%af%b9%e6%af%94

 

測試目標

此次試驗主要關注在4套的優化方案中,APP主頁中分享圖標的點擊率的變化幅度以及這些改動對分享率的影響,選出數據最優、綜合反饋最好版本作為新版本的迭代方案。

 

A/B測試數據反饋

此次的 A/B 測試放置在小渠道發布,通過AppAdhoc A/B Testing產品的科學流量分割機制,隨機向 4 個方案各分配 25%的流量,試驗持續了兩周(一般來說,為了獲得更加可信的數據結果,試驗運行周期應至少保證1-2個完整的自然周),隨后,各個試驗的數據反饋使墨跡的產品部門立即得到了他們想要的答案。

-方案3最終勝出,相比其他版本,方案3中分享圖標的點擊率上漲了近20%,這對用戶量過億的墨跡天氣來說,是一個不小的提升;

-從整體活躍以及留存角度來看,方案2和方案4相對于方案1的差別不大,沒有很明顯的提升效果;

從本次的試驗過程中,產品部門通過數據的反饋,發現分享圖標為方案3時,可以獲得更多的用戶點擊和分享。

19014 Views
即刻實踐文章理論 A/B測試 灰度發布 產品優化 免費申請
Please wait...

訂閱我們

對于每位訂閱讀者,每兩周,吆喝科技會為您發送4篇精選文章,可能是最新的A/B測試實踐,也會是你所期待的增長干貨。
qq宠物捕鱼大师 nba比分直 刮刮乐刮奖视频 香港2018开奖最快历史纪录 幸运飞艇冠亚组合怎么定 福建时时诈骗团伙立规定 幸运飞艇前五公式 固定规律 吉11选五前三直遗漏 王中王开奖一马中特 安徽快三形态图