AppAdhoc A/B Testing客戶案例

用A/B測試持續提升產品

跟誰學首頁改版優化

公司簡介

跟誰學創立于2014年6月,是一家專注于為用戶提供高品質的O2O找好老師的學習服務平臺。作為一款以移動App為主的產品,跟誰學致力于打造人人樂用的學習服務平臺,通過跟蹤每一位學員的個性化需求及偏好,利用海量數據挖掘技術進行精準匹配,幫助學員找到最合適的老師,幫助老師最大化地體現價值,讓學習變得更加容易、平等和高效。 2015年3月30日,跟誰學宣布在創建僅6個月的時間內就完成了5000萬美元A輪融資,估值達到2.5億美元,刷新了中國創業公司A輪融資紀錄。截止2015年10月底,跟誰學入駐老師35萬人,入駐機構4萬家,用戶達到3000萬,在讓產品成為一種生活方式的同時,跟誰學也在全力打造更富活力、更加健康的教育生態圈。

 

案例背景

產品部門分析發現,有高達60%的用戶在到達產品首頁后,只是簡單滑動和少量點擊就離開了App,此部分用戶的流失直接影響了App整體轉化率。為了挖掘這部分用戶的潛在價值,使到達移動端首頁的用戶更加快速、精準的找到自己所需要的課程,產品部門對App首頁做了有針對性的改版,新版首頁大大增加了SKU(商品頁面展示量)。同時,他們希望在新版本正式發布之前,通過對 APP的數據分析 ,用具體、客觀的數據來驗證此次改版對移動端的整體數據表現是否有積極作用。

 

測試方案

AppAdhoc A/B Testing采用科學的試驗流量分割,使得每一組試驗對象具備一致的用戶特征,并在試驗過程中也可以隨時調整用戶流量,使企業可以在新版本上線之前,以最低成本觀察用戶對優化改版方案的數據反饋。同時,根據試驗的數據發現用戶反饋最好的版本,作為最終的新版本迭代方案。

在此次試驗中,產品部門將首頁的內容模塊增強,細化類目入口,強化了優質內容的推薦:改變Banner下方類目顯示邏輯,根據不同用戶的使用身份,針對性展示分類內容;增加了名師答疑、聚會學、直播大廳、精彩專題、精選好課、聚惠學、學習頭條七大內容模塊,多維度增加商品頁面展示量。

1

除此之外,產品部門決定從頁面級考慮優化指標的統計和分析,關注的重點指標為:SKU曝光率(用戶點擊進入SKU頁面的數量比率)、訂單轉化率(用戶訂單總數占總訪問用戶數的比率)。

 

測試目標

通過首頁改版,產品部門希望學員能夠在首頁一覽所有精品課程,并從中發現自己感興趣的課程進行學習,從而減少他們在選擇過程中增加不必要成本。最終,達到增加SKU的目的,實現頁面整體轉化率的提升。

 

A/B測試數據反饋

此次A/B測試在Android和iOS端同時進行,通過AppAdhoc A/B Testing產品的科學流量分割機制,由小到大逐步調整試驗流量。初始流量設置為2%,用于檢驗試驗版本在真實環境下有無缺陷設計以及配置問題。之后根據試驗組在實際運行中采集的數據表現,動態調整流量,試驗周期約20天。

-改版后的產品首頁,用戶點擊量有較大提升(其中iOS端漲幅超過20%),用戶訪問頁面數增長明顯,訪問10個以上頁面的用戶占比顯著增加,SKU曝光率大幅提升。

-在試驗過程中,發現移動端的“精彩專題”點擊次數低于原始版本的數據表現,于是盡快調整了相關試驗方案重新上線試驗,更正后的新版數據表現優于原始版本,及時避免了可能帶來的損失。

鑒于改版后的首頁數據表現良好,產品部門決定通過AppAdhoc A/B Testing在線一鍵發布的功能,將新版首頁推送至所有用戶。

10930 Views
即刻實踐文章理論 A/B測試 灰度發布 產品優化 免費申請
Please wait...

訂閱我們

對于每位訂閱讀者,每兩周,吆喝科技會為您發送4篇精選文章,可能是最新的A/B測試實踐,也會是你所期待的增長干貨。
qq宠物捕鱼大师 麻将技巧视频教学 通比牛牛下载 设计一个稳赚不赔的局 轩彩娱乐app下载 二八杠游戏免费下载 重庆欢乐生肖玩法技巧 鼎龙娱乐是干嘛的 百人牛牛连线 博彩是什么工作 犯法吗 四人麻将在线玩