師從Google,吆喝科技要支起國內A/B測試市場 | 公司調研

成立兩年的吆喝科技,是國內第一家A/B測試公司,也是一家靠一門手藝打天下的公司。

吆喝科技創始人王曄畢業于清華大學電子工程專業,后進入耶魯大學,主修計算機網絡系統設計及優化。從耶魯畢業后,王曄進入Google廣告質量控制部門,開始深入接觸A/B測試。

當時,國內A/B測試市場尚不成熟,王曄在Google做了兩年之后,意識到國內市場存在巨大商業機會,便回國創立吆喝科技。

魔鬼出在細節里,A/B測試是細節控

以網頁優化來說,A/B測試就是對一個頁面的A版本和B版本進行測試,通過公司自有的互聯網用戶群進行1%、2%、5%、10%等規模的用戶測試,統計哪個版本的點擊率更高,然后選擇測試效果最好的頁面推廣到全用戶群。

A/B測試的優勢在于可以提升產品迭代效率和優化服務體驗。比如APP中的購買選項可以做成大圖標,也可以選擇在菜單中完成。這兩種設計優劣無從知曉,但是通過A/B測試,可以讓一部分用戶看到按鈕,一部分用戶看到菜單,也就是一款App的A版本和B版本。通過對比兩個版本的用戶行為,得到更滿足用戶體驗的產品。

如果某些改動可實現每月約2%的營收提升,年化提升就是20%。

商業化起步,強調數據價值

吆喝科技是目前公認的國內A/B測試領先者。公司自2014年開展業務以來,注冊企業已超過650家。能夠提供Web端和移動端的A/B測試服務,服務行業涉及教育、醫療、金融、互聯網。按照王曄的說法,凡是通過互聯網來提供服務的公司,都能夠使用吆喝科技的A/B測試產品。

通過SDK與API接口,用戶能快速接入吆喝科技產品,而在A/B測試之外,吆喝科技還提供更定制化的高級功能以及咨詢服務,提高數據服務的價值也是公司未來的方向。

在商業化上,吆喝科技的成果已經初步顯現。在2015年4月,吆喝科技上線最早的α版本,2016年2月上線免費的AppAdhoc A/B Testing 1.0版本,5月上線收費版AppAdhoc A/B Testing 1.2版,按照調用API次數向企業收費,正式開啟商業化路徑。

目前公司還處在產品打磨階段,45人的團隊其中大部分是研發人員,其中銷售6人,在推廣上還是以用戶口碑推廣為主,大客戶輔以線下推廣。

創始人王曄表示,目前已經積累起數十家的付費用戶,其中包括客單價在50萬/年的客戶,并預期在明年營收能夠達到數千萬元。

源自谷歌,巨頭參與其中

其實A/B測試源自Google。在2007年前后才產品化,后來慢慢逐漸為很多的互聯網企業所使用,Facebook、Uber、Airbnb都使用A/B測試。

Google是A/B測試領域的先行者,A/B測試的理念更是廣泛的用于Google的產品策略中——幾乎每一個產品目錄都有多個項目在互相競爭,這樣,即使一個產品失敗了,也有另一個(或另幾個)產品能夠補上。Google產品新功能上線都要經過嚴格的A/B測試。

Facebook從2011年開始進行A/B測試技術系統的搭建,到現在,Facebook可以實現每一次的改版對于多數的用戶的良好體驗,其根本的方法就是通過小流量的A/B測試,將效果好的改動廣泛推廣,將效果不佳的改動立刻放棄。

以上兩家巨頭可以自己搭建A/B測試服務,但是中小企業自身沒有這個實力,只能選擇第三方提供服務。

對標公司Optimizely估值已達7億美金

Optimizely與VWO(Visual Website Optimizer)是其中的佼佼者,尤其是2010年成立的Optimizely,已經成為行業的領頭羊。

2015年10月,Optimizely完成5,800萬美元的C輪,由Index Ventures領投,跟投方包括Andreessen Horowitz、Bain Capital Ventures、Benchmark Capital和Salesforce Ventures,估值區間在6-7億美元。而其上一輪融資在2014年4月,估值3.8億美元,一年半時間估值翻一倍,顯示市場對其認可。

最早,Optimizely做Web頁A/B測試,主打操作可視化,目前業務已經覆蓋至移動端。

2013年,官方表示收入超過千萬美元,其中80%收入來自大企業客戶,這部份客戶客單價在1,500美元/月以上,多的可以達到10,000美元/月;剩余20%左右來自中小客戶,這部分客戶客單價在幾十到幾百美元每月不等。

雖然國內市場還處在早期,大部分中國公司還不知道A/B測試,但是A/B測試已經開始引起行業注意,最明顯的是,目前蘋果AppStore產品上線審核需要一周的時間,傳統發布方式一旦新版本出現錯誤,更新需要投入大量資源,而A/B測試的小流量測試是極佳的解決方案。

隨著人口紅利的消失,精益理念的普及,企業在獲取用戶之外,會更加注重細顆粒度的管理,A/B測試這樣提升服務效率與服務質量工具性產品的價值將逐漸得到凸顯。

近期,愛分析與吆喝科技創始人王曄進行訪談,部分訪談分享如下:

Q:國內A/B測試市場處于什么階段?

A:即便從全球范圍內來說,A/B測試也是一個年輕的技術,而有能力自己完成A/B測試的企業很少,技術難度比較高,系統也很復雜,技術比較出色的公司,他們的技術團隊常常會用A/B測試檢測自己的算法,但很少有公司能上升到企業決策層面。

目前,大部分的企業還是把A/B測試用在核心技術層面,而在產品新功能、促銷、推送等方面相對比較薄弱,數據統計科學性也會受到一定挑戰 。

Q:可以實現哪些功能?

A:應用領域包括UI設計、功能設置、算法設計等。

用戶在控制臺創建很多“試驗版本”,每個試驗版本可以嘗試不同的UI設計和文案。客戶可以在控制臺管理不同試驗版本的試驗運行狀態、流量分配以及查看詳細的數據報告,并選擇發布效果更好的試驗版本。

Q:A/B測試與APM有哪些不同?

A:APM是對應用訪問速度,響應時間,承載能力等的檢測,A/B測試更加關注的是針對業務指標的測試和優化,比如不同版本的點擊率、轉化率等等。總結來說APM的核心是產品可用性數據累積和分析,而A/B測試則偏產品易用性。

APM廠商固然有他們的優勢,他們解決開發者的后顧之憂。而我們做的事情恰恰相反,是輔助開發者,所以開發者需要充分利用這個平臺。

Q:怎么應對未來的競爭?

A:競爭肯定會有,誰能脫穎而出,就看誰的產品、服務更好。目前市場仍然處于早期,我們的優勢在于我們在這個行業內已經積累了一定的經驗,而技術方面也存在一些門檻。同時在完善提高產品的同時,我們的客戶成功服務也將是我們最大的競爭力。

Q:A/B測試代表的先驗數據與后驗數據的區別?

A:先驗數據是在一個決策完全實施以前就能得出它實施后的效果數據。后驗數據是時間發生后通過總結和歸納得出重要的結論。先驗數據對企業決策更有用,特別是在瞬息萬變的互聯網時代,決策的時效性更加重要。

Q:吆喝科技的收費方式?

A:吆喝科技按月收取付費費,目前是根據企業使用后端API調用資源來收取。另外還包括高級功能付費以及咨詢付費。

Q:目前的客單價水平?

A:目前是在1萬元/月的水平。

 

吆喝科技:國內唯一同時支持前端(Web/H5、iOS、Android)及后端(Node.js、PHP、Java 等) A/B 測試服務的專業 SaaS 平臺。支持線上灰度發布、多維度數據統計分析、科學的流量分配系統、一鍵發布新版本無需應用市場審核、定向測試。

 

用數據幫助用戶優化產品,提升轉化、留存和你想要的一切。 AppAdhoc 用數據驗證最佳方案,提高產品設計、研發、運營和營銷效率,降低產品決策風險。

3903 Views
即刻實踐文章理論 A/B測試 灰度發布 產品優化 免費申請
Please wait...

訂閱我們

對于每位訂閱讀者,每兩周,吆喝科技會為您發送4篇精選文章,可能是最新的A/B測試實踐,也會是你所期待的增長干貨。
qq宠物捕鱼大师 意大利pk10心得 捕鱼达人2最老版本 pc蛋蛋网页计划 东财app 麻将二八杠技巧口诀 幸运飞艇前二前三技巧 pk10免费计划app 那种福彩要玩大小单双 快速时时走势图 皇冠比分网即时比分