國內測試行業的市場規模非常大,可放眼望去,競爭公司除了BAT旗下的測試平臺、Testin和testbird之外,似乎很難再找到一家叫得響的公司。主要原因是測試行業技術門檻比較高,投入成本過大。但移動客戶端測試用戶需求很多,用戶痛點亟待解決。
7月5日,品途商業評論主辦,清華軟件創新創業聯盟協辦了“2016ESIC企業服務創新大會”。騰訊優測運營總監周海峰參加了本次大會,參與了議題為“從變現的角度探討企業級服務市場里的那些邊界和底線”的圓桌對話,會后品途商業評論就移動客戶端云測試領域的一些問題對周海峰進行了專訪。以下是專訪內容:
測試行業的用戶痛點非常多
品途商業評論:您認為現在的測試行業都有哪些痛點呢?騰訊優測這邊如何解決的?
周海峰:國內移動數據服務商QuestMobile發布的《2015年中國移動互聯網研究報告》,報告顯示:截止到2015年12月,國內在網活躍移動智能設備數量達到8.99億。理論上來講每個APP都是需要跟硬件去做適配性測試,如果不做好軟件和硬件的適配性測試,用戶用的不爽,核心功能出現兼容性問題,用戶直接就卸載。
第二,現在的App開發,這一塊是特別火。在國內每年app數量還在快速增長,并且同類型App非常競爭很激烈。比如說電商類App就非常多。產品質量不過關,談何體驗?騰訊優測09年就在產品質量上進行探索,通過服務內部產品進行打磨,內部打磨產品打磨了4年,去年7月份的時候騰訊把這個產品往市場上推。
第三,很多企業沒有開發APP,只做微信公眾號,如何提升微信公眾號的體驗,微信公眾號測試是需要微信的代碼的,這塊外部企業基本拿不到的。騰訊優測屬于騰訊的產品,在這塊具有天然的優勢。
第四,有很多企業對移動客戶端這塊很重視,但是,對于創業團隊來說硬件設備購買是一項非常大的投入。針對這個問題,我們做了一套云手機平臺,用戶可以做遠程的真機租用,不是模擬器,是實在的真機。優測是國內最早推出這項服務來的,行業機型最多,超過2000款。用戶可以在web端進行真機遠程調試,價格非常優惠。
第五,很多企業特別是創業團隊,開發資源很緊張,測試團隊測出來一堆問題,交給開發更改,開發同事告訴您,排期吧,迭代周期很長。針對這塊的用戶痛點,優測可以派騰訊的適配專家,帶真機上門幫助用戶解決問題。
品途商業評論:騰訊優測的主要服務行業都有哪些?服務流程是怎么樣的?
周海峰:騰訊優測主要服務于App、微信公眾號、游戲測試和H5測試。騰訊優測的服務流程是:
第一,先是給用戶做標準化兼容性的測試。包括產品的啟動、安裝、卸載,深度遍歷等環節;
第二,深度兼容性測試,對于很多app業務的獨特性和復雜度都是需要定制化的進行腳本開發,包括測試方法都是有針對性的。首先,分析評估企業產品功能涉及到的系統功能,根據市場大數據統計分析,有針對性的開發出檢測用例,做到精準測試。這是基于騰訊移動端產品多年積累的數據庫的,比如說什么問題出現最多;例如:你是電商行業,游戲行業,可能出現問題最多的是相機問題,圖像問題,金融行業產品這類問題就少很多。其次,我們會選取使用人數TOP 300,機型覆蓋用戶80%以上的下載機型,活躍用戶top100的機型列表,覆蓋企業產品90%以上活躍用戶。適配用例,將其中可自動化的部分開發出對應功能的自動化運行腳本。固定周期在所有真機上運行自動化腳本,測試app功能的可達性及穩定性。每個版本開發階段,提前與主線溝通需求,增量更新腳本。再次,剝離出的無法自動化的場景用例,由騰訊測試專家進行人工補全,保證核心功能路徑的全面覆蓋。最后,檢測專家進行定制化場景需求專項檢測,包括:交叉測試,場景測試和性能測試。
第三,報告提交后,開發專家幫助用戶分析報告,如果有需求的話,騰訊優測可攜帶真機到現場修正問題,讓企業的開發人員的工作更聚焦到產品本身,無需分散過多的精力到產品質量。
第四,當然如果用戶需要私有化部署的話。騰訊優測具有一套輕量級的小型實驗室,支持現在市面上主流的自動化測試框架和騰訊自研的框架,能夠讓客戶自主的發起任務,這是對于服務的一種持續集成方案的補充。
品途商業評論:是不是各個垂直行業,如視頻、電商、游戲,對測試的要求都不一樣?
周海峰:各個行業有不同的需求。測試的重點不一樣。比如說電商類的交易和展示,游戲類的流暢度,視頻類的卡頓、音視頻同步問題等等。因為我們是做云測試,整個架構都是在云端,所以,我們盡量做標準化。針對一些特殊的點,會做功能點的專項測試。舉一個例子,電商企業的APP,圖片非常多,非常多的問題是UI這一塊的適配測試,比較的復雜。現在我們的競爭對手基本是人工服務,圖片非常多,甚至上萬張圖,這個很麻煩,對于人工來做的話是很災難的工作,工作強度和周期是非常可怕的。我們怎么做呢?UI自動化對比技術,先自動化對比一遍,對腳本每步的UI界面進行UI自動化對比技術,把一樣的UI問題匯總一起,加上人工輕量的比對,然后再進行整理分析。
騰訊優測的立足于騰訊平臺,滿足服務多樣化客戶需求
品途商業評論:騰訊優測立足于騰訊平臺有什么不一樣的優勢和不足嗎?
周海峰:騰訊優測是從騰訊內部產品開始孵化的平臺,通過服務公司內部的上億級產品的適配和兼容性工作,很好的驗證和打磨了平臺能力,目前優測支撐了公司內部的包括手機QQ、QQ瀏覽器、微信、手機管家等二十多個產品的機型適配服務。這些上億級產品的產品的檢驗,使得優測可以更好的服務于外部客戶。還有就是公司在資金投入、品牌、專業人才資源的支持這些都是強于競爭對手的。除了內部產品外,現在平安銀行、光大銀行、泰康人壽、大商所、匯豐銀行等的金融和保險企業的APP測試,玩蟹科技、掌趣等手游測試都在使用騰訊優測。
不足的話,優測一直專注于產品的打磨,一直比較低調,可能后面要多加強品牌的傳播。
品途商業評論:騰訊優測現在下一步重點工作是什么呢?
周海峰:第一,我們是在追求對用戶體驗分析和設計,這個一直沒有停止,用戶行為路徑分析,產品可用性分析,用戶體驗分析,在我們官網和產品上,用戶行為路徑什么樣子,用戶的體驗和感受,這個是從來沒有停止過(關注);
第二,我們現在線下的市場品牌知名度比較小。外面都是沒有聽說過騰訊優測,大家更多的就是知道我們的競爭對手。跟我們的重心有關系,我們之前一直在打磨產品,所以后面會重點做一些品牌上的事情;
第三,重視跟用戶溝通,現在我們的用戶需求到底是怎樣的?我們跟他們溝通過程當中推出了私有化部署云實驗室工具TMOS。我們(需要)更多跟用戶溝通交流,反饋到我們產品層面上,促進產品改進。我們現在的展會、沙龍活動我們技術同事都會參加。
測試行業市場規模龐大,可公司就那么幾家
品途商業評論:測試行業的公司好像并不多。
周海峰:現在是這樣的。阿里的MQC、百度MTC、騰訊優測,BAT之外這個行業的比較有知名度的還有兩家。
品途商業評論:為什么這個行業只有這幾家?
周海峰:第一,投入成本非常高,因為需要大量的硬件的設備,機房建設、網絡設備的采購,人員的維護和場地的成本;騰訊優測就用了3層樓建設了真機實驗室;第二,幾千款手機的物理實驗室的建設,會有很多硬件相關的問,其次在軟件層要在這些硬件上面進行自動化,完成特定任務,實驗結果自動化,技術壁壘很高。壁壘高參與競爭就少了。
品途商業評論:您怎么看整個測試行業?行業競爭情況如何?
周海峰:這個行業是這樣的。我看到了一個產業觀察報有個數據,2017年軟件行業達到4千億人民幣規模,測試行業達到2千億。所以,行業規模還是足夠大的。現在有一些知名度的企業是5家。當然有很多比較小的(測試公司)。
這個行業競爭很激烈的。在一次招標上,原來我們行業里面基本知道大家大致的成本價格?招標的時候,超低價招標,就打亂了整個市場的規則。這種確實就是不理性,如果投標企業在沒有利潤的情況下向客戶提供服務,服務質量很難去保障的。我們也希望這個行業也有自律的組織,一起去約束和規范這個市場,讓云測試領域更加規范化。
品途商業評論:比較有影響的就只有5家,各自做各自的市場,為什么還要低價競爭?
周海峰:是這樣一個情況。現在還是測試這個行業是甲方市場,所以,我們給他提供服務,他可選擇很多。對企業客戶來說,幾個測試服務提供商的服務的核心功能上差異不大,然而,每個客戶的客單價都比較高,所以,每家測試服務的提供商都是每個客戶盡全力去爭取。企業服務,不要打價格戰,價格戰的結果是最終都沒有錢賺,沒有意義。真正提供優質的服務落地,讓企業客戶受益,企業客戶是愿意為優質服務買單的,而不是短期變現去做短期的低價奪標的事情。
品途商業評論:您覺得創業公司在云測試領域創業的機會點在哪里?
企業客戶考慮自動化測試更多的是看服務提供方的服務如何落地還有服務能力。舉一個例子,私有化部署不是誰都是可以做的。私有化部署之后,除了硬件部署之外,后面的維護,這一塊的技術能力難度很大。因為企業業務和產品不斷地更新,有些很貼近具體企業業務的還需要深度的定制化開發,確實是有門檻的。我認為自動化測試服務領域的的創業機會比較渺茫了。
但是,我覺得工具領域還是有機會的。企業里面干測試都是很苦逼的,如果能夠很好的抓取企業測試人員的痛點,讓這種重復的工作變得簡單,還是有機會的。