近幾年,呈現(xiàn)于市場之上以及用戶面前的手游產(chǎn)品越來越精品化,而在精良游戲畫面之外,是一串串龐大的數(shù)字,動輒百萬千萬的投入成本、營銷成本以及大量人力財力物力投資的背后,開發(fā)者卻往往忽略了其中一項——測試環(huán)節(jié),甚至可以說現(xiàn)在行業(yè)內(nèi)大多數(shù)人還沒有測試這一概念。正如龍虎豹近期走訪Testin云測聯(lián)合創(chuàng)始人張鵬飛,他所講的:“手游測試就像我們現(xiàn)實生活中的體檢一樣,經(jīng)常會被人有意無意地忽略掉,測試和體檢一樣,需要重視。不少人還沒有這個意識主動去檢查,這并不是一種常態(tài)?!鄙踔梁芏郈P認(rèn)為省去測試的成本就能為產(chǎn)品的開發(fā)省去一大筆錢,殊不知,往往所以為的節(jié)儉卻變成了最大的浪費。

手游測試已成趨勢,CP意識需轉(zhuǎn)變
在當(dāng)下的手游市場,產(chǎn)品發(fā)布之前往往要經(jīng)過內(nèi)測、公測等多個環(huán)節(jié),邀請玩家內(nèi)測等測試方式也屢見不鮮。但即便如此,手游產(chǎn)品在推出之前要先經(jīng)歷Q&A測試這一環(huán)節(jié)也并不是被所有開發(fā)者都接受或重視。談及這一原因,張鵬飛認(rèn)為多數(shù)的CP對于測試的理解存在誤區(qū),主要基于兩方面原因:第一,意識問題。CP往往沒有意識到手游測試這一環(huán)節(jié)的必要性以及在其后的產(chǎn)品盈利過程中的重要性;第二,多數(shù)的CP認(rèn)為測試需要相當(dāng)高的成本,往往自己將產(chǎn)品進行人工測試后就結(jié)束這一環(huán)節(jié)。
面對這樣的誤區(qū),張鵬飛將其歸結(jié)為人的逃避性。“就像我們每一年的體檢,如果不是公司的催促,我們也不會主動去。這就是人的天性,會無意識或有意識忽略掉一些事情,減少工作量?!?/p>
面對競爭激烈的手游市場,CP忽略掉的并非是測試這件事,而是當(dāng)下手游市場嚴(yán)苛的環(huán)境以及復(fù)雜的形態(tài)。如今早已不是開發(fā)者掠奪資源的藍海期---玩家可以包容游戲所出現(xiàn)的問題。移動互聯(lián)網(wǎng)發(fā)展到現(xiàn)在,對于玩家而言,儼然已經(jīng)是“帶著挑剔的眼光下載,隨著易變的心情卸載”的狀態(tài)。而這種環(huán)境對于CP而言,意味著用戶導(dǎo)入成本會越來越高,而這也是張鵬飛一直強調(diào)的,在這種環(huán)境下,手游測試就顯得更加有意義和必要性。
“測試的目的是什么?測試的目的就是為了當(dāng)產(chǎn)品發(fā)出去以后,玩家拿到的是一個精品,一個沒有問題的瓷花瓶?!?/p>
采訪過程中,張鵬飛不止一次強調(diào),現(xiàn)在有些CP對于測試的認(rèn)識并不是一種“常態(tài)”。對于開發(fā)者而言,他們更看中游戲上線后的表現(xiàn),測試這一環(huán)節(jié)根本不在考慮范疇。而手游測試部門在CP眼中的地位在張鵬飛看來多少有一些尷尬。“產(chǎn)品做得好就是產(chǎn)品本身給力,產(chǎn)品一旦出了問題或崩潰,老板一定是責(zé)問測試是怎么做的。但我個人并不認(rèn)為這是正常現(xiàn)象,從行業(yè)的角度來講,這是一種不成熟的表現(xiàn)。”張鵬飛如是說。
獲取用戶的手段有千萬種,但用戶的流失卻在不經(jīng)意間?!艾F(xiàn)在用戶從一款游戲中流失太容易了,隨便一點,就卸載了。很多開發(fā)商都在談用戶流失,但是其實他們根本不知道也不關(guān)心用戶流失的真正原因。我的一個特別舍得在手游上花錢的朋友在用手機玩一款游戲的過程中,由于其性能不佳,導(dǎo)致半小時不到,手機就很燙,很影響他的心情,到最后不得不退出,沒過多久他就在這款游戲中流失了。他說玩得很爽,但就是手機太熱了,想在游戲中消費都沒辦法。我覺得很可惜,因為很可能一個大R用戶就這樣流失了。但是開發(fā)商不知道,這只是一個小問題,電量及電池溫度Testin也可以測,就是監(jiān)測如何讓這個游戲更好地去消耗系統(tǒng)資源以及不過分去消耗系統(tǒng)資源的能力?!睆堸i飛感嘆道。
手游測試其實并非近一兩年才有的概念,而對于Testin云測來說,手游測試這一服務(wù)最早其實可以追溯到2011年。
張鵬飛透露,Testin云測從2011年開始就提供手游測試的服務(wù),彼時手游市場規(guī)模不大?!爱?dāng)時寶開《植物大戰(zhàn)僵尸》也是由我們來測試的,包括后來《捕魚達人》、《二戰(zhàn)風(fēng)云》,之后的《保衛(wèi)蘿卜》《刀塔傳奇》和近期的《夢幻西游》以及《有殺氣的童話》等?!痹谂c龍虎豹的交談中,張鵬飛表示,這些產(chǎn)品之所以能夠在市場上獲得成功和用戶的認(rèn)可,與這些產(chǎn)品公司創(chuàng)始人對于以服務(wù)用戶為先的意識不無相關(guān)。提及這些產(chǎn)品的成功,不得不說與對高端機型用戶以及低端機型用戶全部覆蓋有著莫大關(guān)聯(lián),而這些機型的覆蓋,測試又是其中最為重要的一環(huán)。
“我發(fā)現(xiàn)這些企業(yè)能夠成功是有原因的,很重視服務(wù),他們會為用戶負責(zé)。在那段時期,你會發(fā)現(xiàn)做得比較好的游戲,都比較重視產(chǎn)品的質(zhì)量。他們知道玩家下載一個100兆左右的產(chǎn)品真的是對產(chǎn)品有期待,但是一旦下載到手機上安裝不了或者出現(xiàn)任何的問題,對用戶的傷害真的很大。”
你以為的節(jié)儉其實是最大的放縱
正如前文所提到的,現(xiàn)在有些CP對于手游測試的理解還存在一定的誤區(qū),總是會將測試與花大錢畫上等號,這在張鵬飛看來,是一種誤解。
張鵬飛透露說,他也曾經(jīng)問過一些開發(fā)者不進行測試的原因,多半的回答是成本規(guī)劃?!拔艺J(rèn)為這個誤解是真要改善的。過去大家都是講先生存下來,現(xiàn)在應(yīng)該想的是如何讓產(chǎn)品的質(zhì)量提升?!?/p>
不少CP還沒有完全接受手游云測試這一概念?!昂芏嗳苏J(rèn)為測試完全可以自己做,往往覺得招幾個實習(xí)生,大概買幾臺設(shè)備,自己做一下人工測試就可以節(jié)省測試成本。另一些人則認(rèn)為測試不用自己來做,快速迭代,把beta版送給用戶去做。”而這在張鵬飛看來卻是問題的癥結(jié)所在,“首先沒有人會愿意成為你游戲bug的受害者,其次你感覺省了錢,但你所面臨的問題有可能會更大。當(dāng)游戲馬上要過千萬流水的時候突然崩掉了,崩得很慘烈,然后你的產(chǎn)品可能就不值錢了。這些損失的錢比起在前期做一些必要的測試要昂貴得多,這個代價是不能比的。所以我覺得那句話非常好玩:‘你以為的節(jié)儉,其實是最大的放縱’?!?/p>
而CP自己進行測試環(huán)節(jié)在張鵬飛看來存在三點問題。
第一,建立自己的測試隊伍意味著要承擔(dān)很大一部分的人力以及硬件設(shè)備成本。按照張鵬飛所言,設(shè)備的更新?lián)Q代速度之快讓CP難以想象,如果想要跟上市場的步伐,意味著這一部分的成本將大大提高,而人力測試其難以想象的痛苦往往也阻礙CP自我檢測的過程;
第二,測試的準(zhǔn)確性難以保證。張鵬飛透露,缺乏真實環(huán)境和用戶的測試遺漏環(huán)節(jié)高達20-50%。“機器的效率遠高于人工。計算機以統(tǒng)一格式真實地記錄整個測試過程。比如一個游戲,它在哪里崩掉了,測試可以截圖,精確到毫秒。但人卻記錄不了這個事情,只能記錄在哪個環(huán)境下發(fā)生這個問題,到底是第幾秒也不能很快知道。除此之外,機器還可以分析錯誤發(fā)生前后的代碼部分,很容易去排錯。但是人力很難做到這一點,要去看日志,要對圖,這無形中加長了周期。當(dāng)然,機器就是機器,不會有情感測試,它不會說你的圖好看與否,但是它檢測出來的Bug或者問題是一定存在的?!?/p>
第三,耗費時間成本,以至于會影響產(chǎn)品的上線
而這些問題在張鵬飛看來其實都是可以避免的,Testin平臺有超過270個手機品牌,市面上各種主流型號手機、平板、智能手表、電視等智能硬件設(shè)備都有所覆蓋。而對于CP擔(dān)憂的成本問題,張鵬飛也坦言,Testin也會為CP提供免費的基礎(chǔ)服務(wù)。
“實際上我們的Free服務(wù)并不會限制你什么,也不是說你要花了錢才能用服務(wù)?;A(chǔ)的免費服務(wù)和精益求精的商業(yè)服務(wù)是并行的。我們希望開發(fā)者能夠有測試的意識,而不要認(rèn)為測試不重要,或者覺得難就不去做或者做得不徹底。所以我們有一系列的免費服務(wù)提供給開發(fā)者,而這種免費服務(wù)也足以讓開發(fā)者從中受益?!?/p>
除了免費服務(wù),張鵬飛表示Testin云測還在手游內(nèi)測、功能測試、壓力測試以及產(chǎn)品發(fā)布之后性能質(zhì)量監(jiān)控等環(huán)節(jié)提供服務(wù),這些測試環(huán)節(jié)直接或間接影響CP的收益。“這些我們會有持續(xù)的質(zhì)量監(jiān)控,而至于后期的服務(wù),選擇與否,完全取決于CP本身的意愿。我們是非常歡迎手游CP來體驗我們的免費服務(wù)的,而且是在非常安全的黑盒測試情況下,你無須擔(dān)心產(chǎn)品的泄漏問題?!?/p>
累積經(jīng)驗,喚醒更多開發(fā)者測試意識
按照張鵬飛所講,Testin云測自2011年成立起,就推出了移動游戲云測試業(yè)務(wù)。從正式推出產(chǎn)品上線,到2015年達到1億測試,一直在積累手游測試的經(jīng)驗。張鵬飛向龍虎豹透露了一組數(shù)據(jù):累計測試服務(wù)手游企業(yè)20000個,測試的游戲換算單人測試工時1650年,年節(jié)省9億測試成本花費,使用者從幾千名躍到45萬。
同時,張鵬飛介紹,Testin云測還有另外一個比較大的變化就是細分化?!皬?012年起Testin就把手游測試以及移動互聯(lián)網(wǎng)的APP測試做了細分,而今,Testin希望能夠為手游開發(fā)者帶來更好的服務(wù),因此成立了專門的手游測試事業(yè)部,從測試服務(wù)產(chǎn)品到研發(fā),從后端運維到市場推廣,專門建立了一支有手游研發(fā)以及運營的團隊,以提供針對性的專業(yè)手游測試服務(wù)。而市場方面則不斷通過行銷讓更多CP逐漸認(rèn)識到手游測試的意義以及在手游的盈利過程中的重要性。
除此之外,張鵬飛介紹到,Testin云測手游測試服務(wù)還將推出手游評測、版本改進、以及在灣區(qū)建立海外測試機房,目前已經(jīng)建立了一條完整的手游測試服務(wù)體系。
“接下來我們就是努力做到各個方面的測試技術(shù)都要跑在CP前面,無論是測試能力還是智能設(shè)備的涉獵范圍,現(xiàn)在Testin云測也已經(jīng)著手在VR技術(shù)上做準(zhǔn)備。我們要跟上技術(shù)變化的節(jié)奏,首先就要具備能力,別人有任何問題,我們才能在幫助他的時候做好事情。”
就像一名醫(yī)生一樣,第一年的時候做什么都緊張,所運用的技能或知識都是書本上學(xué)來的。第二年第三年會見到很多病例,接觸很多病人,可能有些病人站在門口,醫(yī)生還沒把脈就知道病人有什么問題。而這正有點像Testin的寫照,隨著逐漸積累與沉淀,測試的準(zhǔn)確度會越來越高。張鵬飛也表示,雖然現(xiàn)在有些CP的意識還沒有完全轉(zhuǎn)變,但這只是時間的問題。誠如張鵬飛所講:你以為的節(jié)儉其實是最大的放縱,任何環(huán)節(jié)都一樣重要,何必省錢吃大虧呢?