襄陽太寶科技有限公司提供全程品牌服務(wù)的移動(dòng)應(yīng)用軟件,專注于IOS(iphone,ipad)、android(安卓)軟件開發(fā)、html5開發(fā)、微信定制開發(fā),我們有頂尖的開發(fā)團(tuán)隊(duì),富有創(chuàng)意的設(shè)計(jì)及標(biāo)準(zhǔn)流程化的操作,我們堅(jiān)持站在客戶的角度為客戶設(shè)計(jì)方案，帶來高品質(zhì)的服務(wù)！
測試行業(yè)伴隨著IT產(chǎn)業(yè)發(fā)展了數(shù)十年，但依舊面臨著眾多問題。尤其是在移動(dòng)應(yīng)用當(dāng)中，測試工作總會(huì)被開發(fā)團(tuán)隊(duì)所輕視，可最后卻又成了不容忽視的沉重包袱。不過也因此，各種云測試工具平臺(tái)才有了用武之地，代替開發(fā)者進(jìn)行測試，并提供測試報(bào)告和優(yōu)化建議等。但面對現(xiàn)在市場上各式各樣的測試服務(wù)，你真的了解它嗎？
這次，Testin CEO王軍帶領(lǐng)CTO 徐琨，并聯(lián)合e袋洗創(chuàng)始人張榮耀等O2O行業(yè)創(chuàng)業(yè)者，一起探討關(guān)乎移動(dòng)應(yīng)用生死的測試是怎么一回事，以及它的未來發(fā)展。
提問：大部分App都處于開發(fā)者知道Bug在哪，只是還未來得及改的狀態(tài)，而真正需要專門測試的則是那些運(yùn)行很久的App。那么，像你們這樣的測試公司主要做的是哪些？
王軍：第一個(gè)是兼容性測試，解決你在實(shí)驗(yàn)室開發(fā)環(huán)境中沒有辦法去測試性能、兼容性，包括iOS、Android；第二個(gè)是崩潰分析，解決的是在運(yùn)行過程中有崩潰、閃退，這種開發(fā)人員無法自己判斷的技術(shù)問題；第三個(gè)就是眾測。
用戶體驗(yàn)方面，比如一個(gè)應(yīng)用進(jìn)行版本更新時(shí)，新版與舊版哪個(gè)更好用是產(chǎn)品設(shè)計(jì)人員和開發(fā)人員無法內(nèi)部搞定的，只有找用戶進(jìn)行測試，最終的較為高端的才是Bug。而像O2O應(yīng)用，特別是牽扯到錢的，如果出現(xiàn)用戶體驗(yàn)問題將是一個(gè)巨大的災(zāi)難。所以，不久之后，我們會(huì)進(jìn)一步開發(fā)出API，獲取App的情況，不過測試公司不會(huì)知道它的UP值、支付和訂單，卻能夠這些信息反饋給你，當(dāng)App崩潰時(shí)，比如支付不了，無法定位或其他環(huán)節(jié)失敗時(shí)，告訴你具體的情況。
其實(shí)這是玩游戲的人干的事，最開始幫游戲廠商做，游戲說打到第幾關(guān)，為什么不玩，在哪個(gè)環(huán)節(jié)失敗，因?yàn)橛螒蚴呛芸量痰?，用戶絕對用腳投票。但 現(xiàn)在，O2O對這個(gè)需求更強(qiáng)，小到錢的問題，大到人生安全，這都是很關(guān)鍵的，這些信息以后都會(huì)開放出來。
提問：最近看到一種很有效的方式，前端客服或銷售人員在與客戶接觸，發(fā)現(xiàn)問題時(shí)立即反饋，同時(shí)相關(guān)的研發(fā)人員手機(jī)會(huì)收到提醒，將相應(yīng)的問題解決并反饋到前端。這樣的高效手法，有什么樣的要求與難度？
王軍：這種使用場景，第一要求實(shí)施性很強(qiáng)；第二接觸環(huán)境很復(fù)雜。首先公司已經(jīng)發(fā)展到一定規(guī)模，其次用戶和質(zhì)量體系已經(jīng)很完善。但是這個(gè)時(shí)候，眾測怎么幫分享客戶解決問題，也是要溝通的一點(diǎn)。比方說剛才問題，做的兼容測試、風(fēng)控分析，解決重點(diǎn)客戶的質(zhì)量問題，把用戶統(tǒng)計(jì)變成用戶質(zhì)量分析，那完全不一樣。眾測這件事過去我們是做為一個(gè)企業(yè)內(nèi)部給企業(yè)客戶提供的，現(xiàn)在我們把它變成一個(gè)公共平臺(tái)，把各個(gè)公司測試專家，以及自身的測試專家把它能力拿出來，這個(gè)事情往下做是不是可做，有沒有前景，希望我們怎么做，還有沒有可能說各位起個(gè)頭，在初期階段。
提問：如果應(yīng)用測試都是那些專職的人來做的話，那么他們會(huì)不會(huì)存在一些盲點(diǎn)？
徐琨：這個(gè)會(huì)按需驅(qū)動(dòng)，以后可以打包，比如功能便利是一塊，然后在功能便利之外，再做Bug探索，Bug探索更多的是找一些沒有用過這個(gè)App的人，然后制定模塊來做，來防止專職人員的盲點(diǎn)。功能便利的話，更多的是專業(yè)的來做，因?yàn)檫@樣效率更高。未來會(huì)把整個(gè)服務(wù)整合到一起，包括金融支持。
提問：一般來說，自動(dòng)測試和人工測試出來的Bug類型，有什么區(qū)別？以后你們會(huì)不會(huì)有自動(dòng)化的測試？
徐琨：自動(dòng)化的測試，更多的是信息崩潰和反饋，而人工測試可以發(fā)現(xiàn)功能上的問題，比如圖標(biāo)消失，或1+1=2，結(jié)果你輸出的是錯(cuò)誤的，這些都很難用自動(dòng)化來測出來。自動(dòng)化的測試是指，安裝是否成功，卸載是不是順利，跑的時(shí)候，我們能不能進(jìn)入到這個(gè)頁面上，這些簡單的兼容式的，可以由自動(dòng)化來做。
王軍：自動(dòng)化測試已經(jīng)有了積累，比如Bug工具跟蹤，Bug日志的分析。其實(shí)我剛才想了，今天O2O解決的是眾多的閑散社會(huì)人員，把他們的力量聚合在一起，成為中國最大的人才。為供需雙方提供一個(gè)平臺(tái)， 可能只是分享還不算是O2O，它是為O2O服務(wù)的工具。我覺得我們也是O2O，把專家能力變成O2O的東西。
提問：測試中性能監(jiān)測是怎樣的一個(gè)情況，它的重要性如何？
王軍：性能監(jiān)測就是我們把基礎(chǔ)數(shù)據(jù)給開發(fā)商，他們拿數(shù)據(jù)做用戶畫像的對應(yīng)關(guān)系，跟他的CM接起來，這個(gè)時(shí)候就會(huì)判斷出，什么樣的客戶在什么時(shí)候出現(xiàn)問題了。而這個(gè)就相當(dāng)于是我們從質(zhì)量問題延伸到了商業(yè)智能這塊。說一個(gè)很簡單的道理，比如微微拼車，有一些情況在北京市從來不發(fā)生。一旦出北京到河北了，拼車出現(xiàn)問題了，這個(gè)時(shí)候可能App用不起來，原因不是APP本身的問題。也許可能在某一個(gè)地方?jīng)]有部署好或是那個(gè)地方網(wǎng)絡(luò)出問題了。有些事情不會(huì)關(guān)系到整個(gè)服務(wù)的完成，有些時(shí)候卻很重要，涉及到支付和安全，恰巧在那個(gè)時(shí)候出現(xiàn)了翻車，或者是其它的這種災(zāi)害，你總得有一個(gè)記錄，而這個(gè)時(shí)候恰恰數(shù)據(jù)丟了。所以我們可以通過這種情況，輸出一半數(shù)據(jù)，另一半的秘鑰掌握在運(yùn)營者手上，他可以根據(jù)他的用戶數(shù)據(jù)庫，將信息銜接起來。
張榮耀：O2O方面，開始大家都是覆蓋業(yè)務(wù)，但這個(gè)階段過后，一定會(huì)愈發(fā)注重性能監(jiān)測。原因是，到那個(gè)時(shí)候大家都是在同等條件下，拼的就是誰的服務(wù)更強(qiáng)。也就是在同樣的環(huán)境下，哪家的應(yīng)用能用或更加好用。現(xiàn)在已經(jīng)不是當(dāng)初的圈地時(shí)期，領(lǐng)域中最關(guān)鍵的已經(jīng)是服務(wù)品質(zhì)。而性能監(jiān)控能夠反映出你產(chǎn)品的運(yùn)營能力，從而進(jìn)行不斷地完善，以滿足現(xiàn)在用戶體驗(yàn)的高需求，留住更多的用戶。
提問：應(yīng)用有生有死，不可能無窮無盡的冒出來，到一定程度的時(shí)候，用戶數(shù)就穩(wěn)定了，那么下一步怎么提升自己企業(yè)的價(jià)值？
王軍：我們都有這樣的擔(dān)心，但是我估計(jì)最后終會(huì)找到一條路。我們未來都是這樣的，不過首要的是先把自己關(guān)注的領(lǐng)域做好，建立一個(gè)能夠持續(xù)提供并能夠持續(xù)增長的服務(wù)。如果我們這三年來只做測試，那估計(jì)我們這個(gè)企業(yè)就沒有生存的價(jià)值了。
張榮耀：作為一個(gè)App的用戶，從需求上看，現(xiàn)在所謂提供云技術(shù)服務(wù)的公司也好，創(chuàng)業(yè)者也好，包括大的平臺(tái)，客戶的心理應(yīng)該是一樣的，大家都是企業(yè)，不管是小團(tuán)隊(duì)還是企業(yè)，都希望是個(gè)整合提供商，提供一系列的服務(wù)?？梢越oApp裝一個(gè)SDK，但肯定不是很想在App里裝多個(gè)SDK。一個(gè)集成的SDK，比如說推送服務(wù)，基礎(chǔ)崩潰的檢測服務(wù)，或者性能的檢測，就是APM這塊，以及一些運(yùn)營的服務(wù)，都在相互交叉的做。其實(shí)在做應(yīng)用的用戶心中，更希望能有一家企業(yè)能夠?qū)⑦@些服務(wù)一次性承包，如果實(shí)現(xiàn)這一點(diǎn)，將會(huì)具有超強(qiáng)的殺傷力。
CSDN：現(xiàn)在來看，每個(gè)企業(yè)還是有自己的邊界，并不是所有的事情都能面面俱到。那Testin是如何把握這個(gè)界限，是否有其他發(fā)展的想法？
徐琨：Testin的目標(biāo)是，最后能把這個(gè)測試服務(wù)真正變成一個(gè)第三方，大家都能接受這個(gè)概念。純粹的云主機(jī)的市場，阿里云占到90%的市場。我覺得Testin把測試這個(gè)事情先不說90%，能影響到開發(fā)者即可以了。先做到這個(gè)層級(jí)，再說后面的事情，SDK更多的還是把整個(gè)的質(zhì)量服務(wù)做完整。
王軍：越有想法誘惑太大，有的時(shí)候你突然感覺你可以嘗試了，那風(fēng)險(xiǎn)就來了。所以這個(gè)是很慎重的。 所以，各個(gè)企業(yè)之間要多多合作。作為行業(yè)媒體類是否能夠給我們一些建議和幫助，幫助我們也是幫助整個(gè)行業(yè)。
圓桌各家交流：對以后測試發(fā)展的建議
提問：我的建議就是能不能從測試人員這塊入手，像這種注冊的，讓更多的測試人員來參加進(jìn)來，在測試人員當(dāng)中有一個(gè)口碑效應(yīng)，但似乎現(xiàn)在還沒有供交流的平臺(tái)。
張榮耀：這倒是真的，目前開發(fā)人員和測試者之間還沒有一個(gè)交流的平臺(tái)，我們今年會(huì)著手做這個(gè)事情，包括他們的成長，交流。因?yàn)橹皼]有做過，Testin只是一個(gè)工具。我們眾測做了很長時(shí)間。其實(shí)他們有一些需要溝通，需要成長的東西，確實(shí)沒有這樣一個(gè)平臺(tái) 。這個(gè)測試社區(qū)其實(shí)是最后一個(gè)非常真誠的建議，過去我們更強(qiáng)調(diào)服務(wù)本身，沒強(qiáng)調(diào)服務(wù)提供的對象也需要情感生活，也需要社交。
提問：你們現(xiàn)在站在一個(gè)很好的位置，但危機(jī)感也很強(qiáng)，如果有一些新的模式出來的話，首先可能會(huì)取代你，其次就是資本壓力會(huì)非常大，最后云測試之所以不能成功，就是缺乏一種很愉快的溝通工具，比如視頻，在線，同傳，達(dá)到社交模式的60%到80%的效果，如果形成工具，是非?？捎^的。
王軍：其實(shí)我們的工具在APM里會(huì)記錄，就像你記錄一個(gè)步驟和流程。為什么我們現(xiàn)在測試完全是黑盒呢？黑盒就是我測沒測你不知道，你看不到路徑。但是我們現(xiàn)在把IC放進(jìn)去，后面會(huì)把APM的路徑放進(jìn)去，讓他測一部分，都會(huì)記錄下來，測試的情況怎么樣，反饋如何，通過數(shù)據(jù)統(tǒng)計(jì)，你可以看到我真的測試了，發(fā)現(xiàn)Bug以后，你就知道解決問題就可以了。手游就是這樣，我們要求測試的是全部新手游黨，把基本的游戲全玩通，到達(dá)支付那個(gè)環(huán)節(jié)。一個(gè)手游，熟手跑完15分鐘，這是我們完全按點(diǎn)走的，最后以數(shù)據(jù)呈現(xiàn)。需要做的就是把你剛才說的這些東西，以數(shù)據(jù)的形式呈現(xiàn)出來。
至于視頻我們分兩種情況，也沒有完全采用。因?yàn)橐曨l在手游的測試占的資源太多，很多手游都跑不動(dòng)。但是在應(yīng)用里面這個(gè)可能是必須要做的，雖然你不一定看，也不一定關(guān)注測試的過程，但你會(huì)明確的知道應(yīng)用是真的經(jīng)過測試了，這一點(diǎn)對開發(fā)商來說是蠻重要的一點(diǎn)。