第1期 2020/01/14
用測試重筑用戶的信任——2019 年至頂網(wǎng)評測回顧與展望
如果要用一句話來對過去的 2019 年進(jìn)行概括的話，我想借用狄更斯《雙城記》中的一句話：“這是一個(gè)最好的時(shí)代，也是一個(gè)最壞的時(shí)代；這是一個(gè)智慧的年代，這是一個(gè)愚蠢的年代；這是一個(gè)信任的時(shí)期，這是一個(gè)懷疑的時(shí)期。”
好，云計(jì)算、大數(shù)據(jù)、人工智能、區(qū)塊鏈和 5G 這些技術(shù)相繼開始成熟落地，未來企業(yè)數(shù)字化轉(zhuǎn)型應(yīng)用前景無限；
壞，技術(shù)的發(fā)展方向出現(xiàn)迷茫，資本的大潮開始落下，裸泳者已經(jīng)顯現(xiàn)；
智慧，有更多的人工智能、大數(shù)據(jù)分析技術(shù)在被企業(yè)進(jìn)行運(yùn)用；
愚蠢，人工智能是否會引發(fā)大規(guī)模失業(yè)還無法確認(rèn)，但是盲目進(jìn)行人工智能擴(kuò)張者首先要面對是否會失業(yè)的問題；
在信任就可以獲取金錢的時(shí)候，有人肆意濫用信任，當(dāng)信任變成懷疑后，才發(fā)現(xiàn)本身一無所有。企業(yè)宣傳就靠一張 PPT，真與假無法進(jìn)行判斷。
在2019年，SAP嚴(yán)重漏洞使5萬家企業(yè)關(guān)鍵業(yè)務(wù)易受網(wǎng)絡(luò)攻擊、Azure云宕機(jī)3個(gè)小時(shí)破壞了全球各地由微軟托管的各種系統(tǒng)、起亞發(fā)現(xiàn)一個(gè)軟件錯(cuò)誤宣布召回11423輛2019款Optima轎車，還有每次升級都會導(dǎo)致一群用戶不是數(shù)據(jù)丟失就是系統(tǒng)故障的Windows 10……。
那么，在 2020 年如何才能去偽存真，讓真正好的企業(yè)在市場中發(fā)展壯大，好的產(chǎn)品進(jìn)入用戶的眼簾呢？從作者長期進(jìn)行產(chǎn)品評測的角度來看，就是通過第三方測試，來對企業(yè)產(chǎn)品進(jìn)行公開的展示。
這里所說的第三方，不是隨便雇傭一批水軍，鋪天蓋地的去進(jìn)行一味的追捧。而是要言之有物的從“產(chǎn)品”、“技術(shù)”、“質(zhì)量”、“服務(wù)”這些維度，真實(shí)的去對企業(yè)、對產(chǎn)品過行評估。
老生常談的“產(chǎn)品”、“技術(shù)”、“質(zhì)量”、“服務(wù)”
“產(chǎn)品”、“技術(shù)”、“質(zhì)量”、“服務(wù)”，這幾個(gè)詞作者已經(jīng)提了至少 5、6 年了，還記得第一次和一個(gè)國外著名網(wǎng)絡(luò)廠商提這個(gè)東西時(shí)候的明確拒絕——“我們可以和你談產(chǎn)品、談技術(shù)，但不會談質(zhì)量與服務(wù)，因?yàn)槲覀兊拿志蛶П碚呶覀兊馁|(zhì)量與服務(wù)”。
在和其他國內(nèi)外廠商進(jìn)行接觸的時(shí)候，也是差不多的情況，產(chǎn)品的功能測試可以做，技術(shù)的性能評測也 OK，服務(wù)的流程體系評估有些也沒什么問題。但是，如何對產(chǎn)品的質(zhì)量進(jìn)行評估，卻始終是一個(gè)大問題。
如果作者找的都是一些不注重產(chǎn)品質(zhì)量的企業(yè)，這個(gè)情況完全有情可原。但事實(shí)并非如此，通過一系列的產(chǎn)品測試接觸，完全可以了解，這些都是將產(chǎn)品質(zhì)量看做生命的企業(yè)。但是為什么不愿意對自身產(chǎn)品質(zhì)量進(jìn)行宣傳呢？
隨著對生產(chǎn)企業(yè)了解的逐步深入，作者才意識到，質(zhì)量是什么，是產(chǎn)品生產(chǎn)加工的嚴(yán)格規(guī)范，那是企業(yè)的命根子。讓企業(yè)展示質(zhì)量控制流程，就好像找大宅門里的白七爺要同仁堂的藥方子，那是在要命！還好我找的那些廠商都比較好說話，最多是不理睬我，作者才能有機(jī)會在這里繼續(xù)碼字……
因此，現(xiàn)在的現(xiàn)實(shí)情況就是，質(zhì)量這個(gè)東西，有的不能講，沒有的可以瞎講。好壞無從評判，誰的聲音大就聽誰的，略幣驅(qū)逐良幣這套東西就這么發(fā)展起來了。
轉(zhuǎn)變視角，不讓質(zhì)量評測成為向白七爺要藥方
怎么既能展示企業(yè)的產(chǎn)品質(zhì)量，又能讓企業(yè)把“藥方”留住？19 年參加 iTestin 的一個(gè)測試工具產(chǎn)品發(fā)布，給予作者了極大的啟示。iTestin 發(fā)布的是一個(gè)人工智能的軟件測試工具。這個(gè)工具可以根據(jù)語音或文字直接生成功能測試腳本，對軟件功能進(jìn)行測試。當(dāng)然了，人工智能雖然是作者關(guān)注的新技術(shù)點(diǎn)，但給作者啟示的不是人工智能，而是功能測試。
功能測試，誰都可以做，在產(chǎn)品展示中，少不了對產(chǎn)品功能進(jìn)行評測，可以說是測試中基礎(chǔ)的基礎(chǔ)。但是對產(chǎn)品的所有功能進(jìn)行測試，這就不是某個(gè)人或某個(gè)評測機(jī)構(gòu)可以輕易完成的事情了。如此全面的測試做完，基本上產(chǎn)品的“藥方”也就謄寫出來了。這件事只能是企業(yè)自己做，就算第三方有這個(gè)能力去干，生產(chǎn)企業(yè)肯定也不敢答應(yīng)。
怎么辦？換個(gè)角度看問題，講一個(gè)測試的小故事，大家一聽也許就明白了。有一個(gè)研發(fā)和一個(gè)測試是一對冤家（貌似研發(fā)和測試從來都是冤家……），一天測試又和研發(fā)說，你開發(fā)的代碼有bug。研發(fā)立馬就和測試急了，說你到底會不會用，差點(diǎn)就打起來。領(lǐng)導(dǎo)來調(diào)解，說測試的說話方式不對，應(yīng)該告訴研發(fā)程序在運(yùn)行的時(shí)候CPU、內(nèi)存占用急升，數(shù)據(jù)讀取頻繁但長時(shí)間沒有響應(yīng)這些情況，研發(fā)自然就會去找他的bug去了。
從中作者明白一個(gè)道理，功能測試不能簡單看一下開發(fā)出來的功能 work 不 work。需要通過一些關(guān)鍵指標(biāo)，來對功能進(jìn)行一下全面的評估。對于測試工作而言，確實(shí)會多費(fèi)一些手腳，但是可能幫助研發(fā)更好的對問題進(jìn)行定位。
而這個(gè)道理對作者的啟發(fā)就是，在做第三方質(zhì)量評測的時(shí)候，也同樣不需要對每項(xiàng)功能進(jìn)行逐一的進(jìn)行展示。只需要找到關(guān)鍵性的應(yīng)用性能指標(biāo)，對關(guān)鍵功能進(jìn)行評估就可以了。對于重視質(zhì)量的企業(yè)而言，展示的只是測試項(xiàng)目的數(shù)量，和關(guān)鍵功能的性能指標(biāo)，觸碰不到他們的核心“藥方”，又可以客觀公正的對企業(yè)產(chǎn)品質(zhì)量進(jìn)行展示，何樂而不為？
再舉一個(gè)實(shí)際的例子，可能會更直觀一些。19 年有一個(gè)叫易觀的數(shù)據(jù)庫廠商推出一個(gè)大數(shù)據(jù)分析產(chǎn)品，并為此開了幾次發(fā)布會，我有幸都去參與了。每次我都會問一個(gè)同樣的問題，產(chǎn)品需要耗用的計(jì)算資源有多少，年初時(shí)給我的答案是 16 核 64G。嗯，不錯(cuò)，但是上下夠不著。用得起這個(gè)配置的企業(yè)，未必會用易觀的產(chǎn)品，想用易觀產(chǎn)品的，可能又沒有那么高的硬件配置。年底時(shí)，他們家又有發(fā)布會，處理性能不變，產(chǎn)品應(yīng)用配置降低到 8 核 16G，數(shù)據(jù)量小一些的話，一個(gè)筆記本就可以跑起來。得到這個(gè)消息后，第一個(gè)反映就是，他們家確實(shí)是在踏踏實(shí)實(shí)的做事情，第二個(gè)想到的是，看來在2020年可以找機(jī)會一起搞一下了。
2019年的公有云測試也是一樣，單獨(dú)看某項(xiàng)測試指標(biāo)，看不出什么問題，加上系統(tǒng)資源占用，好壞就全出來了。
所以說，未來評估一套系統(tǒng)的好壞，不是看寫了多少萬行的代碼，而是看有多少功能模塊，每個(gè)模塊的資源占用和響應(yīng)時(shí)間等應(yīng)用指標(biāo)，用它們來做評估，應(yīng)該更能說明問題。以前看到歐洲已經(jīng)有測試工具可以根據(jù)軟件接口對系統(tǒng)進(jìn)行功能性判定，自動判斷有哪些功能模塊，并且根據(jù)這些功能模塊的連接路徑，對軟件架構(gòu)和安全性進(jìn)行分析。這種測試手段，個(gè)人感覺還是值得去大力推廣一下的。如果，這種測試工具能進(jìn)一步和APM產(chǎn)品相結(jié)合就更好了。應(yīng)該會令軟件企業(yè)的代碼質(zhì)量提升到一個(gè)新的階段。
2020用質(zhì)量展現(xiàn)產(chǎn)品的真正價(jià)值
因此，在2020年，作者的主要工作就會是用質(zhì)量來向廣大用戶展示出企業(yè)產(chǎn)品的真正價(jià)值。當(dāng)然，隨著數(shù)字化轉(zhuǎn)型、智能智造技術(shù)的發(fā)展，需要用質(zhì)量進(jìn)行展示的也不會局限于IT這個(gè)行業(yè)，在2019年作者在朋友圈里也立了一個(gè)flog，在2020年，看來也會向前再邁一步了。
希望在 2020 年，也可以讓我向鑒人的目標(biāo)再前進(jìn)一步。
本文章選自《數(shù)字化轉(zhuǎn)型方略》雜志，閱讀更多雜志內(nèi)容，請掃描下方二維碼
