在對設(shè)計(jì)進(jìn)行測試前先確定方向
和所有工作一樣,實(shí)用性測試要先有計(jì)劃才能成行。而且你會發(fā)現(xiàn),在開頭拿出一點(diǎn)時間做計(jì)劃,到后面絕對物有所值。
有了一個簡單的指南,你就能知道實(shí)用性測試的目標(biāo)是什么、要尋找的是什么、需要得到的成果又是什么。
對實(shí)用性測試的結(jié)果進(jìn)行完善是大家所喜聞樂見的。到實(shí)際做起來的時候,你得先知道測試的目的是什么。下面我將為大家講解如何設(shè)定測試目標(biāo)及實(shí)用性指標(biāo)。
設(shè)定實(shí)用性目標(biāo)
很多公司往往在不清楚自身目標(biāo)甚至訴求的情況下貿(mào)然開始實(shí)用性測試。
對于這一點(diǎn)我想說,實(shí)用性調(diào)查的第一步一定是了解自己要找什么——不過說起來容易做起來難。首先,我們需要將測試目標(biāo)進(jìn)行歸類,然后確認(rèn)哪一類數(shù)據(jù)為恰當(dāng)。
1.目標(biāo)歸類
有時候把不同的目標(biāo)進(jìn)行分類能夠帶來很大幫助。Google
Ventures設(shè)計(jì)工作室的用戶體驗(yàn)研究員Michael
Margolis認(rèn)為確定目標(biāo)的第一步應(yīng)當(dāng)是了解要為哪些問題(他會把問題進(jìn)行分類)。
這一方法可以幫助我們在與相關(guān)人員進(jìn)行初步會議時評估他們對產(chǎn)品(功能、用戶、競品等)及限制(日程、資源等)的了解程度。
了解清楚后,就可以通過提出一系列問題將團(tuán)隊(duì)的注意力集中到調(diào)研問題上來(“為什么會有人進(jìn)入網(wǎng)站但不觀看展示視頻”)而不是直接提出方法(“我們現(xiàn)在需要從典型群體入手!”)。
·
相關(guān)產(chǎn)品信息——你是否了解產(chǎn)品的歷史?你是否知道未來會怎么樣?現(xiàn)在是探索答案的好機(jī)會。
·
用戶——什么人會使用我們的產(chǎn)品?你使用自己產(chǎn)品的原因是什么?盡可能具體詳盡:人口統(tǒng)計(jì)信息、地理位置、使用模式,能找出來的都找。
·
成功——你認(rèn)為這個產(chǎn)品成功之后什么樣?是通過銷售量、下載次數(shù)、閱覽次數(shù)、交互次數(shù)還是其他方式衡量?要讓整個團(tuán)隊(duì)都達(dá)成一致。
·
競品——大競爭對手是誰?你如何與之抗衡?你的競爭能給用戶帶來哪些好處?
·
調(diào)研——在進(jìn)行調(diào)研時這個問題可能看似比較無腦,不過還是要問:你想要知道什么?哪些數(shù)據(jù)能給你的團(tuán)隊(duì)帶來幫助?調(diào)研是不是馬上就能開始不會白白浪費(fèi)時間?
時間與范圍——收集數(shù)據(jù)的時間范圍是什么?截止日期是什么時候?
來源:Setting Goal Requirements for Usability
Testing
在完成基準(zhǔn)問題后,就可以調(diào)轉(zhuǎn)角色,讓團(tuán)隊(duì)成員寫下他們的問題。這樣你就可以了解到他們知道什么,他們想知道些什么。
Mutual
Mobile的Becky
White經(jīng)常使用下面這個樣板方法來縮小目標(biāo)范圍。召集團(tuán)隊(duì),下發(fā)便利貼。然后讓每個人寫下自己對用戶和用戶體驗(yàn)的問題。收集問題,貼到黑板上。
后根據(jù)彼此相似程度對所有問題進(jìn)行歸納組織。這時你會發(fā)現(xiàn)某些類別的問題要明顯多余其它類別——這些問題就可能成為你的測試目標(biāo)。
如《實(shí)用性測試指南》中所述,這一方法還有助于你確認(rèn)測試目標(biāo)是否足夠簡單。你的目標(biāo)應(yīng)該簡單如“訪客是否能找到自己需要的信息?”,不能復(fù)雜如“訪客是否能夠輕松找到我們的產(chǎn)品并做出理智的購買決策?”
如果你想把實(shí)用性測試問題作為設(shè)定目標(biāo)的一個手段,可以查看一下Userium提供的網(wǎng)站實(shí)用性對照清單。如果你發(fā)現(xiàn)有一個或多個類別缺失,那么所缺失的類別正是需要收集數(shù)據(jù)的地方(同時也是團(tuán)隊(duì)在初步Q&A過程中遇到瓶頸時的佳討論點(diǎn))。
2.了解要衡量的內(nèi)容有哪些
在了解完目標(biāo)后,就該確定如何運(yùn)用實(shí)用性測試來完成目標(biāo)了。從本質(zhì)上說,這其實(shí)是在闡明測試的宏觀目標(biāo)。
UserTesting的有關(guān)實(shí)用性測試的電子書中建議,大家必須先了解哪種類型的反饋對測試結(jié)果有幫助。你的團(tuán)隊(duì)是否需要使用圖表或評分表?采用單獨(dú)的用戶帳戶還是大概數(shù)字?書面回復(fù)還是語音回復(fù)?
不同類型的人群適用的方式也不同:持有懷疑態(tài)度的相關(guān)人員比較容易被冷冰冰但切實(shí)的圖表化定量評分表所說服,而某個用戶執(zhí)行某項(xiàng)任務(wù)失敗時的視頻則比較容易影響到CEO。
這也就是為什么要先確定實(shí)用性測試目標(biāo)。如果你不知道整體的目的和目標(biāo),就肯定不知道需要獲得哪些類型的反饋和數(shù)據(jù)。下面的圖表可以幫助你了解數(shù)據(jù)類型的不同對測試類型有何影響。
來源:User Testing Your Next
Project
在確定了目標(biāo)和要找的數(shù)據(jù)類型后,就該開始規(guī)劃實(shí)際的測試了。但是在開始以前,先要談?wù)勚笜?biāo)問題。
實(shí)用性指標(biāo)
指標(biāo)是有關(guān)實(shí)用性的定量數(shù)據(jù),其對立于口頭回復(fù)和書面回復(fù)等偏重于定性的調(diào)研結(jié)果。通過結(jié)合定量與定性數(shù)據(jù),你就能夠了解為什么要以及如何解決問題,還能了解到亟需解決的實(shí)用性問題有多少。
通過這篇有關(guān)定性與定量數(shù)據(jù)的文章你可以了解到這一點(diǎn)在下圖中起到的作用。
來源:Which UX Research
Methods
簡單地說,實(shí)用性指標(biāo)是用來衡量用戶執(zhí)行特定一系列任務(wù)時表現(xiàn)的統(tǒng)計(jì)數(shù)據(jù)。Usability.gov上列出了幾個比較關(guān)鍵的定量數(shù)據(jù):
·
成功率——在特定場景下,用戶是否能夠成功完成所分配的任務(wù)?在進(jìn)行Yelp網(wǎng)站再設(shè)計(jì)時我們測試了35名用戶,其中這個是重要、不可缺少的指標(biāo)之一。
·
錯誤率——哪些錯誤給用戶造成的妨礙大?大致可以分為兩類:關(guān)鍵錯誤和非關(guān)鍵錯誤。關(guān)鍵錯誤會造成用戶無法完成任務(wù),非關(guān)鍵錯誤僅會降低用戶完成任務(wù)的效率。
·
完成時間——用戶完成任務(wù)所花費(fèi)時間是多少?這個指標(biāo)對于確定產(chǎn)品相比競品的優(yōu)劣(前提是對兩者均進(jìn)行測試)非常有幫助。
主觀指標(biāo)——以數(shù)字形式讓用戶對自己的滿意度、感覺產(chǎn)品的使用簡便程度、信息可用性等進(jìn)行排序。有趣的是,通過將反饋總結(jié)成Single
Ease Question,你可以將定性的反饋定量化。
來源:User Testing & Design
Nielsen Norman Group的共同創(chuàng)始人及實(shí)用性專家Jakob
Nielsen從宏觀的指標(biāo)角度曾說道:“確定實(shí)用性指標(biāo)容易,難的是如何收集?!庇捎谑占瘜?shí)用性指標(biāo)很難,很費(fèi)時而且成本高昂,很多預(yù)算不高的公司不得不忍痛放棄。
所以說,指標(biāo)值得你投資嗎?Nielsen列出了幾種指標(biāo)尤其有用的情況:
·
跟蹤不同版本發(fā)布之間的進(jìn)度——新的更新是否達(dá)到了目的?指標(biāo)可以告訴你更新是否解決了過往的問題還是需要你進(jìn)一步調(diào)整設(shè)計(jì)。
·
評估競爭態(tài)勢——指標(biāo)是精確確定與競爭對手之間差距的理想工具。數(shù)字永遠(yuǎn)不會說謊。
·
發(fā)布前做出中止/繼續(xù)決策——你的產(chǎn)品是否做好了發(fā)布準(zhǔn)備?牢記數(shù)字化的目標(biāo)可以讓你清楚知道是否做好了發(fā)布準(zhǔn)備。
實(shí)用性指標(biāo)總是有幫助的,到考慮到其需要測試大量人員來達(dá)到統(tǒng)計(jì)顯著性(《實(shí)用性測試指南》從定量和定性兩個角度進(jìn)行了深入探討),因此投資成本比較大。
如果你打算收集定量數(shù)據(jù),就一定要先獲得定性數(shù)據(jù)以便有一套整體的權(quán)衡體系,否則就可能存在大量數(shù)字無從用起的風(fēng)險(xiǎn)。在UserTesting的Hannah
Alvarez的“人造黃油造成離婚的巧妙詮釋”中,你可以看到這一風(fēng)險(xiǎn)在真實(shí)世界中會產(chǎn)生何種影響。
總結(jié)
在某種程度上說,規(guī)劃階段是實(shí)用性研究重要的階段。只要計(jì)劃正確,再加上耐心與細(xì)心,你的數(shù)據(jù)一定會準(zhǔn)確而且有用。
但是如果初的計(jì)劃草草而過甚至完全沒做,那么數(shù)據(jù)就可能出現(xiàn)問題,甚至給整個測試工作的價值帶來疑問。要牢記我們上面講過的幾項(xiàng)內(nèi)容,在100%確認(rèn)目標(biāo)以及實(shí)現(xiàn)目標(biāo)的方法之后再動手。
想了解20種不同類型實(shí)用性測試方法的說明和實(shí)用建議嗎,來看看109頁的《實(shí)用性測試指南》吧,完全免費(fèi)哦。另外,其中還囊括了Apple、Buffer、DirecTV等知名公司的佳實(shí)踐方法。