編輯導(dǎo)讀：在產(chǎn)品設(shè)計(jì)流程中，可用性測(cè)試是繞不開的一個(gè)環(huán)節(jié)?？捎眯詼y(cè)試包括定性和定量研究。具體有什么區(qū)別？要注意哪些問題？遵循哪些步驟？本文作者從概念、差異、使用流程和結(jié)果等多個(gè)方面對(duì)此展開了分析說明，與大家分享~

定性與定量這兩種互補(bǔ)類型的用戶研究在迭代設(shè)計(jì)周期中都扮演著重要的角色。定性研究指導(dǎo)設(shè)計(jì)過程；定量研究為基準(zhǔn)規(guī)劃和投資回報(bào)率計(jì)算提供了基礎(chǔ)。

• 要點(diǎn)：定性數(shù)據(jù)，由觀察結(jié)果組成，確定容易或難以使用的設(shè)計(jì)特征定量數(shù)據(jù)，以一個(gè)或多個(gè)度量(如任務(wù)完成率或任務(wù)時(shí)間等等)的形式表示，反映產(chǎn)品是否真的好用
• 數(shù)據(jù)：我不要你覺得，我要我覺得

一、定性和定量的區(qū)別

1. 定性研究

定性數(shù)據(jù)提供了參與者體驗(yàn)系統(tǒng)可用性的直接評(píng)估并產(chǎn)生的結(jié)果，并推斷出設(shè)計(jì)的哪些方面存在問題，哪些方面體驗(yàn)/設(shè)計(jì)得很好。然后在根據(jù)我們自己的交互/設(shè)計(jì)的知識(shí)來判斷是否改變優(yōu)化產(chǎn)品設(shè)計(jì)目標(biāo)。

2. 定量研究

定量數(shù)據(jù)提供了對(duì)設(shè)計(jì)可用性的間接評(píng)估。它們可以基于參與者在特定任務(wù)上的表現(xiàn)(例如，任務(wù)完成時(shí)間，成功率，錯(cuò)誤數(shù)量)，或者可以反映參與者對(duì)可用性的感知(例如，滿意度評(píng)級(jí))。

定量研究度量的標(biāo)準(zhǔn)只是簡單的數(shù)字。因此，在沒有參考點(diǎn)的情況下，它們很難解釋。

例如，如果在一項(xiàng)研究中，60%的參與者能夠完成一項(xiàng)任務(wù)，這是好事還是壞事？這很難說是絕對(duì)的。這就是為什么許多定量研究的目標(biāo)通常不是描述一個(gè)網(wǎng)站的可用性，而是與一個(gè)已知的標(biāo)準(zhǔn)、競品體驗(yàn)或以前的設(shè)計(jì)版本進(jìn)行比較。

雖然定量數(shù)據(jù)結(jié)果可以告訴我們，我們的設(shè)計(jì)可能是不可用的，但相對(duì)于參考點(diǎn)，它們不能指出參與者遇到了什么問題；也沒有告訴我們?cè)谠O(shè)計(jì)中需要做哪些得到改變，才能在下次得到更好的結(jié)果；也沒有說明為什么參與者在完成這項(xiàng)任務(wù)時(shí)遇到了什么困難。為了理解界面的具體可用性問題，研究人員通常需要使用定性的方法來補(bǔ)充定量的數(shù)據(jù)。

二、定性和定量的差異

定性和定量數(shù)據(jù)需要稍微不同的研究設(shè)置和非常不同的分析方法。他們很少同時(shí)收集一組相同的數(shù)據(jù)，因此這是定性和定量用戶研究之間的差異。在迭代設(shè)計(jì)周期中，定性和定量測(cè)試也都是必不可少的。

因?yàn)橹挥卸垦芯坎拍茏屛覀兛吹皆O(shè)計(jì)后給出一個(gè)數(shù)值，并清楚地說明我們的新版本比舊版本改進(jìn)了多少——也就是ROI。（反正領(lǐng)導(dǎo)述職必備，你想述職的更專業(yè)，那你就學(xué)起來吧?。?/p>

（題外話：盡管正兒八經(jīng)的定性定量研究在我們的實(shí)際工作場(chǎng)景中會(huì)很少用到，但是我還是很想去普及這件事情。在大廠這些很常見，有著專門的用研團(tuán)隊(duì)，想去大廠必學(xué)用研，想去專業(yè)的團(tuán)隊(duì)也必學(xué)。）

雞湯：

老板和領(lǐng)導(dǎo)都是喜歡有能力的下屬，這沒錯(cuò)吧。你如何證明你有能力？圖畫的比別人好？那這個(gè)是僅限對(duì)你自己，對(duì)老板產(chǎn)生了什么價(jià)值？你想加薪老板不給，你想晉升，領(lǐng)導(dǎo)不同意。你怎么辦？跳槽？還不是死循環(huán)。

什么叫有能力，就是到你表現(xiàn)的機(jī)會(huì)了，你就要抓住。悄咪咪的打工，然后驚艷所有人。功成名就。這就是你有能力、有價(jià)值的點(diǎn)。

最近又看了一遍《奇葩說》中的某一集，講的是該不該996。這里我就不說了，期待與你們的battle。

下表總結(jié)了兩類研究的差異。你也可以自己進(jìn)行總結(jié)，但是核心點(diǎn)不是變的。

要點(diǎn)：

迭代設(shè)計(jì)周期：定性與定量對(duì)現(xiàn)有設(shè)計(jì)的評(píng)估，決定重新設(shè)計(jì)當(dāng)前系統(tǒng)可用性。一旦新版本完成，就可以對(duì)其進(jìn)行評(píng)估并與初始版本進(jìn)行比較。

三、定性和定量的使用流程

第一階段和第三階段涉及總結(jié)性研究

它們提供一個(gè)設(shè)計(jì)的總體評(píng)估。在這些步驟中，可以使用定性、定量的研究方法(或組合)來評(píng)估設(shè)計(jì)。如果目標(biāo)是明確地計(jì)算出重新設(shè)計(jì)改進(jìn)了多少，就必須使用定量研究。這種定量地評(píng)估設(shè)計(jì)的每個(gè)版本并將其與以前的版本進(jìn)行比較的過程稱為基準(zhǔn)測(cè)試。

第二階段和第四階段涉及形成性研究

(通過定性方法完成)

在重新設(shè)計(jì)階段，用戶研究扮演著一個(gè)形成性的角色，它意味著為設(shè)計(jì)提供信息，并引導(dǎo)它做出正確的設(shè)計(jì)。在這個(gè)階段，設(shè)計(jì)師/研究人員獲取的用戶數(shù)據(jù)，以便能夠在不同的設(shè)計(jì)方案中進(jìn)行選擇，并創(chuàng)建一個(gè)可用的UI。在這個(gè)階段，定性研究通常是最合適的。我們都知道7-8參與用戶定性研究可能會(huì)發(fā)現(xiàn)85%可用性的問題。

四、什么時(shí)候使用定性和定量？

定性研究非常適合識(shí)別設(shè)計(jì)的主要問題。例如，我們?nèi)绾翁岣哂脩粼谔顚懕韱螘r(shí)的效率，根據(jù)研究發(fā)現(xiàn)，我們將表單字段名稱精簡，減少選擇，整理操作路徑，后就可以提高填寫效率了。

相反，我們同樣針對(duì)填寫表單時(shí)，用到了定量。那這個(gè)時(shí)候無疑是在增加工作成本。雖然是測(cè)試到了效率問題總結(jié)出了可用性不好等等因素，可是這些花費(fèi)高成本的代價(jià)就有點(diǎn)得不償失了。

要點(diǎn)：

定性可以在任何時(shí)候進(jìn)行可用性測(cè)試而定量研究需要針對(duì)完成的項(xiàng)目進(jìn)行。原因就是，定量研究需要大量的參與者支持，成本過于高昂。

五、結(jié)果：定性和定量

定性數(shù)據(jù)通常由一組內(nèi)容發(fā)現(xiàn)并組成，這些發(fā)現(xiàn)確定(并根據(jù)嚴(yán)重程度劃分優(yōu)先級(jí))設(shè)計(jì)的優(yōu)缺點(diǎn)。但是，這些發(fā)現(xiàn)是估計(jì)的，因?yàn)樗鼈兪腔谟醚腥藛T設(shè)定的問題和解釋用戶行為含義的知識(shí)和經(jīng)驗(yàn)水平。不同的從業(yè)者通常會(huì)在同一個(gè)用戶測(cè)試會(huì)話中識(shí)別不同的問題(這種稱為評(píng)估者效應(yīng)的現(xiàn)象)。當(dāng)然啦，招募的參與者也有關(guān)系。

定量研究通常涉及相對(duì)大量的用戶(通常超過30人)，并使用統(tǒng)計(jì)技術(shù)（如：置信區(qū)間）來保護(hù)自己不受這些隨機(jī)事件的影響。

要點(diǎn)：

在你出去面試吹牛逼的時(shí)候，跟面試官說我做過定量。面試官對(duì)你感興趣了，體量多少呀，30人，什么數(shù)據(jù)，效率和時(shí)間等總結(jié)出我們需要改進(jìn)點(diǎn)，你如何區(qū)分這些點(diǎn)的準(zhǔn)確性，置信區(qū)間90%，那剩下的10%，問題出現(xiàn)在在哪？出現(xiàn)在，我們與每個(gè)人交流時(shí)出現(xiàn)的溝通意外或者每個(gè)人的理解程度不一樣。

當(dāng)報(bào)告正確時(shí)，定量研究將包括關(guān)于結(jié)果統(tǒng)計(jì)意義的信息。例如，誤差范圍可以幫助你了解你有多相信研究結(jié)果。

直白了說，不管你換了多少批人都無法改變這個(gè)可信任的數(shù)值。就是這么神奇！

因此，當(dāng)定量研究被正確地進(jìn)行和分析時(shí)，你就可以確信他們的結(jié)果是可靠的。而不是運(yùn)氣。

六、方法：定性和定量

從表面上看，定量和定性的用戶測(cè)試看起來非常相似(例如，它們都涉及用戶在設(shè)計(jì)中執(zhí)行任務(wù))。兩種類型的研究都需要遵循良好實(shí)驗(yàn)設(shè)計(jì)的基本規(guī)則。

由于定量的人數(shù)會(huì)比定性的人數(shù)要多好幾倍，所以在話術(shù)設(shè)置和參與者背景的差異會(huì)增加測(cè)試難度，導(dǎo)致更大的誤差范圍，因此定量研究的目標(biāo)是盡可能地減少差異。

1. 定量的條件需要嚴(yán)格的控制

1. 確保所有的參與者都在盡可能相同的環(huán)境中運(yùn)行。
2. 從練習(xí)小任務(wù)開始（上一篇文章也具體說了要如何控制）
3. Think aloud 在定量研究中不推薦。
4. 個(gè)人信息（上一篇文章也具體說了要如何控制）

2. 定性的條件可以根據(jù)情況變動(dòng)

1. 可以在不同的階段改變研究目標(biāo)
2. 發(fā)現(xiàn)任務(wù)無法活動(dòng)想要的數(shù)據(jù)，請(qǐng)及時(shí)更改。以確保下一個(gè)訪談能按需進(jìn)行（隨機(jī)應(yīng)變）
3. 考驗(yàn)的是洞察力而不是數(shù)據(jù)分析

七、結(jié)論

定性和定量用戶測(cè)試是服務(wù)于不同目標(biāo)的互補(bǔ)方法。

1. 定性測(cè)試涉及到少量的用戶（7-8），并直接識(shí)別界面中的主要可用性問題。它經(jīng)常被用于形式化的設(shè)計(jì)過程，并引導(dǎo)它向正確的方向發(fā)展。
2. 定量可用性測(cè)試(或基準(zhǔn)測(cè)試)是基于大量的參與者(通常超過30人)；當(dāng)分析和解釋正確時(shí)，定量測(cè)試的結(jié)果對(duì)隨機(jī)噪點(diǎn)有更高的保護(hù)（統(tǒng)計(jì)結(jié)果）。定量研究通過任務(wù)完成率、任務(wù)時(shí)間或滿意度評(píng)分等。指標(biāo)對(duì)可用性提供了一種間接的總結(jié)性評(píng)估，通常用于在設(shè)計(jì)迭代過程中跟蹤系統(tǒng)的可用性。

#相關(guān)閱讀#