Testin的用戶研究測試是Usability Test + SPIT，融合了5大學科的一種新型測試策略。其概念最早是由2004年美國心理學家諾曼和尼爾森提出。它是衡量產(chǎn)品用戶界面設計及邏輯實現(xiàn)品質(zhì)的重要指標。
用戶體驗差，易學性差，引導性不夠這些問題一點都不亞于一個功能性Bug帶來的可怕后果。對目標用戶造成的困擾，辛苦獲客后的流失也是大中型企業(yè)特別需要關注的問題。我們的用戶研究測試就是幫助企業(yè)發(fā)現(xiàn)并解決類似的問題的一種有效手段。
深度用戶研究測試對目標用戶的甄別要求是非常高的，可能需要20多個， 30多個，甚至更多的標簽來加以甄別，更的做目標用戶與被測APP畫像的匹配。
近日，北京移動一行訪問Testin云測， Testin用戶研究測試項目負責人吳洋做了如下演講：
從第一個“用戶研究”課題到現(xiàn)在，Testin已經(jīng)在最近的這兩年里陸續(xù)交付了越來越多，越來越專業(yè)的“用戶研究測試”報告。幫助的公司從最初的中型企業(yè)，國內(nèi)企業(yè)，延伸到海外企業(yè)和出海企業(yè)。服務的大客戶遍及高端醫(yī)療，高端商務，包機服務，搜索救援，國際旅游等各個專項領域。
我們的合作伙伴，也已經(jīng)遍及了中國大陸、中國臺灣、中國香港、美國、德國，瑞典等越來越多的國家和地區(qū)。其中不乏國內(nèi)的大型國企，國內(nèi)和國際500強企業(yè)。
今天，很榮幸能為咱們中國的又一驕傲——中國移動分享我們的一點點優(yōu)勢。即專業(yè)的“用戶研究測試”。
因為我是項目負責人，所以說我給大家做的這次分享會按照項目的思路和角度，比如5W原則和SCS。什么是用戶研究測試、為什么用它、誰在用它、在什么位置或者在什么時間用它、具體怎么去使用用戶測試，以及一些成功案例的分享。
| 第一個W，“what” ，Tetsin的用戶研究測試是什么?跟業(yè)界的有什么區(qū)別?
Testin用戶研究測試融合了市面上大家所知道的UST+SPIT兩種測試的綜合測試策略，主要包含下圖的數(shù)據(jù)統(tǒng)計學、心理學、行為學,工程學以及微表情分析學五大學科。
早在2004年，美國心理學家諾曼和尼爾森就提出了用終端用戶的體驗研究來判斷軟件的界面和邏輯設計品質(zhì)好壞的方法。后來的國際可用性聯(lián)合會(即UPA)也提出了相應的IOS標準，我們Testin的用戶研究測試就是依托于此標準(ISO9241)衍生出來的的一門測試方法，如下圖：
| 第二個W，我們看看用戶研究測試能為企業(yè)帶來哪些價值。
在APP或軟件投放市場后遇到最尷尬的問題匯總?cè)缦拢?/p>
重點說下用戶習慣的問題。前段時間有一個臺灣的客戶，我們做用戶研究測試的時候發(fā)現(xiàn)，我們測試中的目標用戶都會去點主頁上最上方的那個圖片，他們會覺得那個圖片可以鏈接到另外一個頁面，去查看它的詳情，但這個企業(yè)開發(fā)基地在臺灣，他們的用戶習慣是圖片多半就只是用來展示，并沒有在設計的時候為其加上鏈接， 而APP在進入大陸投放時，這一點就成為了很多目標用戶的使用困擾，這一點也就變成是一個造成其目標用戶流失的原因。
我們再簡單聊一下是“友好性”。如果企業(yè)沒有考慮到這一點，可能會給我們的目標用戶帶來很不好的用戶體驗，從而丟失寶貴的目標用戶。在某些目標用戶群特點鮮明的APP，這些問題一點都不亞于一個功能性Bug帶來的可怕后果。比如說一些面向的高端商務人群的APP，他們使用APP的時間多半比較碎片，也就是那么一點點的碎片不連貫的時間。比如說在去機場的車上，在底下停車場到電梯的短暫幾分鐘。甚至在這些時候他們都隨時可能接電話，那么APP是否友好，是否考慮到了目標用戶使用場景而設計處相應友好的交互就顯得至關重要了。
| 如何做深度用戶研究測試?
深度用戶研究測試一般面向的是中型或者大型的企業(yè)，它們大都具有國內(nèi)或者國外大企業(yè)的支持背景，有一定的經(jīng)濟實力。而且對自己產(chǎn)品的要求比較高，對目標用戶的體驗非常重視。一次大的市場投放動輒就是百萬級或者更高。他們對迭代功能非常慎重，一年通常非?？释袃傻饺蔚纳疃扔脩粞芯繙y試，來為他們的產(chǎn)品決策以及產(chǎn)品走向提供一些數(shù)據(jù)支撐。他的APP目標用戶特征一般會非常鮮明，比如，我們來看一下之前合作的一些深度用戶研究測試的例子：
母嬰類
母嬰類APP用戶一般都是年輕人，準媽媽，或者準爸爸。大家可以想象一下，在我們這一代和我們長輩那一代里面，對育兒的理念和認識其實是有很多地方是不一樣的，上一代的很多傳統(tǒng)理念在這一代是不完全接受的，很多理念我們更愿意通過互聯(lián)網(wǎng)，APP，網(wǎng)絡社區(qū)等方式去學習和分享。這篇文章說服我，達成共識乃至共鳴之后，我就會特別愿意接受文中提到的某款育兒產(chǎn)品。如果大家都說它好，而且舉出了實例，很多別的的媽媽都這么做，我也會想做，所以母嬰這一類APP里的分享和展示模塊是非常的重要的，我們曾經(jīng)在給這樣一個客戶做深度用戶研究測試時發(fā)現(xiàn)他們的APP分享模塊和互動跟帖聊天模塊設計的流程太深(當時其企業(yè)并未認識到這一點)，我們參與測試的目標用戶有一半以上在分享和互動跟帖的場景中發(fā)生了性的路徑偏移。深度用戶研究測試，幫企業(yè)發(fā)現(xiàn)了這一需要修正的問題。
兒童類
大家都知道兒童的想象力比較豐富，兒童就是比較愛玩兒，他的注意力是極易被吸引走的，而且他們的好奇心是非常強的。去年我們做的一款兒童益智早教類的APP，企業(yè)希望通過自己設計的思路和場景，引導孩子進入下一步。做了一個一閃一閃，一抖一抖的Icon放在屏幕的右邊中間，也就是“下一步”，但其實通過我們用戶研究測試發(fā)現(xiàn)他們錯了。為什么呢?是因為這里面抖一抖，跳一跳的，對大人來講是會先點這個一個地方，小孩不是，他們總會點擊左上角，而且在這個頁面頻繁點擊一個地方—-左上角，因為，哪里有一個光頭強。對，這就是引導性問題，也需要修改。
醫(yī)療類
醫(yī)療類APP用戶的鮮明特點就是一個字：急。文字內(nèi)容統(tǒng)統(tǒng)走馬觀花，很直接的想完成交易，約醫(yī)生上門。我們通過用戶研究測試發(fā)現(xiàn)，他們的分析能力普遍比較差，比較容易焦躁，較容易出現(xiàn)來回切換頁面，甚至3秒鐘找不到想要的路徑就直接關APP，殺進程的情況。在醫(yī)生上門的流程上，如果還要填寫自己的地址，年齡，大致病癥就變得很不合理。80%的測試者在此場景會發(fā)生放棄使用APP的情況。此核心場景的行為分析結(jié)果出來后也著實讓我們的客戶捏了一把冷汗。
| 針對這些特點，我們深度用戶研究測試是怎么做的?
第一個是方案設計;第二個是實驗室搭建;第三個是預測試和測試執(zhí)行，最后是用戶感知分析和整理。這里面大家注意一下預測試的問題，深度用戶研究測試一定是有預測試的。為什么呢，我們深度的用戶研究測試，多半都是做定性的分析。大家回憶一下哈，剛才第一種線上用戶研究測試我們用的是定量，這個是做定性，定性的測試方式一般不會太多測試者，一般大概是8到20個人，我們現(xiàn)在經(jīng)常做的就是8個人，12個人，16個人，一般就是這幾個規(guī)格。20個人以內(nèi)做的比較好。我們對目標用戶的甄別要求是非常高，我們可能需要20多個，30多個，甚至更多的標簽，來確定其畫像。這個人到底是不是我們這款軟件最終的目標用戶。
下面我們說一說實驗室搭建，比如說剛才大家看到的母嬰類。母嬰類在做的時候，如果發(fā)現(xiàn)環(huán)境非常嘈雜，測試者在測試實驗室的時候，就非常容易焦躁，那么最后分析出來的這些感知(焦躁)，可能根本就不來源于這個產(chǎn)品，所以我們要排除這個情況。測試間里面盡可能放一些沙發(fā)更舒適一些，放一些零食想吃什么吃點什么，放一些飲料，輕音樂等，讓整個測試環(huán)境更貼近于真實。測試者的行為和微表情更多的來源于對測試APP或者軟件的感知。這就是實驗室搭建的基本，也是核心。
最后一個就是對感知的分析和整理，因為我們測試過程盡量降低無效感知數(shù)和無效感知率，但是里面畢竟還是會有一部分無效感知的，我們要對這些結(jié)果做一些分析和甄別，把它去掉，然后通過有效的這些感知，來判斷出測試者對這個頁面的真實感受。
| 現(xiàn)場互動摘選：
Q:每一個人有40個標簽，那你的標簽分1，2，3到多少嗎?
A:其實我們并不是按照1，2，3，的level來劃分的。我們通過的是不同的緯度，比如靜態(tài)固定標簽，浮動標簽或者是動態(tài)標簽。舉個例子，比如說圖中這個畫像的這個標簽—年齡段，還有這個—性別，基本這些在很長一段時間內(nèi)是一定不會變的，這些是他的靜態(tài)標簽。再比如他喜歡干的事情，喜歡用的化妝品，這些是他的動態(tài)標簽。又例如他最近經(jīng)常在北京和上海兩邊飛，但下一段時間他可能會出差澳洲，所以這是他的浮動標簽。
Q:你們的標簽是怎么來的?
A:這個標簽有很多的方式，比如說線上的，比如說我們有一些內(nèi)部渠道。
Q:為什么要定義這些標簽?
A:因為判斷目標用戶到底是不是目標用戶，不能靠主觀去判斷，必須要科學，合理。我們的40多個標簽再與客戶APP的目標畫像去匹配，這樣才能保證限度的重疊目標用戶。加上實驗室的場景和固定的腳本，才能保證測試的一些基本原則，比如可復現(xiàn)性，可移植性等。
Q:標簽那是和客戶一起建立的還是你們自己建立的?
A:算是我們線上積累的吧，積累的方式有多種。
Q:你們綜合實驗室的利用率高嗎?
A:不好直接回答，這么說吧，我才從其中一個實驗室做完一個用戶研究測試回來。
Q:一個月有幾次這樣的測試?
A:現(xiàn)在不光國內(nèi)，國外這種需求都是非常多的，就像前段時間國際救援的那個項目，它可能還需要各種語言的參與。我們現(xiàn)在國內(nèi)的很多APP，已經(jīng)不滿足在國內(nèi)的市場，他們想出海，把APP應用到海外。我們當前正在美國投建兩個用戶研究實驗室，也是以期滿足國內(nèi)企業(yè)出海的需求。所以，這樣的測試是很有必要也很供不應求的。
Testin是全球“一站式移動應用云測試服務”，為移動應用、游戲、VR/AR、可穿戴、物聯(lián)網(wǎng)、人工智能開發(fā)者提供必需的一站式應用測試服務和質(zhì)量保證。Testin云測通過深度機器學習的人工智能自動化腳本完成移動應用在云部署真機上的功能、兼容性、回歸、安全的自動化測試、真機調(diào)試、A/B測試及Bug缺陷管理，Testin眾測通過遍布全球的共享測試專家對應用進行功能、用戶體驗、場景和可用性測試，Testin Pro自動化測試私有云集成兼容、真機調(diào)試、功能測試、性能撥測、應用及測試管理進行私有化部署。Testin目前已經(jīng)持續(xù)服務超過80萬開發(fā)者，為超過200萬個應用進行了超過1.5億次測試，累計3輪融資超過8000萬美元，與ARM、Intel、Google、IBM、微軟、阿里、騰訊、360、小米以及全球眾多的移動互聯(lián)網(wǎng)生態(tài)企業(yè)建立了良好的合作與溝通關系，先后被評為清科2014年、2015年中國投資價值企業(yè)50強，德勤2015年、2016年中國高科技高成長50強，Red Herring紅鯡魚2014年亞洲100強和2015年全球100強。更多安全資訊與服務，請持續(xù)關注Testin 安全，面向開發(fā)、QA團隊的持續(xù)滲透人工智能機器學習安全測試驗證服務。
Testin的主要服務包括：
Testin 云測真機自動化云測試，面向開發(fā)、QA團隊，中國、北美、全球熱點和高覆蓋率機型的真機兼容、功能和回歸測試
Testin 云測遠程真機調(diào)試，面向開發(fā)團隊，通過瀏覽器、開發(fā)工具遠程連接真實終端，7×24實時操作、快速定位問題
Testin 眾測，面向開發(fā)、QA團隊，遍布中國、北美及全球熱點地區(qū)的測試專家共享測試服務
Testin Pro私有云，面向企業(yè)開發(fā)者的一站式自動化測試服務私有云平臺
Testin A/B測試，面向產(chǎn)品、運營團隊，用科學實驗和人工智能數(shù)據(jù)分析驅(qū)動產(chǎn)品演進的迭代測試
Testin Bugout，面向開發(fā)、QA團隊Bug缺陷管理系統(tǒng)
Testin 安全，面向開發(fā)、QA團隊的持續(xù)滲透人工智能機器學習安全測試驗證
Testin AppBase，企業(yè)開發(fā)者的移動應用市場、運營、產(chǎn)品、研發(fā)綜合基準數(shù)據(jù)庫
申請創(chuàng)業(yè)報道，分享創(chuàng)業(yè)好點子。點擊此處，共同探討創(chuàng)業(yè)新機遇！
