前言

总结: 如今,多样的 UX 研究方法可以帮助我们回答各种研究问题。为了帮你了解、决定何时使用哪种用户体验研究方法,我们将 20 种方法绘制在 3 个维度中,并讨论了在典型产品开发过程的不同时点中何时使用它们。

用户体验领域有许多种类的研究方法可供选择,包括历经时间考验的(如在实验室进行的可用性测试),以及新近开始使用的方法(如无主持人的 UX 评估)。

尽管在单个项目里使用所有方法并不实际,几乎所有项目都可以从使用多种研究方法、结合各个研究中得到的洞见而获益。然而,不幸的是,许多设计团队仅使用一两种他们最熟悉的研究方法。关键问题是何时用什么方法。为了更好地理解什么时候用哪种方法,下面的三维度框架可以帮助我们进行决定:

  • 态度 vs. 行为
  • 定性 vs. 定量
  • 使用情境

下图阐明了 20 个主流研究方法在这些维度上的分布:

何时使用哪种用户体验研究方法 - 图1
每个维度都提供礼物一种区分不同的研究方法的方式,它们可以解答的问题及最适合的研究目的都有所不同。在定性 - 定量维度上处于中间的方法可以被用来收集定性和定量数据。

一、态度 vs. 行为维度

这个维度可以总结成 “人们说什么”与 “人们做什么” 的对比(这两者往往有很大差异)。态度性研究的目的通常是理解或测量人们陈述的信念,但这类研究会受人们意识到的、以及他们愿意报告的东西所影响。

尽管绝大多数可用性研究应该关注用户行为,使用自我汇报信息的研究方法有时也对设计师很有用。例如,卡片分类法就用户对于给定信息空间的心智模型提供洞见,可以帮助确定对于产品、应用或网页而言最合适的信息架构。问卷调查可以度量、分类用户态度,也可用来收集自我汇报数据,帮助发现、追踪需要关注的重点问题。出于多种原因,焦点小组法对于提升可用性而言帮助不大,但可以提供小组视角下人们对于品牌或产品概念的最深印象。

在该维度的另一端,主要关注用户行为的研究方法帮助我们理解针对特定产品或服务,“人们怎么做”。例如,A/B 测试旨在给随机样本的网站访问者呈现改版设计,而对于其余用户则保持原有设计,从而确定不同网站设计对于用户行为的影响。而眼动追踪则可以帮助理解用户如何在视觉上与一个设计或视觉刺激交互。

在这两个极端之间,存在两种我们最常用的研究方法:可用性测试和实地考察。它们既获取自我汇报数据,也测量行为数据,并根据情况倾向这个维度中的任意一个方向。一般来说,我们更推荐倾向获取行为一侧的数据。

二、定性 vs. 定量维度

这个维度的区分非常重要,远远超过狭义上 “定性” 的定义,比如在问卷中放一个开放式问题。真正意义上的定性研究基于直接的观察或聆听来获取有关行为或态度的数据。而在定量研究中,有关行为或态度的数据是通过指标或工具间接收集的。例如,在实地考察和可用性测试中,研究员直接观察人们如何使用(或者不用)产品来满足需求、完成任务。这些观察让他们得以询问问题、就特定行为进行追问,甚至为了满足研究目的而调整研究范式。对于数据的分析也往往不是严格、精确的。

相反,在定量研究中要收集的数据类型是预先定好的——可以包括任务用时、成功率、用户是否点击给定 UI 元素,或他们是否在某个单选题中选择了特定答案。定量方法中获得的洞见往往来源于精确的统计分析,因为数据收集的工具(例如问卷调查平台或指标分析工具)捕获的是大量、自动以数字形式编码的数据。

出于这种天然的差异,定性研究方法更适用于解答有关某个问题为何出现、如何解决的相关议题,而定量方法则更适合解答与存在的问题数量、程度相关的议题。这些数字可以帮助优化资源分配,诸如关注那些有最大影响的问题。下面的图表显示了这两个维度是如何影响我们可以解答的研究问题的:

何时使用哪种用户体验研究方法 - 图2

三、产品使用情境

第三个维度关注研究参与者是否使用、如何使用被研究的产品或服务。这个维度可以被表述为:

  • 自然或接近自然地使用产品
  • 按计划使用产品
  • 有限使用,即以一种限定的形式来使用产品,来了解用户体验的特定方面
  • 在研究中不使用产品(去情境化)

在考察用户自然使用产品时,目的是尽可能减少研究本身的干扰、了解尽可能接近真实世界的用户行为或态度。这可以提供更高的外部效度,但会减少研究员对于研究主题的控制程度。虽然我们始终无法消除一定的观察者偏见,许多民族志实地考察类的研究方法主要想要达到该目的。拦截问卷、数据挖掘或其他指标分析是该类研究方法应用到定量研究中的例子。

按计划使用产品的研究关注收集特定产品领域的洞见,如某个新近改版的任务流设计。计划的严格程度根据研究目标的不同可以有很大的差异。例如,标定研究通常有严格的研究计划,通过在不同参与者之间较强的一致性来确保产出有效的可用性指标。

有限使用产品的研究使用产品的一种限定形式,来考察体验的某个特定方面或抽离的元素。比如,一些参与式设计的研究方法允许用户与许多可能进入产品体验的备选设计元素交互、并对其排序,从而讨论他们为何给出特定设计方案,这些方案又如何满足了他们的需求。概念测试的相关方法表述的是产品或服务的核心概念(而非相关体验的细节),来理解用户是否想要、是否需要这样的产品或服务。卡片分类和树状分类关注的是信息架构的现状如何,或是怎样组织才能对参与者而言更有意义、更方便他们导航。

并不使用产品的研究往往考察的是比产品使用和可用性更宽泛的议题。例如对于给定品牌的研究,或探索参与者对给定设计风格产生的审美感受。

根据研究目的的不同,许多研究方法都可以在一个或多个维度上向不同方向移动。有时为了满足多个研究目标,一些方法可以在同一个研究里按照需求偏向不同方向。例如,实地考察可以更偏向关注人们说了什么(民族志访谈)或强调研究人们做了什么(额外观察);概念测试、欲求度研究、卡片分类都有定量和定性版本;眼动追踪研究可以是自然情境,也可以是按计划进行的研究。

四、产品开发阶段(时间维度)

在考虑选择研究方法时的另一个重要因素是产品开发所处的阶段以及与其相关的目标。举例来说,在产品开发初期,你一般对产品将要走哪个方向的策略层面的问题更感兴趣,因此这个阶段使用的研究方法往往都是生成性的,因为它们帮助我们生成想法以及往哪条路走的答案。一旦我们选定了一个方向、开始设计阶段,此时的方法被称为形成性方法,因为它们帮助你确定如何改进设计。在产品开发到一定阶段、可以将它与早期版本或竞品进行度量、比较时,帮助我们这样做的方法被称为总结性方法。下表按照时间顺序,将多种研究方法归置到产品开发的不同阶段:

产品开发阶段
制定策略 设计 发布 & 评估
研究目标:
发现新方向和机遇
研究目标:
提升设计可用性
研究目标:
测量产品相较于早期版本或竞品的表现
生成性研究方法 形成性研究方法 总结性研究方法
研究方法举例
实地考察、日志研究、访谈、问卷调查、参与式设计、概念测试 卡片分类、树状分类、可用性测试、远程测试(有主持人、无主持人) 可用性标定研究、无主持人 UX 测试、A/B 测试、点击流 / 指标分析、问卷调查

五、艺术还是科学?

尽管许多用户体验研究方法源自于科学,它们的目的并不是进行纯粹严谨的科学实践,而是需要根据利益相关方需求进行灵活调整。这就是为什么说我们对这些方法的特性描述只是一般性的指导原则,而非绝对严谨的分类。

最后想要说明的是,用户研究工作的成功与否取决于它对产品用户体验有多大影响。这些分类旨在帮助你在正确的时间做最好的选择。

六、20 种 UX 方法简介

下文简单介绍了上面图表中提到的每种研究方法:

可用性测试(即实验室内可用性研究):参与者被邀请到实验室,与研究员一对一进行研究。研究员给参与者一系列基于场景的任务,从而让他们使用产品或服务内的特定功能。

实地考察:研究员在参与者自己平时最常使用产品、服务的自然、真实环境里(如办公室或家里)观察。

情境问询:研究员和参与者在参与者日常所处的环境中协作,研究员观察参与者在自然状况下完成手头的任务和工作,并进行询问。这种方法和实地考察非常相似,最初被用来深入研究涉及复杂系统和流程的工作。

参与式设计:研究员给参与者一些设计元素或创造性材料,让参与者具体地构建他们理想的体验,从而揭示出对他们而言重要的元素及其理由。

焦点小组:由 3-12 名参与者组成的小组就一系列主题在主持人引导下进行讨论,通过完成讨论和活动给出口头和书面反馈。

访谈:研究员与参与者进行一对一深入讨论,探讨参与者就给定议题的想法。

眼动追踪:眼动追踪设备精确地测量参与者在完成任务或自然地与网页、应用、实体产品以及环境交互时注视的位置。

可用性标定研究:对较大样本的参与者进行严格计划的可用性测试,使用精确、预先确定的度量指标,一般目标是在一定时间内追踪产品的可用性提升或与竞品做对比。

远程有主持人的测试:远程进行的可用性测试,通过有远程控制能力的视频会议、屏幕分享软件等进行。

无主持人测试:一种既可以定性、也可以定量进行的自动化测试方法,使用专门的研究工具来记录用户行为或态度。该类研究往往给定参与者一些目标或情境,让他们通过使用一个网站、app 或原型来完成。进行测试的工具会记录每个用户场次的录像,并收集可用性指标例如任务成功率、任务用时,以及用户对易用程度的评分。

概念测试:研究员向参与者展示一个新产品或服务的近似物,它包含该新产品或服务的关键要素(价值定位),来确定该产品或服务是否满足目标用户的需求。该测试形式可以是一对一或一对多,可以线下也可以线上。

日志研究:参与者用一定机制(如纸质或电子日志、相机、手机应用)来描述和记录他们生活中与产品或服务相关的部分,或仅仅是目标用户日常生活的核心部分。日志研究往往是纵向进行的,并且只适用于那些易于参与者记录的数据。

用户反馈:往往通过反馈链接、按钮、表格或邮件自行选择一部分用户,收集他们提供的开放式或闭合式信息反馈。

欲求度研究:向参与者提供不同的视觉设计备选方案,并给定一个有若干属性词语的列表,让参与者将词语分配给每个方案。这类研究可以定量也可以定性进行。

卡片分类:是一种定量或定性研究方法,让用户将一些待分类条目分组归类,并命名每个分类。这种方法通过展现用户的心智模型,帮助创建或改进网站的信息架构。

树状分类测试:是一种测试信息架构的定量方法,确定在信息层级中发现各个条目的容易程度。该方法可以用于评估已有的信息架构、作为基线,然后在使用卡片分类、改进信息架构后,用来证明信息架构的进步。

指标分析:分析从用户行为中获取的数据,如点击、表单填写和其他被记录下来的交互。它需要我们提前在网站或应用内用工具埋点。

点击流分析:一种特定类型的指标分析,分析用户使用网站或软件应用时访问各个页面的顺序。

A/B 测试(即多变量测试、实时测试,或水桶测试):一种科学地测试不同设计版本的方法,随机地将用户分配到不同设计版本,让他们与之交互,并测量这种分配对于用户行为的影响。

问卷调查:通过一系列问题(通常闭合式多于开放式问题)来定量测量用户态度。在用户和网页或应用交互时触发的问卷被称为拦截问卷,这也往往由用户行为触发。更常见的情况是通过邮件或其他渠道,如社交媒体招募参与者。

结语

原文地址:https://www.nngroup.com/articles/which-ux-research-methods/

版权声明
本文版权属尼尔森诺曼集团(Nielsen Norman Group)所有。欢迎转发至朋友圈,如需转载,请邮件 Support@nngroup.com。未经授权的转载、翻译是侵权行为,版权方将保留追究法律责任的权利。