菜单

何时使用哪种用户体验研究方法

通过 克里斯蒂安罗勒2014年10月12日

摘要:Modern day 万博官网manbetx下载 research methods answer a wide range of questions要知道何时使用哪种用户研究方法,20种方法中的每一种都会在典型的产品开发过程中跨3个维度和时间进行映射。


用户体验领域广泛研究方法available, ranging from tried-and-true methods such as lab-based usability studies to those that have been more recently developed, such as unmoderated online 万博官网manbetx下载 assessments.

虽然在给定项目中使用全套方法是不现实的,但几乎所有项目都将受益于多种研究方法和结合见解Unfortunately many manbetx官方网站手机版 teams only use one or two methods that they are familiar with.  The key question is what to do whenTo better understand when to use which method, it is helpful to view them along a 三维框架使用以下轴:

下图说明了这些维度中出现的20种常用方法:

20个用户研究方法的图表,按3个维度分类
每个维度都提供了一种方法,可以根据他们回答的问题和最适合的目的来区分研究。

态度与行为维度

这种区别可以归结为对比“人们说什么”与“人们做什么”(通常两者完全不同)态度研究的目的通常是理解或衡量人们所说的信念,这就是为什么态度研究在营销部门中大量使用的原因。

While most 可用性研究应该更多地依赖于行为,使用自我报告信息的方法对于manbetx官方网站手机版仍然非常有用For example, 卡片分类 provides insights about users' mental model of an information space, and can help determine the best information architecture for your product, application, or website. 调查 measure and categorize attitudes or collect self-reported data that can help track or discover important issues to address. 焦点小组往往对可用性不太有用 purposes, for a variety of reasons, but provide a top-of-mind view of what people think about a brand or product concept in a group setting.

On the other end of this dimension, methods that focus mostly on behavior seek to understand "what people do" with the product or service in question. For exampleA / B测试 presents changes to a site's manbetx官方网站手机版 to random samples of site visitors, but attempts to hold all else constant, in order to see the effect of different site-manbetx官方网站手机版 choices on behavior, while 视线追踪 seeks to understand how users visually interact with interface manbetx官方网站手机版s.

Between these two extremes lie the two most popular methods we use: usability studies and 实地研究他们利用自我报告和行为数据的混合,并且可以向这个维度的任何一端移动,但通常建议倾向于行为方面。

定性与数量维度

这里的区别是一个重要的区别,远远超出了定性的狭隘观点,如开放式调查问题中的“开放式”相反,定性的研究会在观察行为或态度的基础上生成有关行为或态度的数据而在...定量研究, the data about the behavior or attitudes in question are gathered 间接, through a measurement or an instrument such as a survey or an分析工具例如,在实地研究和可用性研究中,研究人员直接观察人们如何使用技术(或不使用技术)来满足他们的需求这使他们能够提出问题,探究行为,甚至可能调整研究方案以更好地实现其目标对数据的分析通常不是数学的。

相比之下,定量方法中的见解通常源自数学分析,因为数据收集工具(例如,调查工具或网络服务器日志)捕获了容易以数字方式编码的大量数据。

Due to the 性质差异qualitative methods are much better suited for answering questions about 为什么or how to fix a problem, whereas quantitative methods do a much better job answering how many and how much 问题类型拥有这些数字有助于确定资源的优先顺序,例如专注于影响最大的问题下图说明了前两个维度如何影响可以提出的问题类型:

可以通过用户研究回答的两个问题

产品使用的背景

第三个区别与研究参与者如何以及是否使用相关产品或服务有关这可以描述为:

  • Natural 或近乎自然地使用该产品
  • Scripted 使用该产品
  • Not using 研究期间的产品
  • hybrid 上面提到的

When studying natural use 该产品的目标是尽量减少研究的干扰,以便尽可能地了解行为或态度This provides greater validity but less control over what topics you learn about.  Many ethnographic field studies attempt to do this, though there are always some observation biases拦截调查和数据挖掘或其他分析技术就是这方面的定量例子。

scripted 研究产品使用情况是为了集中深入了解具体的使用方面,例如在新的remanbetx官方网站手机版流程上根据学习目标,脚本的程度可能会有很大差异For example, a benchmarking study is usually very tightly scripted and more quantitative in nature, so that it can produce reliable 可用性指标

Studies where the product is not used 旨在研究比使用和可用性更广泛的问题,例如对品牌的研究或更大的文化行为。

混合动力 methods use a creative form of product usage to meet their goals例如,参与式manbetx官方网站手机版方法允许用户与manbetx官方网站手机版元素交互并重新排列可以be part of a product experience, in order discuss how their proposed solutions would better meet their needs and why they made certain choices.  Concept-testing methods employ a rough approximation of a product or service that gets at the heart of what it would provide (and not at the details of the experience) in order to understand if users would want or need such a product or service.

图表中的大多数方法都可以沿着一个或多个维度移动,有些方法甚至可以在同一个研究中进行,通常是为了满足多个目标For example, field studies can focus on what people say (ethnographic interviews) or what they do (extended observations); desirability studies and card sorting have both qualitative and quantitative versions; and eyetracking can be scripted or unscripted.

产品开发阶段(时间维度)

在研究方法中做出选择时要考虑的另一个重要区别是产品开发阶段及其相关目标。

  1. 制定战略:在产品开发的初始阶段,您通常会考虑未来的新想法和机会这个阶段的研究方法可能差异很大。
  2. 执行:最后,当你不断改进你选择的manbetx官方网站手机版方向时,你会达到一个“走/不走”的决定点。这一阶段的研究主要是形成性的,可以帮助您降低执行风险。
  3. 评估: At some point, the product or service will be available for use by enough users so that you can begin measuring how well you are doing.  This is typically summative in nature, and might be done against the product’s own historical data or against its competitors.

下表总结了这些目标,并列出了与每个目标相关的典型研究方法和方法:

  产品开发阶段
制定战略 执行 评估
目标: 激发,探索和选择新的方向和机会 通知和优化manbetx官方网站手机版,以降低风险,提高可用性 根据自身或竞争对手衡量产品性能
做法: 定性和定量 主要定性(形成) 主要是定量(总结)
典型方法: 实地研究,日记研究,调查,数据挖掘或分析 卡片分类,实地研究,参与式manbetx官方网站手机版,纸张原型,可用性研究,可取性研究,客户电子邮件 可用性基准测试,在线评估,调查,A / B测试

艺术还是科学?

虽然许多用户体验研究方法源于科学实践,但其目标并非纯粹科学,仍需要调整以满足利益相关者的需求这就是为什么这里的方法的特征是一般指导原则,而不是严格的分类。

In the end, the success of your work will be determined by how much of an impact it has on improving the user experience of the website or product in question这些分类旨在帮助您在合适的时间做出最佳选择。

20 万博官网manbetx下载 Methods in Brief

以下是上图中显示的用户研究方法的简短描述:

可用性 - 实验室研究:参与者被带入实验室,与研究人员一对一,并给予一组导致任务的场景以及产品或服务中特定利益的使用。

民族志实地研究:研究人员与...见面在自然环境中研究参与者,他们很可能会遇到有问题的产品或服务。

Participatory manbetx官方网站手机版: participants are given manbetx官方网站手机版 elements or creative materials in order to construct their ideal experience in a concrete way that expresses what matters to them most and why.

专门小组: groups of 3–12 participants are lead through a discussion about a set of topics, giving verbal and written feedback through discussion and exercises.

面试:研究人员与参与者一对一地会面,深入讨论参与者对相关主题的看法。

视线追踪:眼睛跟踪设备配置为精确测量参与者在执行任务时的外观或与网站,应用程序,物理产品或环境自然交互的位置。

可用性基准测试:使用精确和预定的性能测量,与多个参与者一起进行严格的脚本化可用性研究。

适度的远程可用性研究远程进行可用性研究使用屏幕共享软件和远程控制功能等工具。

未经验证的远程面板研究:一组经过培训的参与者,他们在自己的个人设备上安装了视频录制和数据收集软件,在大声思考时使用网站或产品,记录他们的经验,以便研究人员或公司立即回放和分析。

概念测试: a researcher shares an approximation of a product or service that captures the key essence (the value proposition) of a new concept or product in order to determine if it meets the needs of the target audience; it can be done one-on-one or with larger numbers of participants, and either in person or online.

日记/相机研究:为参与者提供机制(日记或相机),以记录和描述与产品或服务相关的生活方面,或者仅仅是目标受众的核心;日记研究通常是纵向的,只能用于参与者容易记录的数据。

客户的反馈意见:由自选的用户样本提供的开放式和/或封闭式信息,通常通过反馈链接,按钮,表单或电子邮件。

可取性研究: participants are offered different visual-manbetx官方网站手机版 alternatives and are expected to associate each alternative with a set of  attributes selected from a closed list; these studies can be both qualitative and quantitative.

卡片分类:定量或定性方法,要求用户将项目组织到组中并为每个组分配类别这种方法有帮助创建或完善信息架构暴露用户的网站心理模型

点击流分析: analyzing the record of screens or pages that users clicks on and sees, as they use a site or software product; it requires the site to be instrumented properly or the application to have telemetry data collection enabled.

A / B测试(also known as “multivariate testing,” “live testing,” or “bucket testing”): a method of scientifically testing different manbetx官方网站手机版s on a site by randomly assigning groups of users to interact with each of the different manbetx官方网站手机版s and measuring the effect of these assignments on user behavior.

Unmoderated 万博官网manbetx下载 Studies: a quantitative or qualitative and automated method that uses a specialized research tool to captures participant behaviors (through software installed on participant computers/browsers) and attitudes (through embedded survey questions), usually by giving participants goals or scenarios to accomplish with a site or prototype.

真实意义研究:一种方法,询问随机网站访问者进入网站时的目标或意图,衡量他们的后续行为,并询问他们是否在退出网站时成功实现了目标。

拦截调查:在使用站点或应用程序期间触发的调查。

电子邮件调查:通过电子邮件招募参与者的调查。

深入的课程

关于全日制培训课程的使用方法和维度的更多细节User Research Methods: From Strategy to Requirements to manbetx官方网站手机版