谁，什么以及为什么–用户测试方法指南

本文概述

范围蠕变厌恶
多种类型的用户测试方法
定性行为用户测试
定性态度用户测试
定量行为用户测试
定量态度用户测试
摘要

用户测试的基本目的是更好地理解和理解数字产品的核心用户。不幸的是, 用户测试通常是事后的想法。
从卡片分类到可用性研究, 开发了用户体验设计中使用的用户测试方法, 以将用户包括在决策过程中。但是, 许多项目仅在原型的利益相关者反馈的情况下完成。缺乏用户体验测试的原因有两个：感知到的用户测试的负面ROI以及对范围蔓延的担忧。
用户测试方法的感知投资回报率
从设计者的角度来看, 可用性研究的实施不需要加强。任何曾经观看过人们努力使用原型执行任务的UX设计师都知道用户测试的价值。不幸的是, 大多数高管, 工程师和项目经理从未获得过见证可用性测试的特权, 因此可能需要以另一种方式使用户确信用户测试的重要性。
数据证明ROI的提高
可用性与客户忠诚度和购买行为直接相关-来自NN / g的Jakob Nielsen进行的研究表明, 当大约10％的重新设计预算用于用户测试方法时, 平均产品可用性会提高135％。
企业案例研究
当用户可以轻松地自行找到所需的信息时, 它可以减少挫败感并改善他们的体验。
每年都有数百万用户访问Mozilla Firefox上的支持站点。许多访问变成了在支持论坛上提出的问题。通过针对可发现性进行了优化的设计, 在迭代设计测试的九周内, Mozilla将支持问题减少了70％。
零售案例研究
国际油漆公司Dulux知道在线销售油漆的主要问题涉及以下问题：” 当油漆干燥时, 我的墙会是什么样？” 为了解决这个问题, 他们将名为Dulux Visualizer的增强现实应用程序概念化, 以帮助消费者” 在绘制之前对其进行绘制” , 并雇用Webcredible来构建该应用程序。
通过用户研究, 用户旅程映射和可用性测试, Webcredible团队开发了一个应用程序, 该应用程序将测试员涂料的销售量提高了65％, 库存搜索量增加了92％。

文章图片
Dulux Visualizer工具。
范围蠕变厌恶忽略用户测试的第二个原因不是有关执行人员, 而是有关项目经理。几乎每个设计师都听说过项目经理说, 由于期限紧迫, 没有时间进行用户测试。
项目经理仅了解与项目相关的三个组成部分：时间, 成本和范围。拉一个, 另一个将转移。例如, 如果将更多功能添加到项目, 则时间轴将延长或将添加更多资源。这就是为什么在设置时间轴时, PM不愿意让步的原因。了解了这一点, 设计人员可以通过一些关于可用的不同方法, 其范围和预算的UX教育来应对这些趋势。让我们看一下UX设计人员可以用来评估数字产品可用性的一系列用户测试方法。
多种类型的用户测试方法用户测试的类型很多, 从行为和态度到定性和定量, 每种测试都有一定数量的参与者以获得最佳结果。
态度和行为测试概括为” 人们怎么说” 与” 人们做什么” 。很多时候两者是非常不同的。
定性和定量测试被描述为” 直接观察” 与” 间接测量” 。定量测试数据将始终表示一定数量, 数量或范围, 而定性测试数据包含有关质量的信息。

文章图片
用户测试工具可以是模拟或数字的。
这些术语均属于形成性或概括性。伊利诺伊大学名誉教育学教授罗伯特·E·斯特克(Robert E. Stake)的话很好地总结了这一点：” 当厨师品尝汤时, 那是有前途的。当客人品尝汤时, 就可以总结出来。”
定性行为用户测试这种类型的用户测试可观察少数参与者在各种情况下的工作情况, 无论是在工作环境中执行常规工作, 还是在最近设计的原型中完成任务。这些测试需要最少的参与者, 因此最容易说服项目经理加入。

文章图片
可用性测试的最佳参与者人数是多少？
根据这本书, “ 发现可用性问题的数学模型” , 五个可用性测试参与者将在测试的UI中发现85％的问题。为了获得最佳结果, 应该通过三个设计迭代来执行, 总共15位参与者。
可用性研究通常在初步设计完成后的项目中间进行。不必等到产品发布后才发现可用性问题, 而是可以在更容易更改设计规格时将收集到的数据用于改进产品。

文章图片
超过五个用户(Nielsen Norman Group)的情况下, 用户测试的ROI显着降低。
为了获得每次设计迭代建议的五个用户数量, NN / g对2到28名参与者进行了不同客户的83项可用性测试。结果表明, 重复的发现显着增加, 只有五名参与者之后只有一些新发现。最重要的结论是, 所有可用性测试至少都产生了一些见识。

文章图片
大量用户不一定会揭示新发现。
12个用户发现了用户体验测试时的33个问题
一个新的癌症幸存者应用程序的开发人员在其产品发布日期的三周前联系Marketade进行了可用性测试。在两周的时间内, Marketade对12位用户进行了迭代可用性测试：8位癌症幸存者和4位护理员。他们的可用性测试发现了33个可用性问题, 其中9个影响很大。
所有这些案例研究最大的共同点在于, 小型测试组可能会对产品的最终可用性产生巨大影响。当证明不需要花费数百名参与者(和几星期的时间)收集有意义的结果时, 产品经理, 项目经理和其他利益相关者可以更轻松地加入到用户测试中。
定性态度用户测试 【谁，什么以及为什么–用户测试方法指南】在此测试中, UX研究人员调查了少数参与者, 以了解他们对产品, 体系结构或设计的感觉。定性的态度测试比定性的行为研究需要更多的参与者, 但没有更多的参与者。

文章图片
卡分类
进行了一项研究, 以了解所需的卡片分类参与者的最少数量, 发现有15个用户可以通过卡片分类练习来快速改善轻型体系结构, 而建议使用30个参与者进行内部架构和门户之类的大型体系结构。卡片分类通常是在审核信息体系结构之后的项目中间进行的。
专门小组
最近的研究表明, 由8至10名参与者组成的3至6个焦点小组可以识别数据集中90％的主题。这些焦点小组通常在项目的战略阶段进行。从参与式设计练习到公开讨论, 有许多与焦点小组参与者进行的练习。
定性态度的例子
用户体验公司Etre致力于改进Eurostar信息体系结构。他们的网站包含11, 000个网页和PDF, 其中80页是该体系结构的基础。埃特(Etre)将每个核心页面变成一张卡片, 以进行大量的卡片分类练习。他们理解每个用户组需要20名参与者, 但是, 在9个用户组中, 他们的练习包括180名参与者, 每个参与者整理了80张卡片, 产生了14, 400项商品进行分类！
幸运的是, Etre利用了在线卡分类资源, 该资源可将数据自动分类为可消化的见解。尽管卡片分类只是网络设计工作的一个组成部分, 但欧洲之星的收入却比上一年增长了24％, 即2600万英镑, 而网站访问量增长了2.2％。
定量行为用户测试对于这种研究类型, 至少需要20名参与者, 并且往往是更多的参与者。通过定量研究, UX研究人员正在收集的数据中寻找模式, 因此参与者越多, 数据越准确。

文章图片
热图可以显示页面滚动和鼠标移动。
热图
NN / g发现需要39位用户提供所需的热图详细信息以进行眼动追踪。每个测试页至少需要30组良好的眼动追踪数据, 这些数据平均可以达到39个实际用户才能获得该数据集(因为眼动追踪技术并不完善)。通常在执行新设计之后执行对热图的眼动跟踪。
定量研究
建议至少有20名参与者进行定量研究。像可用性测试一样, 执行这些研究是为了通过完成一组任务来了解用户的行为。区别在于如何收集数据, 即通过远程查看而不是一对一练习。它们通常是在在线托管产品或交互式原型之后进行的。
由于这些类型的研究需要更多的用户, 因此它们可能会花费更多的时间并且执行起来会更昂贵。因此, 与许多定性的用户测试方法相比, 它们不那么常用。
增加的用户保留
通过定量研究站点UserTesting, Evernote在多种设备上的用户保留率提高了15％。通过在UserTesting.com上托管产品并利用他们的不同受众, Evernote能够了解用户在哪里遇到问题。对于拥有广泛用户群的产品, 这些用户测试工具的使用特别有用, 因为它们具有广泛的用户反馈。对于具有特定用户定义的一组产品, 其他解决方案可能会更好。
定量态度用户测试最重参与者的测试是定量态度运动。目的是了解一大群人对产品的看法, 目的是将答案汇总为有意义的图表和图形, 以便于使用。

文章图片
用户调查是收集定量态度数据的一种方法。
调查
调查参与者因产品人口规模而异。最佳结果包括5％(或更少)的误差幅度和至少95％的置信度。你可以使用样本数量计算器来确定所需的参与者数量。
例如, 一个人口为100的小型站点仅需要80个调查参与者, 而人口为100, 000的受欢迎的站点则需要383个调查参与者。在项目的开始和结束都进行调查。
定量态度的例子
尽管Walmart.ca收集了大量统计网站数据, 但没有客户的见解, 他们的数据仅讲述了故事的一半。通过将个人数据(通过网站调查以及交易数据)包括在内, 沃尔玛能够看到完整的图片并改善其网站布局, 从而使收入增加了13％。
摘要向决策者显示硬数据可以说服他们将资源专用于用户测试。用户是产品的支柱, 也是用户体验设计的真正目的；实施本文中概述的一些用户测试方法, 以便收集定性和定量数据, 以证明对每一个UX设计人员来说, 什么是有效的, 什么不是有效的是头等大事。
? ? ?
在srcmini设计博客上进一步阅读：