以用户为中心的设计

揭露在线可用性测试的神话

作者:Bill Albert  |   发布: (编辑)kent.zhu   |   时间:2010-06-01 21:50:36 文字大小:- +

我很喜欢《流言终结者》这个电视节目,因为我认为他所面临的挑战就是真实。在节目中,用一种令人愉快的和科学的 方法来对人们普遍认同的留言进行测试。在节目中我最喜欢的部分,当然除了爆炸的部分,是我所信仰的被证明是不真实的。这一直让我开放思想,专注于现实。我 也喜欢另一个方面——揭露还没有建立起来的流言。这就是我这篇文章的视角。特别地,我将突出有关与网络可用性测试的五个常见的流言,同时解释为什么我认为 这些流言是不真实的。

写这篇文章的动机是帮助用户体验研究生人员在线可用性测试时打开思想。已经有很多研究人员使用这种方法许多年, 而且很有用(在某些情况下)。其他人则是刚开始接触,并希望了解更多的关于它的优势和局限性的信息。最后,一些用户体验研究人员已经形成了关于在线可用性 测试的一些观点,并认为不是对各种各样的原因(没有形成的)都有用。我希望通过我揭露这些流言,作为用户研究团体的我们能够根据真实的功绩来评估这个工 具。

1、有大量的干扰因素影响数据的可信赖度

可能大部分关于在线可用性测试的的流言是数据都不是很可 信的。一些人认为这些参与者不会很努力,在参与调研时也是心烦意乱,会尽可能快的完成调研以获得相应的激励,或者虚假陈述他们调研的质量(目的就是获得奖 励)。这的确是事实,大体上在所有的案子中占到5%-10%。 但是,这已经是一个好消息了。

这儿有一些很好的技术来清除这些数据。鉴别(和移除)“精神骗子”并不难。这些人的行为是可以预测的。“扁平 化”是指一些人的答案都是15,在5个等级量表中。“速度检测”是一种检测这些人(看问题6在这幅图下)的方法,确保他们确实认真阅读了每一个问题。一致性检验可以用重复词语的问题,并来分析一致性的回答。移除不切实际的 任务时间也是很容易的,并能帮助处理那些在任务中间周末回家的参与者。同时,筛选问题可以写信给那些欺骗性最小的参加调研的参与者(那些伪装自己的人)。

归根结底,在线可用性测试的 数据能够和传统的实验室测试一样可靠。唯一的不同就是在跳到分析阶段以前需求做一些清理。

2.你只需要收集数据

当人们告诉我在线可用性测试只适用与收集基本的数据:比 如任务的成功、完成时间、满意度等时,我一直感到惊奇。因为某些原因,人们认为这只是因为你有一个大样本量,你只能收集定量数据。网络可用性研究是没有意义的,如果你想要收集关于用户体验的定性数据,。这些不能远离事实。

在线可用性测试的好处之一就是研究人员可以收集大量的关于用户体验的定量和定性数据。举个例子,如果用户对特殊 的任务有困难,他们可以提供注解,说明他们为什会在这些任务上有困难,或者他们希望在交易时有困难的地方出现什么。定性数据,经常是详细的评论,能够在他 们体验的任何一个环节收集。当用户展示某些行为时,他们甚至可以提示提供一些详细的评论,比如中途放弃交易或者偏离了导航行为。

详细的评论不仅很容易收集, 而且很容易分析。现在有很多可利用的方法来选出来描摹这些详细的评论。在详细的回答中,词组群(见下文)是一种能得到快速反应的关键模型的方式。

3.在线可用性测试在设计阶段不能取得好的功效

大部分人认为在运行在线可用性测试只适用于产品建立好以 后。这样的在线可用性研究只是总结性评估的一个部分,同时并不适合与实际设计阶段。在线可用性测试并不能指导设计,要么花费太多的时间,要么花销太大在设 计阶段。这些并不切合实际。

在线可用性测试能在几个小时内建立起来,也能够很快的收集数据。我们已经能在一天内建立、发布并分析来自在线可 用性测试的数据。不仅能够快速的建立,而且能够帮助回答在设计阶段发生的问题。例如:关于导航方式、标签、外观和感受的参数选择的问题。还有一些其他设计 参数选择问题不能在小样本两中得到真实的回答。有时候,为了确认重大的设计方案,我们需要快速地从成千上万的用户中收集数据。

4.它只适用与网站

研究人员认为在线可用性测试只适用与网站评估。而不能用 于软件,语音应答系统、手机、家用电器和烤箱。虽然大量的在线可用性测试专注于网站,但是没有必要。

多年来,我们用在线可用性测 试方法并不局限于网站交互界面的评估。从理论上来说,这仍然是相同的方法。参与者会被提问一些问题,给予一些任务,提供一些关于他们真实体验的反馈。唯一 的不同是不能跟踪参与这的行为。但是,可以收集大量的关于他们体验的数据,比如:他们是否能顺利的完成他们的任务,花费了他们多长时间,他们对这个体验有 什么感受,或者他们有什么困难。因此,即使你可能放弃了一些行为数据,仍然有大量的他们的体验可以研究。

5.在线可用性测试花销太大

一些人说他们希望做很多在线可用行测试,但是经常性的使用会比较昂贵。这个确实昂贵,但是很幸运,在最近几年有 各种各样的工具可以使用,使得在线可用性测试不再需要花费大量的经费。有大量的自我服务供应商,允许你建立并进行在线可用性研究。你只需要付费给他们的技 术。请访问www.measuringux.com看一下供应商一览表。

如果预算确实比较紧张,可以 用一些打折的在线可用行测试方法,或者基本上是免费的。利用一些在线测量工具(比如调查Gizmo或者调查猴子),一些HTMLJAVA脚本,你可 以逐一的建立你自己的几乎免费的在线用户研究(请看下面图作为一个例子,是本土的方法)。而当你没有预算来进行在线可用性研究时,在这种情况下放弃一些数 据和功能是必要的。请访问www.measuringux.com ,你能看到更多详细的关于怎么创建一个打折的在线可 用性测试的说明。

自己试一试

我可能不一定能说服你相信这 些流言是不真实的。不管怎样,我支持你把在线可用性测试作为你用户体验设计和研究努力的一个部分。这样做,你将会发现它的优点和局限性。毕竟,每一种用户 研究方法都有它自己的优缺点,在线可用性测试也不例外。

编辑注:如果对这个课题感兴 趣,Bill最近撰写了《超越可用性实验室:指导更大规模的 在线用户体验研究》

更多
打印  |  相关话题:可用性测试   |  类别:用户研究   |  源地址

UCDChina的书

《UCD火花集2》封面
UCDChina编著,定价35元
从卓越网购买 从当当网购买

《UCD火花集》封面
UCDChina编著,定价25元
从卓越网购买 从当当网购买

《应需而变——设计的力量》封面
UCDChina团队成员JunChen译,定价29元
从卓越网购买 从当当网购买

《网页设计解析》封面
UCDChina团队成员周陟著,定价62元
从卓越网购买 从当当网购买

《赢在用户》封面
UCDChina团队成员Angela译,定价29元
从卓越网购买 从当当网购买

《用户体验的要素》封面
UCDChina团队成员Angela译,定价25元
从卓越网购买 从当当网购买