百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

可用性测试算是用研的一个入门级技能,之前做过的可用性测试总会有个缺陷,就是没有建立一个严谨、科学的任务评估模型。在可用性测试中如何去评估测试的场景或流程呢?应该包含哪些维度?每个维度要如何测量?怎样在不同的任务间做横向对比?

ISO9241 中对 ” 可用性 ” 的定义是:特定用户在特定的使用场景中,为了达到特定目标而使用某产品时,所感受到的有效性、效率和满意度。也就是说,在定义好了用户、场景和目标的前提下,可用性包含了下面三个维度:

1. 有效性:用户完成特定目标的正确和完整程度。

2. 效率:用户完成特定目标的效率,与消耗的资源(如时间)成反比。

3. 满意度:用户使用产品时感受到的主观满意程度。

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

良好的可用性必须能够同时满足有效性、效率和满意度三个条件,但是这三个维度也有层次之分,一般来说,有效性问题 > 效率问题 > 满意度问题

在可用性测试中,仅仅了解每个功能的可用性水平还不够,即使两个功能的可用性水平一样,若一个是产品的基本功能、一个是价值不大的边缘功能,我们还是需要优先去优化价值更高的功能。

功能的价值可以简单分为两部分:用户价值和商业价值,所以,在可用性测试中可以用下面这个模型来对测试的任务进行评估:

1. 测量方法

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

有效性、效率、满意度都是常见的评估维度,有一些经验方法可以参考;用户价值也可以通过用户评价获得。

商业价值则需要根据产品的实际情况进行评估,并且这一般是既有的知识,不需要在可用性测试过程中收集这个数据。因此在可用性测试中我们需要收集的数据就只包含四个维度:有效性、效率、满意度和用户价值

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

2. 有效性

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

 

可以用任务的完成情况来评估有效性,这个数据通过观察用户的操作过程即可获得。需要对每个任务都设置一个限定时间。要求对功能非常熟悉的人按照任务提示进行操作,记录完成操作所需的时间,称为熟练用时。

部分完成:用户只完成了一部分的任务,没有完成任务卡上的所有要求。

完成:这个很容易理解,就是在限定时间内完成了任务卡上的所有要求。

最后,我们需要根据这些数据计算每个任务的成功率。建议算法是:任务成功率 = ( 完全完成的用户数 + 部分完成的用户数 *0.5 ) / 用户总数,即完全完成率 + 部分完成率的一半

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

3. 效率

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

效率可以用时间测量,对用户的操作过程计时。

可以从用户拿到任务卡开始计时,在用户宣布自己已经完成、或者限定时间到了的时候即结束计时。不要等到用户读完任务卡、开始操作时才计时,因为有的用户习惯读完再操作,有的却喜欢一边读一边做。

计时不需要太精确。手动计时存在几秒钟的误差都算是正常的,而且用户在操作过程中多说了句话、或者应用响应速度慢了些,这些都会影响任务的完成时间。

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

4. 用户价值

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

 

用户价值是指用户感知到的功能价值,也需要通过用户的评价获得。满意度和用户价值都需要用户评分,因此用户在完成每个任务之后都会拿到同样的两个题目,要求对该任务做出评价。

5. 任务横向对比

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

 

用有效性、效率、满意度、用户价值四个维度对任务进行评价后,我们可以根据这些数据对不同的任务做横向对比。

有效性、效率和满意度都是用来评估可用性水平的,如果根据这三个数值计算出可用性水平,直接用可用性去做横向对比,是否更方便呢?我们需要对有效性、效率、满意度分别做标准化处理,然后按照 5:3:2 的权重计分(或者其他权重,按需调整)

可用性水平 =Z ( 有效性 ) *0.5-Z ( 效率 ) *0.3+Z ( 满意度 ) *0.2。

这样我们得以在同个量纲上比较不同任务的可用性水平,结合对功能价值的评估,可以得出类似这样的四象限图:

百科 | 在可用性测试中,如何去评估测试的场景或流程呢?

 

这样的象限图不仅可以帮助我们比较测试的各个功能的情况,还能帮助确定体验优化的优先级。功能价值高、可用性差的功能应该列入最高优先级,其次是功能价值较低、可用性差的功能。

发布者:调研工厂,转载请注明出处:https://baike.survey.work/in-the-usability-test/

(0)
打赏 支付宝扫一扫 支付宝扫一扫
上一篇 2022年12月3日 下午2:07
下一篇 2022年12月3日 下午2:08

相关推荐

  • 母亲节研报:中国人和妈妈打电话都聊啥?

    母亲节到了, 提起母亲,你脑海里会浮现哪些记忆? 是小时候她陪你游戏玩耍的画面, 还是长大后她对你唠叨个不停的模样? 而无论哪一种, 都是她在努力扮演母亲这个角色。 她从一个酷酷的“宝藏女孩” 变成了一个全能的“神奇女侠”, 只为给我们无微不至的爱。 那么,你足够了解她吗? 日常打电话都和她聊啥? 又如何表达对妈妈的爱? 调研工厂(https://surve…

    2022年11月20日
    8500
  • 百科 | 小微企业很少做市场调研?原来因为这些

    小公司没有预算,大公司正常都有品牌健康度调查,通过内部调研部门或与专业的调研公司作专业的调研,对现状获取全面的认知,以便及时修正产品和营销策略,规模大可以分摊费用,但不等于小公司不做市调。 中小企业、初创项目和产品经理通常会做Marketing audit,其中必须有依据-市调,了解现场。 老板亲自跑市场收到大量反馈,相当于作了的定性、定量调研,如:娃哈哈创…

    2022年12月12日
    9300
  • ChatGPT好用到吓人?送你10次免费使用的机会

    ChatGPT持续走热,可以说是2023的年度事件。特斯拉老板马斯克说它“好到吓人”,微软创始人比尔盖茨直呼“这是不亚于互联网的诞生”。 那这个技术恐怖到底在哪?   它可以是老师,在各种职业和学术考试上,它表现出了超过绝大多数人类的水平。   它还可以是秘书,定计划、写报告、翻译文件、甚至写代码都不在话下,在发布会上,演示者随手画了一张网页的草图并输入,只…

    2023年4月9日
    4600
  • 百科 | 访问员必看:最详细的用户访问流程(二)

    访谈前准备: 三、场地选择深度访谈可以在很多地方进行。大部分考虑的是请用户到公司来,然后使用公司内部的会议室进行访谈,鉴于大多数公司的会议室很难订的情况,可以在一周内提前预定,灵活应变应付10~20人左右的访谈应该不是难事。另外需要注意的是,场所的选择也会对访谈有些影响,访谈环境对比,会议室就会给用户很强的压迫感。应该尽量塑造温馨舒适的氛围以消除用户的紧张感…

    2022年12月11日
    9500
  • 调研工厂大学生“考公热”认知态度调查

    大学生热衷于考公务员,这一具有争议性的社会现象,没有因为舆论而衰减。人们不仅要问,这种现象到底是什么原因造成的?一起来调研一下,大学生“考公热”背后的原因吧,如果你不会设计问卷,下面的问卷模板供你参考。 【问卷模板】大学生对“考公热”情况的认知及态度调查本模板用于考公、考研及各类考试的调查,模板包含19道题,题目如下:1.你对未来有什么规划2.您了解公务员考…

    2023年3月20日
    9000

客服热线:

138-2016-1375

企业 VIP 入驻

柴女士:185-1182-1229

工作时间:周一至周五,9:00-18:00,节假日休息

关注微信