评估

在产品开发过程中,有效的设计评估是用户界面设计的核心 ,也是确保良好用户体验的动力。

评估产品的方法有很多种,最佳方式取决于产品开发阶段以及可用资源(例如:时间、资金、原型或完成产品)。 我们的评估方法包括:

  • 设计评论/专家评论/启发式分析
  • 认知演练(通过使用场景进行讨论)
  • 形成(初步)可用性测试
  • 总结(验证)可用性测试

早期评估

我们采用许多技术来收集有关早期设计概念的反馈。 其中一种技术称为认知演练。此方法会要求受访者对产品草图、简单的实体模型或一系列静态计算机屏幕进行研究、思考和解释他们会如何执行一项指定任务。

例子:

  • 通过查看多个样本屏幕和处理“块体模型”来对操作胰岛素输注泵的相关工作流程进行评估。
  • 获得关于与可穿戴心脏泵(左心室辅助装置)相关配件(例如背包、腰包、斜挎包、挎包)的多个概念的反馈。
  • 使用3D渲染软件和精确测量的3D打印模型,对多个医用监护仪设计概念中的用户偏好进行评估。

中期评估

我们经常会根据用户要求,对产品进行评估,也被称为专家评审或启发式分析。在这些情况下,我们应用既定的设计原则和我们自己的判断来找出用户界面的设计优势和改进机会。 这种评估通常可以快速地以低成本方式完成,但却能得出很有价值的结论。

我们会依需要对产品进行形成性可用性测试。这样的测试可以快速地为可能处于开发冲刺阶段的设计团队提供 研究结论。 形成性测试也可能是一项涉及详细测试计划和报告的更加正式的活动。

例子:

  • 对与智能手机上使用的健身App相关的屏幕进行专家评审。
  • 对外骨骼进行8人参与的形成性可用性测试,用于帮助中风患者重新获得行走能力。
  • 按照旨在用于随后的总结性(即验证性)可用性测试的测试计划,对一台透析仪进行15人参与的“预总结性”可用性测试。

产品评估可显示设计优势和改良机会,如下表关于一台假想的家用透析仪的相关事项所示。

样本调查结果

正面

负面

  1. 视觉警报以显眼(即,引人注目)的方式显示。
    [信息来源: 评论]
  2. 用户认为设置工作流程非常直观。
    [信息来源: 认知演练]
  3. 小手掌和大手掌 的测试参与者都认为手柄提供了安全、舒适的抓握感。
    [信息来源: 形成性可用性测试]
  4. 在把患者连接线接到机器上时,15名用户中有14名应用了无菌技术。
    [信息来源: 总结性可用性测试]

 

  1. 比较瘦小和身体较弱的用户要提举起40磅的机器可能有难度。
    [信息来源: 评论]
  2. 多名用户不清楚背光控制盘上的符号的含义。
    [信息来源: 形成性可用性测试]
  3. 12名测试参与者中有4名无法正确安装管线装置。
    [信息来源: 形成性可用性测试]
  4. 把引流管放到其支架上时,两名参与测试者将引流管扭结了。
    [信息来源: 总结性可用性测试]

 

 

后期评估

当产品几乎是最终产品时,我们可以进行总结性(即验证性)可用性测试。 对于医疗产品而言,这是一项至关重要的活动,可以证明预期使用者能安全有效地使用产品。这种测试也是 美国FDA入市许可的监管要求。这种测试可以在传统的可用性测试实验室,或更接近真实设定,例如在医疗模拟环境中进行。 

我们分别用 人数很少(n = 15)和人数非常多(n > 200)的样本进行过这样的测试。 我们的测试计划经常通过美国FDA的审查和默许。我们在自己的实验室、全球各地的工厂或租用的焦点小组场地进行测试。根据需要,我们的测试报告会详细描述可用性测试方法、测试结果以及任何长久以来所存在的互动问题根本原因。我们的测试和报告方法是以多个不同来源(例如FDA,AAMI,IEC)的可用指南以及最佳实践方法为基础。

例子:

  • 对胰岛素笔注射器进行75人参与的总结性可用性测试,以产生证明青少年、成年人、老年人、护理人员和医疗保健提供者可安全有效使用该产品的相关数据。(注意: 样本大小是由美国FDA验证研究结果所决定的。观察: 将人因工程和可用性工程应用于医疗器械,由美国FDA于2016年2月3日发布)
  • 对灌注师所使用的用于维持接受心脏直视手术患者生命的心肺机进行15人参与的总结性可用性测试。
  • 对汽车修理工使用的平板电脑应用程序(诊断并在有可能的情况下对有关电气和机械问题进行修复)进行12人参与的总结性可用性测试.

上市后阶段评估

我们经常对市售产品进行产品评估,包括设计评审和可用性测试。 此类审查可能有以下用途:

  • 提供基准性能数据,为开发下一代产品或竞争产品奠定基础。
  • 提供以用户互动为基础的性能数据,以此作为营销宣传的基础。
  • 深入了解可能导致产品投诉、退货和其他失败类型的已知产品使用问题。

例子:

  • 开展一项可用性测试,比较透析仪治疗在设定上的简易之处
  • 对糖尿病的患者进行一项研究,帮助确定哪种 穿刺装置的用法最简单并且带来的疼痛感最小。
  • 对被召回的手术设备的用户界面进行专家评审,以找出导致损伤的使用错误的根本原因,并就设计变更提出建议,作为纠正和预防措施(CAPA)的一部分。