远程潜冲的可用性测试具有很多优点。Compared to in-person studies, it’s often less expensive, less time-consuming, and more convenient for participants. In cases where participants can’t travel to a testing location, remote moderated usability testing is an excellent alternative.

也许远程审核可用性测试的最大缺点是它可能需要大量的提前准备,特别是在设置您使用的工具方面。如果您之前从未完成过次要的审核学习,则可能很难知道在哪里开始。

Follow these 7 steps to ensure your remote moderated sessions run smoothly and yield rich, deep insights.

Study Planning

1. Choose a tool for communicating with the participant.

选择一个屏幕和音频共享工具,这将易于访问和安装测试人员,也可以用于观察者和辅导员。

您不必为所有测试参与者使用相同的工具。例如,从他们的办公室计算机加入的那些可能需要使用公司制裁的会议工具。其他人可能无法安装任何软件 - 例如,由于攻击性防火墙。

有许多屏幕共享工具可用,但我们用于远程测试的一些工具包括:

  • 飞涨
  • 去会议
  • 加入我
  • Skype
  • Lookback.io

When you choose your tool, pay special attention to the安装要求。工具是否有任何操作系统或浏览器?

例如,LIESBACK提供远程审核可用性测试在移动,但不支持所有版本的IOS或Android。尽早弄清楚这些细节,因为它们可能在您的招聘过程中发挥作用。如果可能的话,您希望屏幕参与者确保他们可以使用该工具。此外,请注意许多远程审核可用性 - 测试工具手机可以具有稳定性问题- 完全支持那里的所有不同类型的移动设备很难。

这些屏幕截图描绘了使用Lookback.io对移动的远程审核可用性研究的场景。左:辅导员介绍了会话并解释了参与者的说明(在右下角的缩略图图像中,奇怪地显示为介绍期间的重复。她的脸被弄脏了隐私。)右:参与者开始她的会议在谷歌上。(您可能会注意到,这位参与者在会议期间坐在楼梯间 - 不是研究的理想位置。重要的是强调他们需要在一个良好的互联网连接中处于安静的,私人位置。)
此屏幕截图来自使用Lookback.io对移动的远程审核可用性研究。促进者介绍了会话并解释了参与者的指示(在右下角的缩略图图像中,奇怪地显示为介绍期间的重复。她的脸已被模糊隐私。)
在这个屏幕截图中,参与者在谷歌上开始了她的会话。(您可能会注意到,这位参与者在会议期间坐在楼梯间 - 不是研究的理想位置。重要的是强调他们需要在一个良好的互联网连接中处于安静的,私人位置。)

另外,想想你是怎样的handle observersin this tool. Make sure that you can mute them during the session to prevent any unnecessary noise. If the tool has a chat feature, it should be possible to keep team conversations private so that participants don’t get distracted. You can also use a separate tool (e.g., a messaging app like Slack) to allow observers to communicate among themselves or with the facilitator.

决定你是否想要分享webcam video。如果您的系统和连接可以处理它,它几乎总是最好分享参与者和辅导员的面孔,因为它可以提高会话期间的通信。

2.计划如何管理任务。

通过内在的测试,您可以将参与者手纸上递给参与者打印在其中的任务,并要求他们大声读出来。管理任务与远程审核测试有点复杂,并且可能取决于您所使用的工具。

提供任务的理想方式是一次,并通过要求参与者响亮自己阅读任务。那样:

  • 你知道他们还阅读了整个任务。
  • They won’t look ahead to later tasks.
  • 他们会练习大声说话。

此外,您希望参与者可以随时随地轻松访问的说明,以便他们忘记它们。

There are three options for delivering the task for remote moderated testing:

  • 将参与者发送了所有任务的文档(例如,PDF)。
  • 使用屏幕共享工具的聊天窗口将当前任务的文本发送到会话期间的参与者。
  • 主持人向参与者大声读取任务。

将参与者与所有任务(或与任务链接)发送文档(例如,PDF)。

在这种情况下,必须指示参与者未在会话之前读取任务。如果文档包含任务文本,请确保从空白页面开始,并且每个任务都在单独的页面上呈现。包括页码,能够指导参与者到特定任务。参与者可以预先打印文件或在测试会话期间以电子方式引用它。

如果在会话期间可以访问数字文档,则还可以包含与任务文本的链接而不是文本本身。在这种情况下,每个任务的指令都可以作为网页(例如,Google Doc)生活在Web上,并且可以要求参与者单击相应的链接以读取该任务。

提供任务的一个选项是使用链接的PDF列表,每个都在Google文档中对该任务的指令开放。

使用屏幕共享工具的聊天窗口将当前任务的文本发送到会话期间的参与者。

例如,缩放有一个聊天功能,允许与会者发送彼此链接和文本。聊天窗口是提供任务说明的便捷方式;要求参与者在开始之前大声读取指示。

主持人向参与者大声读取任务。

虽然这种方法是最不可建议的,但是有时可能是唯一的选项(例如,因为工具或设备限制)。如果选择此选项,请准备根据需要重新缩重任务说明。

3. If possible, schedule technology-practice sessions.

对于每个参与者,尝试安排15分钟的在线会议在她的会议前一天。也邀请一个或两个练习观察员。

这是让参与者设置测试所需的技术的时候了。让它们安装任何必要的应用程序,并通过带有屏幕共享,音频和到达网站的任何打嗝进行工作。

Choose a website or app completely unrelated to the one you plan to test, and ask participants to use it, briefly. In this practice session, don’t show users the actual website or prototype that you plan to test, and don’t have them attempt test tasks. If participants need to physically sign consent or NDA forms, now it is the time to discuss the logistics and ensure that they can access the documents and know how to send them back to you before the session.

如果由于调度约束而无法实现练习会话,请确保在实际会话期间留下一些额外的时间进行设置。

请注意,即使您有技术练习会话,您仍可能在会话期间遇到技术问题。我们有一个参与者的设置在练习会议中完美地工作的情况,然后在第二天没有工作(例如,由于她的计算机自动更新其操作系统过夜)。它总是最好的添加一点额外的时间对于每个会话,以确保您可以在不破坏会话的情况下处理轻微的问题。

在测试日

4. Send out reminders.

与任何类型的测试一样,将提醒电子邮件发送给参与者和观察员,无论是在测试前一天晚上还是早上的测试。

对于参与者来说,在他们的会议开始时提醒他们,并且在会议期间需要带来或做任何事情。例如,您可能会提醒他们:

  • 他们的笔记本电脑连接到充电电缆,或其移动设备完全充电。
  • 有耳机或一对耳机,以最大限度地减少反馈并提高音频质量。
  • 打开他们在技术测试会话期间使用的远程软件工具。
  • 连接到强大的WiFi或有线连接。
  • 在一个安静的地方,他们不会被打断。

For observers:

  • Remind them of the testing schedule.
  • 告诉他们任何用于观察的规则(例如,早早加入五分钟,或者让自己保持在静音上)。
  • 给他们观察提示the study, a copy of the tasks that users will attempt, and specific issues you want them to watch out for.

During Each Session

5.邀请团队加入会议。

观察者应加入会话时的确切时间根据以下:

  • 远程软件工具
  • 与用户的技术练习会话是否成功
  • 你与观察员的关系

Joining early, a few minutes before the session starts, has the benefit of being least disruptive to the participant, especially if the remote tool beeps whenever a new person has joined the meeting. But the disadvantage is that it may potentially waste observers’ time and diminish their engagement.

如果后者是一个问题,就可以让观察员加入会议一旦所有物流被清除(通常是在预定的开始时间后几分钟)。或者,您可以通过要求他们讨论之前的会话发现或查看观察员提示并考虑特定问题,使观察者保持在停机时间繁忙。

6.与参与者开始会话。

一旦您的参与者在约定的时间加入会议,通过以下脚本的某些变体运行:

  • Hi [name], thanks for joining.
  • 我是[xxx];我为公司工作[YYY]
  • 在我们开始之前,是[name]正确的方式来发出你的名字吗?
  • 好,谢谢。
  • 我和我在一起的同事。他们只是悄悄地观察会议,寻找我们可以改进[网站/应用程序]的方式。
  • Is it ok if we begin recording?
  • [Wait for confirmation, then begin recording.]
  • [如果参与者尚未签署同意书,请执行以下步骤。]
    • [Share your screen.]
    • [Open the consent form you’d like your user to read out loud.]
    • 这是一份同意书,解释了我们今天在这里在这里以及我们将如何使用这些信息。请大声读取这个,然后如果您同意,请大声说出您的全名。
    • [Wait for reading and consent.]
  • [将演示文稿控制到用户,供他们显示其屏幕。]

7.结束会议

  • 感谢参与者的帮助。
  • 停止并保存录制。
  • 请与您的观察员办理登机手续,讨论该会话的主要观察,以及您希望展现前进的任务或程序的任何变更。

重复步骤5到7,直到您的学习完成。(第8步:拍摄自己的研究做得很好!)

远程主持总结所涉及的步骤usability testing

More Tips for Good Remote Moderated Testing

  • 如果您还没有获得签名同意书提前,请参与者朗朗地阅读您的同意,然后通过响亮的全名来口头举行同意。
  • Don’t neglectyour own tech setupwhile you’re thinking about others! Use a headset and a strong WiFi connection, just like the participants should.
  • 每当有疑问,向用户询问她的名字如何发音。在内在的研究中,您可以通过手势或声音来获得用户的注意。但如果您需要在远程会议期间中断参与者,请说这个人的名字可以感受到最自然的。但是你想确保你知道“它是如何发音”。
  • Keep track of what会议应该结束的时间,请在会话开始时与用户确认,并按时完成。
  • 接受事情会出错并有一个备份计划。软件在最后一刻更新,防火墙干扰,应用程序有错误。你什么时候发布观察员?用户?如果你需要重新安排怎么办?就像在人的测试一样,这是一个很好的主意,在一点点建造额外的时间到你的会议并招募更多的参与者,而不是真正需要的参与者。
  • Do apilot test帮助改进您的流程,便利化和任务。试点会话是测试本身的测试,而不是对设计的测试,因此您的参与者可以是代表用户或其他人

遥远研究的全日研讨会

有关详细的帮助规划,进行和分析远程审核用户测试(包括示例脚本,研究计划和任务),请查看我们的全天研讨会:Remote Usability Testing.