VUE Point 最新消息、创新和技术发展
Q2 2019

全球 VUE

专家问答:在线监考新意何在?

欢迎阅读第二版全新 VUE Point 简讯,将为您提供有关计算机化考试的安全性和新技术方面的精彩内容。很荣幸向您介绍 Peter Pascale 先生。Peter 具有近 20 年的测评经验,对瞬息万变的技术环境以及 CBT 所产生的影响有着独特的见解。

1. 您在 Pearson VUE 担任什么职位?过往经历如何?

我担任产品及策略部门的副总裁,已经在 Pearson VUE 工作了 19 年。其中有 8 年或 9 年的时间,担任软件开发员,编写了大量服务于考试项目和考生的系统代码。我确实写了一些代码,但也包含大量的漏洞。

几年后,我开始负责技术部门以及随后成立的产品策略部门。现在,我的团队负责将顾客的反馈整合到我们现有的产品中,与我们的开发团队一起,共同开发新功能和增强功能;并且对未来客户和市场的长期需求做出预测。

2. 对于考试行业而言,您在哪方面比较擅长或者对哪方面感兴趣?

鉴于我的过往经历,毫无疑问,我热衷于能够全方位提高测评体验的新技术。我知道,技术可以使考试项目和考生受益良多:更好的考试体验,包括简化的注册程序和签到流程、全新的考试类型、富有挑战的考试设计等,比如操作考试。

我的团队和我还负责监控教育和劳动力发展的总体趋势,通过这种趋势,我们能够了解如何保持测评的相关性。

3. Pearson VUE 最近推出了 OnVUE 项目,是一种新型的在线监考方案。您在这个项目中担任何种角色呢?

OnVUE 具有专门的负责小组,有一点像初创小组。就像创业公司的老板一样,只要是能够推动项目发展的事情,无论大小,我都会参与。有时候,我需要与客户沟通在线监考可能会采用的新方式,因此我们可以将他们的观点整合到 OnVUE 的下一步开发中。第二天,我则需要帮助团队测评技术难题的解决方案。

4. 为什么产品团队要重新构建和优先考虑 Pearson VUE 的在线监考方案呢?

我们的高管向我们提出了一个挑战:“如果想成为在线监考行业的领军者,我们需要具备什么呢?”我们推出了一个方案,可以在在线监考的考试中为考生提供最佳体验,同时监考员还会保证整体监督性。携手 OnVUE,我们完全重新定义了考生体验。我们采用了最新的技术和 UX 设计理念,消除障碍,并创造考生渴望从现代软件中获取的体验和互动。在 OnVUE 中,考生体验中的所有内容都是全新的,而我们可以在这个平台上添加各种有趣的增强功能和其他功能。

5. 您希望这个新产品能够为在线监考客户提供怎样的服务?

Pearson VUE 的最终目标是帮助客户测评世界各地的考生,同时满足考生人数和考试项目的独特需求。我们通过 OnVUE 向大家展示一个更优秀的在线监考解决方案,我们的客户可以使用世界上最大的考试中心网络以及行业领先公司旗下的考试中心。

客户不必在最佳在线监考解决方案和所有其他计算机化考试发送模式之间进行选择。因此, Pearson VUE 提供的发送模式能够满足客户预期的所有考生需求。

6. 请您描述一下,为什么 OnVUE 与过去的在线考试相比是一个激动人心的全新发展?

通过 OnVUE,我们不再需要管理权限和复杂安装。考生仅需要简单的下载,便可以考试。我们正在努力地消除阻碍考生证明其知识和技能的障碍。当您已经对考试感到紧张,您更不想再为技术问题而烦恼。您所期待的无障碍考试,OnVUE 帮您实现。

OnVUE 还包含了自主签到功能,我们可以通过人工智能和政府身份验证工具来识别考生的身份及其考试环境,在保证流程监督作用的同时,减少开考前的时间。

7. 如果使用在线监考功能,启动项目时应注意些什么呢?

总体来说,我们总是希望客户能够理解不同发送模式涉及的不同安全级别和风险,无论是考试中心发送、在线监考或者是厂商监考发送。我们通常讨论的是平衡控制、使用权限、以及安全性和灵活性。我们 VUE 团队致力于协助客户了解,如何根据项目的特定考试、考生和风险介绍来管理风险。

对于 OP 来说,我们建议客户帮助考生或会员了解“自带设备”模式的本质。我们切实相信 OnVUE 能够帮助考生在各地参加考试,但重要的是,在线监考考试中,考生要了解自己在考试当日对机器和技术负有责任。我们提供技术支持和工具,以便于通过共享教育尽量减少技术问题。

8. 您觉得在线监考的前景如何?您预计计算机化考试行业总体上会出现哪些变化?

关于未来在线监考,我认为人工智能可以从两方面提高在线监考体验的质量和安全性,这是很有潜力的。

首先,我们通过机器研究来增强监考者自身的能力,进而监控在线监考会话。其次,人工智能帮助我们查看更广泛的考试发送模式,帮助我们将已知的考试相关事实与通过 OP 会话视频观察到的未知事实整合到一起。

总体来说,我认为人工智能为验证考生能力提供了新的工具,并确保整个考试行业的考试体验完整性。

对于大部分考生来说,任何测评体验的最佳结果都是获得一份工作、保住一份工作、或者获得更好的工作。随着对就业能力和技能发展的日益重视,我看到了鉴定和资格认证的光明前景。对于验证技能和知识的需求将只会增加。

思考与创新

人工智能的智商如何?

最近,您可能听到很多人在议论人工智能有多厉害。但是事实上,人工智能常常并非您所想地那么先进,人们可能被误导了。用过智能语音软件的朋友们可能都听到过这样的回答:“对不起,我不知道怎么能帮到您。”

简简单单的一句话却清清楚楚地证明:目前投入使用的大多数人工智能只不过是在熟练地进行模式匹配。虽然这一功能在解决某些问题上发挥了很大作用,但这在许多方面仍未能独立运作。我们告诉大家这一点,是希望能够更好地解释我们应当如何有效地使用人工智能,以及在哪些地方能够使用人工智能。

下面,我们来谈一谈人工智能在考试行业的应用。大家都知道人工智能在模式匹配方面非常领先,可以通过识别图片中所含的内容,例如身份信息(ID)或头像等,并且可以提取名字和有效期等信息。人工智能还能帮助我们查找到出于安全目的而插入的已知标记和标识符等,用以识别出假身份。

具体来讲,人工智能应用到在线监考过程中,可以实时识别各种指标以提升监考员的监考能力。我们通过这种技术的实现,可以判断坐在电脑前的考生是否与其身份相符,也可以找到违禁物品、监听噪音等,确保屏幕前只有考生一人参与考试。

但需要明确:这都不能作为决策和判断的依据。即便人工智能成功地验证了有价值的信息,但是这些结论并非基于人类的经验或本能做出的判断和决策。目前,计算机并没有做好回答我们向监考人员提出的最重要问题的准备,比如“是否要终止此次考试?这名考生是否有作弊行为?”

在 Pearson VUE 重新设计 OnVUE 系统-在线监考解决方案时,我们力图充分结合人类和新技术两者最大的优势。我们认为,人工智能的最佳用途是辅助人类做出决策。虽然目前的人工智能还无法取代人类做出判断或决定,但其仍然可以向监考员发出信号、提高在线考试的监考效率。这也就是我们所说的“强化监考效能”。

我们设计的 OnVUE 在线监考充分借助了在线考试的优势、消除一切可能阻碍考试的不利因素,希望能让更多人得到考取证书的更多机会。OnVUE 在引入人工智能之后将充分实现 100% 自动化,考生的用户体验也会随之显著提升。与此同时,OnVUE 可以为我们的客户提供更强的安全保障,我们也可以充分利用人工智能辅助做出艰难的决定、弥补人类可能疏忽的地方。毕竟,计算机可不会眨眼。

安全考试框架™:奠定值得您信赖的安全基础

考试安全性并不特指某一种万能的解决方案。对心理测量师、运营团队、安全团队和组织中的管理者而言,确保考试内容安全性这个概念有着不同的含义。当今持续威胁的安全状态依然存在,在您采取多方面措施充分保障考试项目安全的同时,我们也要意识到考试安全的核心概念其实很简单,此时便需要让我们的安全考试框架™发挥作用了。

我们设计考试框架的核心理念是充分保护客户的知识产权以及考生的相关信息。从业务连续性和数据隐私到内部审计和风险管理,我们框架的核心也充分反映出了 Pearson VUE 致力于获得信息安全、质量和隐私标准等方面的广泛认可,以保护我们客户考试项目的诚信度。配图的外环介绍了保障考试安全的其他四个关键领域:考试设计、发送策略、考生体验和风险管理实践。

 

secure testing framework infographic

让我们做一个假定,制作流程,查看安全考试框架帮助您做全面的决定,即在哪里、如何保护您的考试项目。

考试设计: 您已经决定使用附有多个选择项的线性固定考试设计,并且计划每年仅更新四次考试内容。线性固定形式的考试与其他考试设计(如 CAT 或 LOFT)相比,会有哪些风险?您做出的这个决定会如何影响组成安全考试框架的其他元素呢?

发送策略: 您希望尽可能覆盖更多的考生,因此选择了 Pearson VUE 广阔的第三方考试中心渠道以及 OnVUE 在线监考。在选择更为广泛的考试发送渠道时,您已经放弃了部分对考试体验的质量和一致性的控制。您能否接受考试发送时不施用额外的安全保障措施,例如手掌静脉和生物特征筛查或安装考试期间的考位上方的视频监控等?

考生体验: 您选择覆盖广泛的发送渠道,并考虑考生体验安全性方面的影响。重考政策对阻止您的考试内容泄露有直接的影响,考生频繁重考会引发不公平现象。但是,您也需要充分考虑世界偏远地区考生重考的困难性。

风险管理实践: 上述提到的三个方面,您做出的每一个选择必然会带来一定程度的风险。您已经理解了允许全球的考生通过广泛的渠道参加固定线性考试可能带来的益处和风险。您可以体验到覆盖至全球考生的广泛发送渠道的益处,但是每年仅更新四次考试内容,您会遭受一定程度上的试题泄露风险。您是否选择用网页监控和其他安全分析方法来检测考生的异常行为,比如预示安全风险的不断调整考试时间、分数跳跃大、考试用时少且得分低的情况等?

如您仍有疑问,请随时联系您的项目经理,与他讨论如何利用安全测试框架™助您加强考试安全性。

圆梦今朝

亟待推行的四项智能考试安全做法

考试安全是一个广泛、细微的话题,需要持续的参与。作为考试主办方,您应清楚地认识到充分保护考试内容、考试项目的诚信度至关重要,也应意识到保障考试投资落到实处。但问题在于我们应当如何开始呢?以下是我们推荐尽快实施的四个关键步骤,可以充分确保您的考试项目的安全性。

  1. 充分保障数据安全-风险无处不在

    乍一听,这个步骤似乎极易操作。我们虽然有意执行,但发现,有时,考试主办方并未能制定一份完善的计划、全程保障考生的数据和考试内容。我们承诺在权限范围内充分保障您的数据信息安全;与此同时,您也需要尽全力全程保障考生的信息安全。举个例子:如果出于考试开发、心理测评或寻求翻译服务等目的,您要将考试内容和考生信息提供给第三方服务商,请在服务开展之前充分调查对方,确保您合作的服务商能够以安全的方式处理相关数据。您可以要求对方对邮件加密,并严格遵守当地及国际数据保护标准(如 ISO 27001、国家标准技术研究所信息安全规定等)和地方法律法规(如通用数据保护条例等)

  2. 不断拓展考试内容设计思路

    听到这里,您可能感到困惑不解:改变考试内容和考试设计与提升考试安全性又有什么关联呢?事实上,这是有效防止考试内容泄露的一种策略。投资设计更多的考试内容是一笔可接受的聪明投资,额外的试题能有效地延长考试内容的使用时效、提升考试安全性,充分降低考生见过相同或相似考试题目的可能性。事实上,推荐试题数量大约应当为现场试题数量的两倍。这种积极主动的考试设计策略,对于长期保障考试安全性大有助益。

  3. 制定有效的安全保障计划并及时落实

    千万不要忽略制定安全计划。这一步看似基础,却对提高考试安全性至关重要。如果您能花时间制定一份全面的安全计划,您就能预防潜在威胁,及时应对突发状况。一份完善的安全计划应当包含您对可能涉及问题的解决方案的选择偏好,比如:如果我的考试内容被人发布到网上了怎么办?什么时候应当宣布某考生分数作废?什么时候应当拒绝某考生参加考试?与实体考试中心不同,我们又应当在网络考试过程中如何解决安全问题呢?制定一份充满活力的安全计划可以确保您的团队能在解决各种与考试程序政策的相关问题时保持同步,帮助您更高效地参与并管理突发状况。

  4. 实时监控、主动保障您的品牌和知识产权安全

    考试安全性并不仅仅关乎保护考生数据、规范考生行为和防止试题泄露等方面,更涉及到维护您的整体品牌形象。网络监控这种方案简单易行、性价比高,可以有效地保护您的品牌和声誉,帮助您在行业内树立领军地位。我们都知道考生可以在网络上畅所欲言,很可能发布与考试经历有关的评论。虽然网络监控只是整个考试安全方案的一个小部分,此时却能够发挥极为重要的作用。一旦考生在社交媒体上对某个特定的试题发布评论,网络监控会立刻通知您及时采取相应措施。这样一来,您不仅可以及时处理试题泄露问题,还能实时处理因考生言论而引发的公关问题。此外,我们承诺不断推动本公司的网络监控产品发展,不断引入新型国际资源,不断提升我们的指示板设计和信息可视化发展。如果您希望了解网络监控解决方案的更多信息,请随时联系您的项目经理。

    在您考虑实施上述提到的四项最佳做法来保障考试项目安全的同时,还请记住,您在 Pearson VUE 的团队可以随时解答对制定详尽、周到的考试计划的所有疑问。

聚焦

付诸实践:国家测评中心的安全技术

放眼全球,从考试设计到考生体验,考试提供商在各个方面均面临着安全挑战。因此,各机构均在努力制定安全计划,以保证其证书的公平和公正。现在,理论上我们已经清楚应该制定哪种方案,但是怎样付诸实践呢?

沙特阿拉伯国家测评中心是中东第一个开发和提供测评服务的专业政府机构,主要包括大学招生和其他工程学和会计学方面的专业考试。自从其 18 年前成立至今,该中心在制作和制定多种教育和职业领域的考试标准方面取得了杰出成就。

无论是 Pearson VUE 授权的世界最大的考试中心(可容纳 180 名考生),还是设置在顶尖高科技卡车-拖车内的移动考试中心,国家测评中心均采用了最新技术,通过其考试中心的发送渠道来保障全球考试标准和安全。他们的具体做法如下:

发现替考者
当考生进入考试中心,该考试中心的管理员将验证并比对其考试的照片 ID、签名、数据库中储存的手写字体,并实施手掌静脉分析。国家测评中心还与内政部合作,采用指纹验证,在考生签到的几分钟内,如检测出与其身份有任何不符之处,则给出提示。

谨防考试内容泄露
了解到题库的重要性,国家测评中心采取了一系列措施,最大限度地减少考试内容泄漏的风险。除了采用标准的安全程序,比如要求考生存放个人物品,国家测评中心还致力于更新题库,以及严厉打击试图窃取考题的机构。

最大限度地提高网络和系统的安全性
国家测评中心通过单一的 WAN(广域网)将沙特阿拉伯所有考试中心连接在一起,进而削减了可用网络的数量,有助于保护考试系统免受外部攻击。此外,国家测评中心定期进行网络漏洞扫描,以便主动确认和处理潜在的薄弱环节,进而更妥善地保障其系统安全性。

保证考试管理员的可信度
国家测评中心选择自主雇佣员工,他们的监考员均是长期雇员。沙特阿拉伯境内并无第三方考试中心,因此他们得以更好地控制其考试发送。为了进一步减少违规行为,每个考试中心均配置几名经过认证的考试管理员,该考场的摄像头连接到其总部办公室,以便监控考试质量。

综上所述,国家测评中心将 Pearson VUE 授权考试中心的安全经验完美地付诸实践,同时,他们为确保考试安全而实施的其他安全措施也起到了不可或缺的作用。

更多信心保障:引入供应商品保和合规程序

我们致力于提供您所期待的高水平考试服务,所以要确保与我们一起工作的潜在供应商具有同等的服务和安全等级。遵从我们严格的供应商品保和合规程序,我们建立了一套可信赖的生态体系,规范全球业务,向我们的客户和考生提供高质量的服务。

我们的程序可以在与第三方合作过程中界定从选定供应商到服务结束这一过程中的全部相关要求,并确保他们完全遵守相关的认证体系(ISO 9001、ISO 27001、ISO 22301)和培生集团的相关政策要求。

在选定相关供应商之前,我们会对其进行一系列严格的检查和综合评定。

  1. 健康和安全:供应商是否遵守相关的规章制度?
  2. 法律状况:供应商是否在某些被制裁的国家内经营?
  3. 安全性:供应商能否访问我们的系统和数据?
  4. 资金管理:供应商是否遵从反贿赂和反腐败政策?
  5. 数据保护:供应商是否正确而合法地管理数据?

在加入我们的生态体系前,所有潜在的供应商必须通过初步的审查。而且,当供应商的业务有变化,或者每年度,我们会持续监测、审查、分析他们的商业活动和流程,以确保持续的精准和安全。

虽然供应商品保看似只是非常简单的内部流程,但为我们的项目提供最好的服务是至关重要的。