国际海事组织(IMO)已将人为因素确定为海上人命安全以及航运业多数伤亡的一个因素。目前,IMO已经开展一系列示范课程,采用SafePASS项目,将MR技术应用于海事培训,该项目已获得欧盟H2020研究和创新计划的资助,旨在引入致力于LSA救生艇使用和维护的相关应用程序,开拓MR在海事培训中的优势,指导船员如何操作船舶设备,提供各种场景以进行LSA救生艇操作培训。
该应用程序是在Unity中开发的,使用混合现实工具包进行开源,以及使用Azure空间定位点提供 3D 点的持久表示形式和在空间中定向,在应用程序会话和不同设备之间持久且可共享,HoloLens2 头戴式混合现实设备用于实现和测试应用程序,真实Minima 88救生艇及其COLLADA3D模型也将用于培训。
该应用程序主要包括三大部分,MR训练工具、MR培训评估工具以及MR维护工具,旨在培训船员操作救生艇,培训人员评估受训人员以及培训船员在救生艇上执行维护程序。对于每个工具的使用,都实施了指示性会话和场景工作流,以及受训者与设备的主要支持交互。
MR 训练工具
对于每个步骤,都会提供相应虚拟的图像,文本,视频和动画。选择方案后,要求用户扫描周围的区域以加载附着在地板上的模型,模型加载到接近实际大小,就可以调整模型的大小和 X 轴上的位置,以适应可用的房间和训练目的。
加载方案步骤后,应用程序生成随附的信息面板和可用步骤的列表,以及带有图像和文本信息的面板,视频播放器,方向指示器要交互的部件、该部件上的工具提示以及动画为预期的交互提供视觉信息。
通过MR,提供了实践经验,改善了从业者与救生艇的互动,从而增强了整体培训过程效率。通过这种方式,机组人员可以根据需要经常练习理论知识,熟悉他们将被要求操作或维护的设备,并在紧急情况下做好更多准备。
MR 培训评估工具
培训评估工具是为LSA安全培训师提供的工具。与MR训练工具类似,它使用混合现实在真实环境中附加LSA数字孪生,并利用与其部件的实时交互来检测用户执行的操作。其目的不仅是测试和评价受训人员在具体应急程序方面的操作,而且还要评价培训课程和课程的有效性。如果操作未通过验证,则会向受训者直接发送消息,包括对先前必须执行的步骤的一般描述。通过使用MR,培训评估过程得到改进,使安全培训师能够评估学员的表现并评估培训课程的有效性。
MR 维护工具
SafePASS MR维护工具旨在帮助船员和LSA制造商进行LSA救生艇的维护培训。对于要执行的每个维护方案步骤,通过LSA相应部分的图像,文本和视频提供有用的信息。此外,如果提供了整个LSA或活动部件的匹配3D模型,则会在实际设备上提供虚拟零件的动画。
维护工具的使用是扫描预装的二维码维护区域,二维码检测加载相应的维护场景文件并生成具体方案步骤。通过MR,提供了维护实践经验,对于很多复杂且精细的维修细节提供了可操作可学习的空间,增强了整体培训过程的效率。
该应用程序已在实验室环境和真实 LSA 救生艇中进行了测试和验证,为那些提供反馈和建议的用户改善了体验,以进一步进行开发。该应用程序还在游轮上进行了演示,向相关人群展示了支持功能,因而相关人群能够意识到该应用程序的附加值并可以基于潜在的未来开发领域提出建议。
研究人员总结道:“在提供用户友好的培训环境方面,MR培训应用程序被认为非常有前途,它可以支持船员LSA救生艇的操作和维护,但与此同时仍有待改进和进一步扩展。面临的挑战之一是并非所有参与者都熟悉HoloLens 2 头显。”