- 0
- 0
- 0
分享
- Made with Unity | AK GO:用XR技术推动航空安全,提高至少30%的维修效率
-
原创 2022-04-14
传统的文字版模拟手册如今正逐渐被人工智能(AI)驱动的智能眼镜和增强现实(AR)所取代。 由 Augmented Knowledge Corporation 开发的 AK GO 是一款使用 Unity 开发的工业解决方案,其作用在于开展沉浸式飞机维护培训。
AK GO 的故事始于 2008 年。我们特地邀请到了 Augmented Knowledge Corp. 的 CEO 兼创始人 Kevin GS Jo 为我们讲述公司的发展历程及 Unity 在期间的作用。作为虚拟现实(VR)和人工智能技术的拥护者,Kevin 一直在探索相关技术在航空维修领域的应用。

崭露头角
在 2008 年担任大学教授期间,Jo 就在空客公司的资助下与南加州大学及大韩航空一起验证了 AR 和 AI 技术在实地航空维修上的可行性。
研究证明,用 AR 和 AI 技术取代纸质手册可以提高最少 30% 的维修效率。Jo 还发现在技术的帮助下,即使是缺乏经验的工人也能近乎不出错地完成高质量维护。他在国际先进人工智能协会(AAAI)的AI会议上介绍了自己在相关基础技术及其应用上取得的成果。
当时,AR 和 MR(混合现实)眼镜数量稀少,但随着技术进步,市面上逐渐出现了 HoloLens 2 和 Magic Leap 等各品牌的智能眼镜,为技术的实际应用奠定了基础。Jo 在美国、中国和韩国申请了专利,并开始推进研究成果的商业化。
AK GO:用于航空维护培训的XR应用
飞机维护是航空业一个必不可少的流程,飞行器维护不善会引发惨烈的航空事故。据国际民用航空组织(ICAO)2016 年的一项研究所示,约有 14% 的飞机事故是由维护不当引发的。尽管飞机及其他复杂器械的维护都有着严格的规定,可供维修人员参考,但他们需要查找并理解大量的纸质内容,还需反复用图纸确认飞机结构,这是一个极其复杂、费时的过程。
AK GO 是一个配备了飞机维修手册的人工智能解决方案,可在佩戴的智能眼镜上同时显示 3D 飞机零件和手册。维修人员可借助 XR、AI 和语音,在模拟中高效地完成维修培训。

有了 AK GO 后,工作人员可在高度逼真的虚拟飞机环境里学习和练习维修步骤,而培训方则能省去一大笔购买昂贵真机的成本,并提供高质量的培训。
维修流程1:1复刻
飞机是一种非常昂贵的交通工具,单架市价至少需 5.18 亿人民币。如此高昂的价格让大部分航空维修培训机构都难以在真实的飞机上进行培训。因此,他们常采购退役的或不再使用的轻型飞机作为培训器材。然而,由于担心设备会进一步损坏,许多培训用的老飞机现在也沦为了单纯的模型展示。
为了应对这些挑战,Jo 希望开发出一种能精准还原真实维护流程的沉浸式培训应用,这也是 XR 技术的一种典型用例。
要想让航空维修培训产生效果,受训者必须在工作流程中可以快捷地取得必需信息,同时腾出双手来完成工作。已投入商用的 HoloLens2 智能眼镜便可以实现这种功能,所以 Jo 的团队决定将其作为应用的目标设备。团队还使用了语音识别技术让工人能够轻松地获取信息。

根据飞机主起落架维修手册制作的维修指南
开发初期,我们并没有游戏引擎的使用经验,因此在引擎抉择上比较困难,之后我们发现,Unity 与其他引擎相比,对新手更加友好,这让我们更加青睐 Unity。另外,引擎还支持上层开发,让我们能在以后的长期工作中减轻项目改动带来的负担。此外,Unity 提供了一个高效的开发环境,让各种开发所需的插件或资源触手可及,加快了 HoloLens2 的 MR 内容开发。因此我们选择了 Unity。
在智能眼镜和平板上共享画面
为智能眼镜开发 VR 项目有一个问题:只有佩戴设备的人可以看到眼镜内显示的内容。为了改善 AK GO 的易用程度,团队决定让每个受训者在使用昂贵的智能眼镜或 VR 设备时,还可以将眼镜内的画面共享给平板等其他设备。
在使用 AK GO 时,受训者可在眼镜上看到逼真的飞机零部件,以及显示在四周的对应流程指南。并且在深度学习语音识别技术的帮助下,受训者可以用语音随时打开菜单或特定手册内容。HoloLens2 设备的视频画面也可以传输到平板电脑上与其他人分享,让旁人能实时查看学员所看到的内容。

结合AI与XR的飞机起落架拆卸与装配模拟
在飞机起落架的拆卸装配教学里,AI 会与受训者“交流”,然后在画面中显示对应的流程步骤。在结合 AI 和 XR 后,受训者能与维修知识库进行通信,在维修过程中调取必要信息,并叠加显示在 3D 模型之上。
Unity带来的附加价值
据团队的首席架构师和 AR 开发 Chidon Ahn 所说,Unity 的编辑器编程功能对项目来说极其宝贵。它的好处不仅仅体现在一个项目里,如果你手头有多个类似的项目,特定的任务可以用编辑器脚本保存并多次复用。
如果应用需要处理大量的数据,而每次重复性任务所涉及的数据不同,与其手动处理,开发者可使用恰当生成的元文件和预设好的预制件来自动完成重复性任务。
Unity 有许多方便小型开发团队的资源。Unity 还借助云技术优化了编程开发的体验,所以我们从一开始就一直在用 Unity。
- Chidon Ahn,Augmented Knowledge Corp 首席架构师和 AR 开发
展望未来
AK GO 主要的目标是在航空维修领域设计、测试和实现一种糅合 AI 与 XR 的应用。在未来,AK GO 计划进军数字孪生领域,研究怎样对车船电子部件、家用电器和工厂设备等工业资产进行实时维护。
Augmented Knowledge Corporation 打算以软件即服务(SaaS)的模式在全世界推广各种飞机模型的云端应用。Unity 将被积极用于整合多种类的数据源。
若想了解更多信息,欢迎访问 Augmented Knowledge Corp. 官网。

-
阅读原文
* 文章为作者独立观点,不代表数艺网立场转载须知
- 本内容由数艺网主动采集收录,信息来源为 “Unity官方平台” 公开网络发布内容。第三方如需转载本内容,必须完整标注原作者信息及 “来源:数艺网”,严禁擅自篡改、删减或未标注来源转载。 并附上本页链接: 若您的内容不希望被数艺网收录,或认为此举侵犯了您的合法权益,敬请通过微信 ID:d-arts-cn 联系数艺网。我们将致以诚挚歉意,并第一时间为您办理下架或删除处理。




