“教练,我想用 HoloLens 学医”

业界 作者:微软科技 2022-03-30 00:59:00

(本文阅读时间:6分钟)
小编语:2022年3月30日是国际医生节,祝医生们节日快乐!在当前的疫情大环境下,这个节日显得更为特别。一直以来,微软都期望可以运用科技推动医疗行业进步,实现数字化创新与转型。接下来,就让小编给大家带来微软携手GE医疗探索全新培训模式的故事!

工程师的技术能力对于为客户提供优质的服务至关重要。”GE 医疗中国客户服务部技术运营总监高辉表示,“培训是提升技术能力最重要的途径之一。传统的培训方法在帮助工程师更好地掌握精密的医疗设备方面有着一定的局限性。我们非常希望能够运用新技术来进一步强化培训效果。” 

面对这些问题和困扰,GE 医疗联合微软混合现实合作伙伴项目(Microsoft Reality Partner Program, MRPP)成员嘉讯广源,结合 HoloLens 2 合作开发了一整套混合现实培训系统。

微软混合现实,升级 GE 医疗培训方案


微软混合现实合作伙伴嘉讯广源和 GE 医疗展开合作,使用微软 HoloLens 2对整个培训方案进行重新设计,通过模拟培训模块为技术人员提供更加精准的分步指导,投射在医疗设备等物体上的全息3D 投影能够有效帮助 GE 的技术人员对极其复杂的设备进行关键维护。

值得一提的是,为了能够更好地展现微软 HoloLens 2强大的场景化应用能力,嘉讯广源融入了 Microsoft Azure 的混合现实组件,帮助开发人员创建高度精细的交互式3D 投影,从而助力 GE 医疗实现真实世界与数字世界之间的深度融合和无缝衔接。

借助 Azure Spatial Anchors,GE 医疗可以使虚拟内容在现实世界中持续存在,在同一个房间内只需要佩戴 HoloLens 2设备,受训的技术人员能够在教室中的相关医疗设备旁边看到分步指导;在同一个房间内佩戴 HoloLens 2的用户可以看到相同的投影,它帮助用户轻松实现多用户体验,大大提升了整个培训的效率。

利用的力量,GE 医疗还实现了拥有在本地设备上高保真渲染复杂3D 物体的能力,通过 HoloLens 2,用户能够掌握医疗设备更加详尽的3D 投影,并且融合了 Azure AI 和认知服务的 AI 语音解说功能,微软进一步帮助 GE 医疗学员实现高效的分步培训。

多样化的场景应用


在深度应用了来自微软混合现实技术与产品之后,GE 医疗以自身的实际需求和场景化应用需要为出发点,让技术创新与实际的应用场景进行紧密贴合,从而不断提升自身的数字化创新能力。

在 Voyager MRI 控制柜培训当中,将全息原理和动画连接图投射到真实的机柜上,从而帮助受训人员更加真实、全面地了解整个培训的过程与细节。当受训人员站在真实的控制柜面前时,HoloLens 2 可以识别和定位控制柜中的组件和端口,结合基于 AI 技术的旁白解说,与叠加投影组成一对一的虚拟教练,从而有效加快整个培训与学习的进程,大大提升了学员的应用体验。

在更换 Revolution CT 中的探测器的培训模块过程当中,GE 医疗借助 HoloLens 2 当中渲染的高保真全息模型,使得整个培训过程可以不必局限于专门的教室,技术人员可以在任何地方对培训过程以及设备的所有细节进行观察和了解,从而不断熟悉整个探测器的更换过程,同时也保证了敏感的设备仪器零件不会因为错误操作而被损坏。

提升数字能力,迎接混合现实的未来


GE 医疗已经看到了部署基于 HoloLens 2 的混合现实解决方案的巨大潜力。该解决方案自 2021 年年中开始投入使用,平均帮助每位学员节省四个小时的培训时间。由于培训时间的节省,学员可以把更多时间精力投入在上手实练上,加深对于重点模组和流程的认识和熟练度。GE 医疗认为混合现实蕴藏着巨大潜力,培训经理肖虓表示:“混合现实是未来趋势,这项技术将会被非常广泛应用到各个行业中。”

同时,GE 医疗中国的培训设施当中,包括了价值超过 2000 万美元的医疗设备,通过应用混合现实技术以及微软 HoloLens 2,大大降低上手操作过程中设备损坏的风险。GE 医疗磁共振讲师孟伟补充道:“我们认为,混合现实将可以强化传统培训,使学员更快、更轻松地掌握技术知识。与通常基于视频的虚拟现实技术不同,使用混合现实和 HoloLens 2,我们可以提供真正交互式和沉浸式的体验。”

在业务层面,微软与 GE 医疗也在全球范围内达成了基于微软智能云的合作:作为为世界各地医疗机构提供最先进诊断工具的企业和服务,GE 医疗的影像服务为美国和世界各地的医疗保健提供者提供最先进的诊断工具,帮助这些医疗机构实现更加高效、精准的计算与存储服务。通过将海量图像数据迁移到微软 Azure Blob Storage,微软为 GE 医疗提供了基于云计算技术的高性价比的存档数据存储服务,同时还能够满足 GE 医疗对于高性能系统的应用需求。

此外,为了加速向云的迁移速度,GE 医疗还采用了 Azure Data Box。每个加固型 Data Box 可以容纳 80 TB 的数据,可以高达 10 Gb/s 的速度进行数据传输。数据经过加密且物理设备重量不到 50 磅,便于运输。Data Box 设备也可用于快速交付、易于使用且高度安全

数字化创新的实践能力在 GE 医疗整个培训过程的进阶当中得到了充分的体现,在推动医疗行业实现数字化创新与转型的过程当中,微软将自身的技术能力与客户的实际应用需求进行紧密融合,有效帮助客户实现降本增效,为未来赋能更多的行业客户实现自身创新的跨越式发展提供实践参考。

推荐阅读

精彩活动

诚邀您观看《安全大咖行—第3期》

关注公众号:拾黑(shiheibook)了解更多

赞助链接:

关注数据与安全,洞悉企业级服务市场:https://www.ijiandao.com/
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
让资讯触达的更精准有趣:https://www.0xu.cn/

公众号 关注网络尖刀微信公众号
随时掌握互联网精彩
赞助链接