使用VirtaMed LaparoS模拟器进行混合现实手术培训

全球公认的尖端医疗技术开发商VirtaMed LaparoS使用了Unity的实时3D数字孪生技术和集成触觉反馈开发超逼真的虚拟手术培训。
注:这篇博客包含可能让某些人感到不适的医学图像。
VirtaMed,一家位于瑞士的医学教育混合现实模拟器开发商,新推出的解决方案降低了传统手术培训相关的风险。利用Unity的沉浸式技术重现复杂的手术培训场景,VirtaMed创新且获奖的LaparoS正在彻底改变医生学习手术的方式。
博士。Ivan Puente,医学博士,FACS项目主任,Broward Health,表示:“从你走近模拟器的那一刻起,你就可以像在手术室(OR)一样进行设置。我们能完整模仿实际的手术操作,更棒的是我们还能加上出血、胆汁渗漏等并发症,让手术医生在培训时就学会应对方法。很明显,在手术前进行模拟训练既能提高医生的技能水平,又能改善病人的安全。”
在本文中,我们将详细了解下这款基于实时3D数字孪生技术打造的模拟培训项目,认识手术模拟培训的好处。
打造更好的培训项目
转移培训中患者所承受的风险
传统外科培训一直以来遵循着“看一次、做一次、教一次”(see one, do one, teach one)的模式。然而,这种模式正逐渐落后于当今先进的医疗技术和工艺。VirtaMed认为外科医生的首次手术实践不能在活体病人身上进行。LaparoS混合现实模拟器允许外科医生在逼真、无风险的环境下对“数字人”进行腹腔镜普通外科手术(在腹壁切口中插入一个小型摄像机)和妇科手术的训练。
VirtaMed将超逼真的实时3D可视化与带有触觉反馈的模拟平台相结合,打造出了一款腹腔镜培训模拟器,打破了传统的医学培训模式。培训的风险也从真正的病人身上转移到了模拟器里。

改善培训表现
科学研究已经证明,模拟训练的效果相比于传统方法有显著改善。高质量的模拟可以在一定程度上打破不真实感,让受训者沉浸到培训场景中。比如,虚拟病人可在培训期间出现非常真实的出血现象,让受训者能感受到问题的急迫感、真正投入到解决问题的过程中。
LaparoS模拟器还能以毫米级精度记录受训者的活动,不仅能对手术表现提供有价值的反馈,还能预测手术操作的潜在后果。
在腹部及其他部位的数字孪生上开展模拟训练不仅加快了学习速度,让新手能更快地站上手术台,而且还使得团队训练成为可能,降低整体培训成本。

普及外科技能培训
传统上,外科专家们都采用学徒制来教授技能,此方法的效果取决于老师的水平。VirtaMed的目标是收录享誉全球的专家们的技术,将其移植到模拟程序中,让每一位受训者都向顶尖专家们学习。
VirtaMed的模拟平台还使用了机器学习和外科专家输入的数据来量化最佳手术实践,用数字化标准来衡量受训者的表现,并为受训者提供标准化的反馈。这样一来,不断增长的数字孪生模拟就能消除许多手术培训的门槛、普及专业手术技能。
“我们使用颠覆性技术来改善外科培训,以服务于患者。使用Unity使我们能够利用游戏行业的重大投资和技术进步,在我们能够产生最大影响的地方——现在和未来。”
——Stefan Tuchschmid,VirtaMed联合CEO和创始人
从理论到现实
LaparoS的组成
VirtaMed需要实时3D引擎上拓展公司已有的技术,用最先进的图形重现最真实的手术流程和细节。
VirtaMed公司的高级软件工程师Basil Fierz解释了他们为什么选择Unity。
- Unity致力于投资和改进技术,VirtaMed理解Unity高清渲染管线的潜在能力(HDRP)。
- Unity与生俱来的可扩展性让引擎可以整合现成的物理模拟工具,团队不必从头熟悉一个新的物理引擎。
- Unity的Integrated Success为VirtaMed团队提供了一个支持结构,使其能够自信地推动开发边界。
“Unity开发者关系经理是我们与整个Unity的桥梁,帮助我们高效地与从工程到市场的每个人联系。我们双方定期讨论的远不止日常的开发问题,还包括参考内容推荐、工作流改进等,他们为我们提供了极大的帮助。”
——Basil Fierz,PhD,高级软件工程师,VirtaMed

开发超逼真的模拟器体验
VirtaMed能在Unity中结合起逼真的模型和触觉反馈,形成LaparoS特有的出色培训体验。公司建立的物理引擎可作为模块直接整合至Unity中,用于准确地表现人体器官的物理性质及手术时的反应。
模拟器的开发初期以器官的物理仿真为主要重点。VirtaMed为此整理了大量的参考信息,包括手术录像、专业手术知识、手术观察资料及从业医生的建议。器官会对工具的触碰作出反应,物理引擎则负责计算反作用力,将其转移到模拟的穿刺套针工具上来产生触觉反馈。
基于Unity打造的模拟平台还能根据不同地区的手术习惯差异来灵活地进行调整,比如手术会在身体的哪一侧进行,培训人员可根据喜好来轻松启用/禁用此类功能。
同时,VirtaMed开发了物理模拟器设备。能够使用Unity进行模拟设计审查避免了模拟器硬件生产中的不必要延误。

用Unity规划未来
在看到LaparoS模拟器取得成功后,VirtaMed计划在未来12个月内将所有产品都移植到Unity,并用Unity开发未来的产品。
VirtaMed在Unity编辑器的帮助下能更快地制作出内容,并将其优势扩展到更多的产品上,为其他行业的客户定制小型项目。公司计划在未来建立一个涵盖多种罕见情景的培训技能库,用Unity的数字孪生技术建立模拟平台,为未来的模拟产品开发和扩张做好准备。
“我们所认为的高质量培训要能为外科医生提供对的工具、让实操在安全的环境中进行,不能给病人带来任何风险。培训流程在数字化的同时也变得更为可控,外加上自我指导、游戏化训练、自我调节的学习节奏,外科培训的面貌将完全地改变。”
——Stefan Tuchschmid,VirtaMed联合CEO和创始人
____________________________________________________________________________________________________
如果你想了解更多Unity数字孪生的现实例子,包括成功案例、项目演示和按需网络研讨会,请在我们的资源页面。你也可以立刻联系我们来与Unity专家团队洽谈。



