利用SenseGlove触觉手套开发XR手术训练体验
VirtualiSurg和VR触觉
作为领先的培训平台,VirtualiSurg自2017年以来一直利用扩展现实 (XR) 和触觉技术,为全球医疗保健行业提供个性化、数据驱动的学习解决方案。该平台赋能医疗专业人员进行协作式学习和培训,提升他们的技能,使他们能够为患者提供最优质的护理,并通过沉浸式技术的应用提升患者的信任度。
需要解决的挑战
培训外科医生进行复杂的手术需要的不仅仅是视觉引导。它需要深入了解人体解剖学和手术技巧,才能获得最佳的患者治疗效果。沉浸式技术在外科教育中的价值已日益得到证实。
2024年,VirtualiSurg和法国强生医疗科技公司(J&J MedTech France)开发了用于前路腰椎椎间融合术(ALIF)手术的XR训练模块,该模块使用VR头显、VR控制器以及3D Systems的触觉Geomagic Touch机器人来模拟手术导航。虽然这为手术训练奠定了坚实的基础,但仍然缺乏复制手术条件所需的完整感官真实感。
触觉手套的实现
VirtualiSurg与SenseGlove合作,进一步增强其用于ALIF手术训练的XR模拟功能,并将Nova 2触觉手套融入训练体验。Nova 2手套通过定制的3D打印支架与Geomagic Touch机械臂连接,让学员能够感受到外科医生在此类手术中所体验到的触觉。手套的力反馈和主动手掌反馈相结合,以及机械臂提供的接地力反馈,让用户在穿过腹部到达腰椎时,能够感知手掌上不同组织和器官的硬度和阻力。
结果
Nova 2触觉手套与ALIF XR模拟系统的集成,显著提升了手术训练体验的直观性和沉浸感。触觉手套提供的额外力反馈有助于强化手眼协调能力、空间感知能力以及对复杂解剖结构的理解——这些都是执行ALIF等精细外科手术时必须掌握的关键要素。这种基于触觉的XR训练可以转化为更好的操作技能掌握,增强学员的自信心,并更准确地复制手术任务,从而弥合XR训练与真实手术室操作之间的差距。触觉手套可以成为优化医疗保健领域培训的变革性工具。