虚拟现实(Virtual Reality)、增强现实(Augmented Reality)和混合现实(Mixed Reality)三大科学技术是当代可视化医疗的重要组成部分。其中,混合现实(MR)是最前沿的技术,具有虚实结合,全息显像和虚拟输入等特点。
近年来,中国人民解放军总医院全军神经外科研究所联合北京缙铖医疗科技有限公司将虚拟现实(VR)、增强现实(AR)、混合现实(MR)这三种技术应用于神经外科的可视化医疗诊治,大大推进了可视化医疗的发展。
陈晓雷教授谈虚拟现实、增强现实和混合现实
(扫描二维码即可观看)
采用真实数据与虚拟数据相结合,将真实的病患数据通过三维重建,生成全息影像,并导入到MR眼镜当中进行观察与交流,并且支持多人同模同时同地或异地进行协作交流,为医生们进行远程术前讨论和手术方案规划提供了更为直观与便捷的方式。
中国人民解放军总医院全军神经外科研究所和北京缙铖医疗科技有限公司是全球最早研发MR技术应用于临床手术的团队之一,是国内最早研发相应MR技术用于神经外科诊疗的机构,中国人民解放军总医院的陈晓雷教授在MR定位导航技术中已经多次应用于临床诊治,近期也有相关研究文章被《Journal of Neurosurgery》收稿。
在2018年5月11日-13日第八届世界华人神经外科大会上,由神经外科著名专家许百男教授主持,陈晓雷教授发布了一场题为:“虚拟现实、增强现实、混合现实:神经外科的变革和创新”的专场卫星会,受到参会专家的广泛关注和好评。
“虚拟现实、增强现实、混合现实:神经外科的变革和创新”
(扫描二维码即可观看)
在此次大会上,上述研发团队和北京缙铖医疗科技有限公司还共同展示了自主研发的头戴式多模态内镜术中AR显示系统。传统方式下,手术医生在操作内镜时需要看着显示屏,头部和颈部需要长期保持同一姿势,容易疲劳,且无法同屏观看患者影像资料,而由缙铖医疗研发的头戴式多模态内镜术中AR显示系统可使术者借助轻便的头戴式显示装置,显示内镜手术视野、患者影像资料及三维重建的虚拟内窥镜图像等多模态数据,不仅能提供丰富的信息,而且还不宜引起术者疲劳。
在此基础上,借助上述团队研发的远程手术协作系统,还能将本地手术视频影像通过网络实时传输给在异地的协作者,并能将协作者在手术画面上加注的标记和提示实时更新在本地显示设备上,从而达到远程手术实时协作的效果,具有良好的临床应用前景。本次大会上,我国神经内镜领域的权威专家张亚卓教授、鲁晓杰教授、来自台湾的内镜专家陈建民教授和很多参会代表等都体验了上述头戴式AR显示系统和远程手术协作技术,并表示了对此技术的浓厚兴趣。
张亚卓教授体验头戴式AR显示系统
鲁晓杰教授体验头戴式AR及远程协作系统
陈建民教授体验头戴式AR显示系统
来自埃及的专家体验头戴式AR显示系统
北京缙铖医疗科技有限公司将混合现实应用于医学领域,尤其是在神经外科领域与专家合作,结合多项病例,已经表明此类技术的应用确实能给诊疗带来获益,相信随着计算机技术及材料工程的进一步发展,北京缙铖医疗科技有限公司必将大大推进可视化医疗的发展,为我国神经外科的技术进步做出贡献。