[发明专利]一种基于增强现实的医疗辅助方法及设备

说明书

本发明实施方式公开了一种基于增强现实的医疗辅助方法，包括：发出包含虚拟图像的第一光线；获取包含医疗场景的实景图像的第二光线；将所述包含虚拟图像的第一光线与包含医疗场景的实景图像的第二光线进行合成。区别于现有技术，本实施方式提供的一种基于增强现实的医疗辅助方法将医疗场景的实景图像与虚拟图像结合，虚拟图像能够为医生或者病人提供有用的医疗信息提示，辅助医生进行疾病诊断和辅助病人进行疾病的治疗，用户体验好，使用方便。

技术领域

本发明实施方式涉及增强现实技术领域，特别是涉及一种基于增强现实的医疗辅助方法及设备。

背景技术

目前，外科手术的专家指导，无论是在现场还是远程，主要同过音频视频实时传递的方式实现。通过在手术室设置多个摄像机，将手术现场、手术操作部位的实况从多个角度进行拍摄。在现场观察室或远程观察室内，专家通过数个电视屏幕，观察手术现场的状况。对指导执刀医生和助手们的指导，则通过语音或对视频画面简单的标记来实现。执刀医生如需阅读病人相关的信息，比如各类医学图像等，则需要将视线离开手术操作部位，通过屏幕或灯箱来获取信息。这种指导教学和信息获取的方式存在多种缺陷：

对于执刀医生和助手：

专家的指令不直观：由于专家不在现场，仅能通过语音，或简单地在二维屏幕上做标记，向执刀医生和助手传递指令。这种方式容易产生各种误解，难以将信息精准得传递给执刀医生和助手，轻则浪费宝贵的手术时间，重则有可能使执刀医生出错，产生严重的后果。

获取信息时视线需要离开操作部位:医生在手术时常常需要将当前操作部位与术前拍摄的医学图像(X光，CT，MRI等)经行对比，以确保手术的准确性已及最佳的操作步骤。然而，这些图像或者通过计算机屏幕加以显示，或者直接置于灯箱上，而无法同时将医学图像和手术操作部位置于指导医生和助手的视野内，使得对照操作现场和医学图像非常困难。对于其他信息，比如参考过去成功案例的视频，或者是观看远程专家通过视频演示操作等，也有同样的问题。

对于远程专家:

手术现场、手术操作部位的呈现不真实：专家无论在现场观察室还是远程观察室，仅能通过数个二维屏幕观察手术现场和操作部位，无法真实的还原现场状况。

难以精准的指出执刀医生下一步需要操作的部位:受二维屏幕所限制，若需精确的指出三维空间中的一点，需要同时在数个屏幕上多角度的进行操作，不直观也不方便。

远程医疗

远程医疗是指通过计算机技术、遥感、遥测、遥控技术为依托，充分发挥大医院或专科医疗中心的医疗技术和医疗设备优势，对医疗条件较差的边远地区、海岛或舰船上的伤病员进行远距离诊断、治疗和咨询。与手术现场指导教学类似，目前远程医疗主要依托于高速网络进行数字、语音、图像和视频的实时交流。通过在远程医疗室和医疗现场设置一台或数台摄像机，以及高速网络传递视频数据，并在显示屏幕上显示，可以实现远程专家和现场病患、医务人员“面对面”的交流。然而，这种交流方式也存在多种缺陷：

对于现场医务人员：

专家的指令不直观：由于专家不在现场，仅能通过语音，或简单地在二维屏幕上做标记，向现场医务人员传递指令。这种方式容易产生各种误解，难以精准地传递信息，轻则浪费宝贵的医治时间，重则有可能出错，产生严重的后果。

获取信息时视线需要离开操作部位:现场医务人员在进行医治的过程中，常常需要参考病人的病例、医学图像，各类文献，远程专家的意见等。然而，这些信息或者需要通过计算机屏幕加以显示，或者被记录在各种纸质媒介上，无法同时与病人或操作现场置于现场医务人员医生的视野内，影像医治效率。对于其他信息，比如过去成功案例的视频，或者是远程专家通过视频传递的演示操作等，也有同样的问题。

对于远程专家:

病人以及医治现场的呈现不真实：仅能通过数个二维屏幕观察手术现场和操作部位，无法真实的还原病人以及医治现场状况。