[发明专利]基于混合现实的辅助诊疗系统在神经外科中的应用方法

摘要

本发明涉及一种基于混合现实的辅助诊疗系统在神经外科中的应用方法，该方法包括面部特征点提取、混合现实设备中的模型和面部特征配准、手术辅助导航三个部分。本发明通过将医学影像定位技术、配准技术以及特征识别技术整合在一起，并结合混合现实设备完成一套基于全息三维可视化辅助诊疗系统，并将其应用于神经外科；该系统可以有效完成外科术前计划以及手术完成时对手术完成情况的检验提供了可靠的保证，降低手术风险，减少医患纠纷，拥有着良好的商业前景和价值。

主权项

1.一种基于混合现实的辅助诊疗系统在神经外科中的应用方法，其特征在于：该方法包括面部特征点提取、混合现实设备中的模型和面部特征配准、手术辅助导航三个部分，其中，所述的面部特征点提取包括以下步骤：(1)通过电极片采集人体特征点，记录点云数据；(2)将特征的点云数据生成二维码；(3)通过混合现实设备自带的摄像头识别二维码，获取特征点云模型；所述的和面部特征配准包括以下步骤：混合现实设备上传的比对图片为3维，特征点生成的对比图像也同样是3维，通过点云配准的方法计算两组3维图像模型的误差，用来判断人体信息与混合现实设备中的模型是否吻合；所述的手术辅助导航包括以下步骤：(1)在模型上为病患部位进行标注，然后将图片上传到混合现实设备上；(2)医生通过混合现实设备的体感模式，操作指针，调整视线所在方向，系统检测标记中心，通过两点一线确定开口位置；(3)然后通过重心到指针的连线做平行线，该平行线会与病变位置有两个切点，切点距离即为理想开口大小；(4)将开口直接标记在模型表面，会呈现一个光斑，实时反馈给操作医生，并且在模型透视下，系统会显示开口到病变位置的路径，再根据血管和神经位置调整指针，确定开口方案。