[发明专利]手术辅助的数据处理方法、装置、系统

权利要求书

1.一种手术辅助的数据处理系统，其特征在于，包括：服务器、支气管镜，以及混合现实显示装置；所述服务器能够与所述混合现实显示装置、所述支气管镜直接或间接通讯；

所述服务器用于：

获取虚拟数据，所述虚拟数据包括人体的虚拟支气管树的数据；

获取术中数据，所述术中数据包括：手术过程中，所述支气管镜进入所述人体后采集到的实时内窥图像；

将所述术中数据与所述虚拟数据发送至所述混合现实显示装置；

所述混合现实显示装置用于：

获取并展示手术过程的现实场景图像；所述现实场景图像是图像采集装置对手术过程进行图像采集而得到的；所展示的现实场景图像适配于所述手术过程的医护人员观察到的真实场景；

基于所述虚拟数据，展示所述虚拟支气管树的外观模型；

展示所述实时内窥图像。

2.根据权利要求1所述的手术辅助的数据处理系统，其特征在于，

所述服务器或所述混合现实显示装置用于：在所述人体的手术过程中，确定所述支气管镜在所述人体内的实时位置；

所述混合现实显示装置还用于：

基于所述虚拟数据与所述实时位置，展示所述虚拟支气管树内部目标位置的内部导航图像；

其中，所述目标位置适配于所述实时位置，所述内部导航图像指：虚拟摄像源在所述目标位置观察所述虚拟模型内部而得的图像。

3.根据权利要求1所述的手术辅助的数据处理系统，其特征在于，

所述服务器还用于：

获取所述人体的CT数据，所述虚拟数据是基于所述CT数据形成的；

将所述人体的至少部分CT数据发送至所述混合现实显示装置；所述至少部分CT数据包括CT图像；

所述混合现实显示装置还用于：

基于所述实时位置，展示所述实时位置的CT图像。

4.根据权利要求1所述的手术辅助的数据处理系统，其特征在于，

所述混合现实显示装置还用于：

展示所述虚拟支气管树的三维透视图像。

5.根据权利要求1所述的手术辅助的数据处理系统，其特征在于，

所述虚拟数据还包括病灶位置数据，所述病灶位置数据表征了所述虚拟支气管树与病灶区域的相对位置；

所述混合现实显示装置还用于：

在展示所述虚拟支气管树的外观模型和/或三维透视图像时，基于所述病灶位置数据，展示所述病灶区域。

6.根据权利要求1所述的手术辅助的数据处理系统，其特征在于，

所述虚拟数据包括目标路径的数据，所述目标路径模拟了所述支气管镜进入所述人体后到达病灶的路径；

所述混合现实显示装置还用于：

在展示所述虚拟支气管树的外观模型和/或三维透视图像时，在其中展示出所述目标路径。

7.根据权利要求1至6任一项所述的手术辅助的数据处理系统，其特征在于，所述混合现实显示装置，还用于：

响应于当前用户的交互信息，对所展示的内容进行调整，所述交互信息是交互装置检测到的，所述交互装置集成于所述混合现实显示装置，或被配置为能够与所述混合现实显示装置通信。

8.根据权利要求7所述的手术辅助的数据处理系统，其特征在于，

所述调整包括以下至少之一：

缩小所述外观模型；

放大所述外观模型；

旋转所述外观模型；

改变所述外观模型的展示位置；

关闭所述外观模型的展示；

开启所述外观模型的展示；

缩小显示窗口；

放大所述显示窗口；

改变所述显示窗口的位置；

所述显示窗口的开启；

所述显示窗口的关闭；

其中，所述显示窗口为用于显示对应图像的窗口，所述对应图像为以下任意之一：所述实时内窥图像、所述支气管镜的内部导航图像、所述人体的CT图像、所述虚拟支气管树的三维透视图像。