[发明专利]用于处理数个结肠图像及数个视频的数个系统及数个方法

说明书

提供了一种产生用于呈现一图形用户界面(GUI)的数个指令的方法，所述数个指令用于动态追踪一患者的一结肠的多个内窥镜图像中的至少一息肉，所述方法包括以下步骤：对所述多个内窥镜图像进行迭代：追踪一区域的一位置，所述区域的所述位置描绘出相对于至少一先前内窥镜图像的所述相应内窥镜图像内的至少一息肉；当所述区域的所述位置在所述相应内窥镜图像的外部时：计算从所述相应内窥镜图像内到所述相应内窥镜图像的外部的所述区域的所述位置的一向量；通过使用所述向量的一指示增强所述相应内窥镜图像来创建一增强内窥镜图像；及产生用于在所述GUI内呈现的所述增强内窥镜图像的数个指令。

相关申请

本申请主张于2019年6月4日提交的美国临时专利申请第16/430,461号的优先权，其内容通过引用整体并入本文。

本发明的技术领域及背景技术

本发明在其一些实施例中涉及结肠镜检查，并且更具体地但不排他地涉及用于处理数个结肠图像及数个视频及/或处理在一结肠镜检查处理中自动检测到的数个结肠息肉的数个系统及数个方法。

结肠镜检查是检测数个结肠息肉的所述尺规(gold standard)。在结肠镜检查期间，称为一结肠镜的一长型柔性管在所述结肠内推进。所述结肠镜的所述末端的一相机捕捉数个图像，并在一显示器上呈现给所述医生。所述医生针对数个息肉的所述存在来检查所述结肠内的所述表面。使用所述结肠镜的数个器械来去除已识别的数个息肉。早期切除数个癌性息肉可以消除或降低患有结肠癌的风险。

发明内容

根据第一方面，一种产生用于呈现一图形用户界面(GUI)的数个指令的方法，所述数个指令用于动态追踪一患者的一结肠的多个内窥镜图像中的至少一息肉，所述方法包括以下步骤：对所述多个内窥镜图像进行迭代：追踪一区域的一位置，所述区域的所述位置描绘出相对于至少一先前内窥镜图像的所述相应内窥镜图像内的至少一息肉；当所述区域的所述位置在所述相应内窥镜图像的外部时：计算从所述相应内窥镜图像内到所述相应内窥镜图像的外部的所述区域的所述位置的一向量；通过使用所述向量的一指示增强所述相应内窥镜图像来创建一增强内窥镜图像；及产生用于在所述GUI内呈现的所述增强内窥镜图像的数个指令。

根据第二方面，一种产生用于呈现一GUI的数个指令的方法，所述数个指令用于动态追踪捕捉一患者的一结肠内的多个2D内窥镜图像的一内窥镜相机的3D运动，所述方法包括以下步骤：对所述多个内窥镜图像中的所述相应内窥镜图像进行迭代：将所述相应2D内窥镜图像输入至一3D重建神经网络中；通过所述3D重建神经网络输出所述相应2D内窥镜图像的一3D重建，其中所述2D内窥镜图像的数个像素被分配数个3D坐标；根据所述3D重建计算出所述内窥镜相机的所述结肠内的一当前3D位置；及产生用于在所述GUI内的一结肠图上呈现所述内窥镜相机的所述当前3D位置的数个指令。

根据第三方面，一种基于至少一二维(2D)图像计算一息肉的一三维体积的方法，其特征在于，所述方法还包括以下步骤：接收由位于一结肠的一管腔内的一内窥镜照相机捕捉的所述结肠的一内表面的至少一2D图像；接收所述至少一2D图像的一区域的一指示，其中所述二维图像描绘出至少一息肉；将至少一2D图像输入至一3D重建神经网络；通过所述3D重建神经网络输出所述至少一2D图像的一3D重建，其中所述2D图像的数个像素为数个分配3D坐标；及根据所述至少一2D图像的所述区域的数个像素的所述数个3D坐标的一分析，计算在所述至少一2D图像的所述区域内的所述至少一息肉的一估计3D体积。

在第一方面的一另一实施例中，所述向量的所述指示描绘出一方向及/或取向，用于调整一内窥镜相机以捕捉描绘出所述至少一图像的所述区域的另至少一内窥镜图像。

在第一方面的一进一步实施例中，当描绘出至少一息肉的所述区域的所述位置出现在所述相应内窥镜图像中时，通过使用所述区域的所述位置增强所述相应内窥镜图像来创建所述增强图像，其中从所述增强内窥镜图像中排除所述向量的所述指示。