[发明专利]一种判断消化内窥镜检查是否染色的方法及系统

权利要求书

1.一种判断消化内窥镜检查是否染色的方法，其特征在于，包括以下步骤：

获取消化道内窥镜操作过程中实时采集的连续视频帧；

基于预先训练的染色动作识别模型，判断是否存在染色动作；

若存在染色动作，将所述染色动作对应的视频帧输入预先训练的染色类别识别模型，判断该染色动作相应的染色类别；

若经染色类别识别模型判断出染色类别为电子染色，还将所述染色动作对应的视频帧按照一张未染色和一张染色进行分组，将多组视频帧输入预先训练的电子染色二次确认模型，确定所述电子染色的类别；

所述电子染色二次确认模型的构建方法包括：

获取电子染色类别训练集，所述电子染色类别训练集中的每个样本包括针对同一部位的染色前后2张图像；

采用电子染色类别训练集训练全连接神经网络，得到电子染色类别二次确认模型。

2.如权利要求1所述的一种判断消化内窥镜检查是否染色的方法，其特征在于，获取实时采集的连续视频帧后，还进行降帧预处理。

3.如权利要求1所述的一种判断消化内窥镜检查是否染色的方法，其特征在于，所述染色动作识别模型的构建方法包括：

获取染色视频，截取包含染色动作的视频段，并展开成单帧图像；

对得到的单帧图像进行均匀采样得到染色动作训练数据集；

采用染色动作训练数据集训练三维卷积网络，得到染色动作识别模型。

4.如权利要求1所述的一种判断消化内窥镜检查是否染色的方法，其特征在于，所述染色类别识别模型的构建方法包括：

获取包含各类染色图像的染色类别训练数据集，且各类染色图像均包括多幅；

采用染色类别训练数据集训练卷积神经网络，得到染色类别识别模型。

5.一种判断消化内窥镜检查是否染色的系统，其特征在于，包括：

数据获取模块，获取消化道内窥镜操作过程中实时采集的连续视频帧；

染色动作识别模块，基于预先训练的染色动作识别模型，判断是否存在染色动作；

染色类别识别模块，若存在染色动作，将所述染色动作对应的视频帧输入预先训练的染色类别识别模型，判断该染色动作相应的染色类别；

若经染色类别识别模型判断出染色类别为电子染色，还将所述染色动作对应的视频帧按照一张未染色和一张染色进行分组，将多组视频帧输入预先训练的电子染色二次确认模型，确定所述电子染色的类别；

所述电子染色二次确认模型的构建方法包括：

获取电子染色类别训练集，所述电子染色类别训练集中的每个样本包括针对同一部位的染色前后2张图像；

采用电子染色类别训练集训练全连接神经网络，得到电子染色类别二次确认模型。

6.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-4任一项所述判断消化内窥镜检查是否染色的方法。

7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-4任一项所述判断消化内窥镜检查是否染色的方法。