[发明专利]基于感存算一体化的内窥镜高清视频处理系统及方法

说明书

本发明适用于医疗器械技术领域，提供了一种基于感存算一体化的内窥镜高清视频处理系统及方法，所述系统包括：感存算一体化模块、图像信号处理模块和无线通信模块；所述感存算一体化模块，用于感知、计算和存储待测视场的探测信息，并输出图像信号；所述图像信号处理模块，使用一个或多个图像处理较正算法将所述图像信号进行修复、优化处理，并输出为视觉图像信息；所述无线通信模块，用于构建图像信号处理模块与显示器之间的通信，以将所述视觉图像信息显示在显示器；本发明图像处理、图像存储的一体化设计，以及图像传输芯片的高度集成，降低了功耗。

技术领域

本发明属于医疗器械技术领域，尤其涉及一种基于感存算一体化的内窥镜高清视频处理系统及方法。

背景技术

伴随着半导体、新材料和计算机技术的快速发展，近两年集传感、存储、计算(简称感存算)一体化的一种新型架构进入大众的视线，通过在电子器件中集成信息感知、数据计算与数据存储的功能，可以极大程度地提高电子器件的信息处理效率，并节省能源降低能耗，具有应用于感存算一体化处理系统的潜力。

传统的传感单元与计算单元、存储单元处于分离的状态，信息需要通过传感单元将有效数据采集，并通过数模转换器等模块将数据转换成计算与存储单元可以处理的形式，并通过线路连接将信息传递至存储与计算单元。这一繁琐的过程使得信息处理的延迟、能耗增加。在医用无线内窥镜摄像设备方面，亦存在同样的问题，图像传感、存储、计算处于分离状态，导致后续的图像信息处理的延迟、能耗增加，限制了信号在实时低延迟信息传输的需要。

因此，有必要针对医用无线内窥镜摄像系统的高清图像和视频传输，提出一种基于感存算一体化的内窥镜高清视频处理系统。

发明内容

本发明实施例的目的在于提供一种基于感存算一体化的内窥镜高清视频处理系统，以解决现有医用内窥镜摄像设备的图像采集、存储、计算处于分离状态，而导致后续的高清图像和视频信息处理的延迟、能耗增加的问题。

本发明实施例是这样实现的，一种基于感存算一体化的内窥镜高清视频处理系统，所述系统包括：感存算一体化模块、图像信号处理模块和无线通信模块；

所述感存算一体化模块，用于感知、计算和存储待测视场的探测信息，并输出图像信号；

所述图像信号处理模块，使用一个或多个图像处理较正算法将所述图像信号进行修复、优化处理，并输出为视觉图像信息；

所述无线通信模块，用于构建图像信号处理模块与显示器之间的通信，以将所述视觉图像信息显示在显示器；

其中，所述感存算一体化模块包括感存算芯片、预设在所述感存算芯片的信息原位处理单元；通过所述感存算芯片感知、计算和存储待测视场的探测信息，并在计算所述探测信息的过程中运行所述信息原位处理单元，所述信息原位处理单元基于多注意力机制对所述探测信息进行多维度图像异质融合特征表达，以实现存内原位计算。

本发明实施例的目的还在于提供一种基于感存算一体化的内窥镜高清视频处理方法，所述方法包括以下步骤：

感知、计算和存储待测视场的探测信息，并输出图像信号；

使用一个或多个图像处理较正算法将所述图像信号进行修复、优化处理，并输出为视觉图像信息；

将所述视觉图像信息显示在显示器；

其中在计算所述探测信息的过程中，基于多注意力机制对所述探测信息进行多维度图像异质融合特征表达，以实现存内原位计算。