[发明专利]图像处理方法、模型、装置、电子设备及可读存储介质

说明书

本申请实施例提供了一种图像处理方法、模型、装置、电子设备及可读存储介质。该方法包括：获取关于目标对象的视频流；对于视频流中的每个图像帧，根据每个图像帧与视频流中各图像帧的关联关系，确定每个图像帧的第一权重；基于每个图像帧的第一权重，对各图像帧进行融合；基于融合后的结果，提取得到目标对象的轨迹特征。本方案会对视频流中的每个图像帧，都根据图像帧与视频流中各图像帧的关联关系来确定图像帧的第一权重，进而基于每个图像帧的第一权重，对各图像帧进行融合，再基于融合后的结果，提取得到目标对象的轨迹特征，即在进行轨迹特征提取时，考虑了视频流中帧与帧之间的关系，从而得到更好的特征表达效果，提升处理效果。

技术领域

本申请实施例涉及图像处理技术领域，具体而言，本申请实施例涉及一种图像处理方法、模型、装置、电子设备及可读存储介质。

背景技术

在图像处理以及计算机视觉等领域，利用视频对目标进行跟踪逐渐成为一个新兴应用方向。该技术能够实现用摄像设备代替人眼，用计算机来代替人脑，从而协助人来完成对目标的监控、分析或预警等。目前，在智能家居、虚拟现实、智能可穿戴设备、大型监控系统等场景中，该技术具有广阔的应用前景和巨大的经济价值，得到了国内外学者以及研究机构的关注。

由于针对目标拍摄的视频会存在清晰度、遮挡程度、图像质量等方面的不同情况，在对视频中目标轨迹进行处理时，视频的每一帧的重要性是不同的，可以通过计算每一帧图像重要性来得到更好的处理结果。这种处理方式被称为注意力机制。

然而，现有的注意力机制通常只考虑每一帧图像本身的情况，而目标的信息或行为通常需要在一系列的表现中通过一些特殊的动作或形象来体现，若只考虑每一帧图像本身的情况，会使处理效果不理想。

发明内容

为克服上述技术问题或者至少部分地解决上述技术问题，特提出以下技术方案：

第一方面，本申请实施例提供了一种图像处理方法，该方法包括：

获取关于目标对象的视频流；

对于所述视频流中的每个图像帧，根据每个所述图像帧与所述视频流中各图像帧的关联关系，确定每个所述图像帧的第一权重；

根据每个所述图像帧的第一权重，对各所述图像帧进行融合；

基于融合后的结果，提取得到所述目标对象的轨迹特征。

在一种可选的实现方式中，所述根据每个所述图像帧的第一权重，对各所述图像帧进行融合，包括：

对于每个所述图像帧，根据每个所述图像帧的图像内容，确定每个所述图像帧的第二权重；

根据每个所述图像帧的第一权重和第二权重，对各所述图像帧进行融合。

在一种可选的实现方式中，所述根据每个所述图像帧的第一权重和第二权重，对各所述图像帧进行融合，包括：

将每个所述图像帧的第一权重和第二权重融合，得到每个所述图像帧的第三权重；

根据每个所述图像帧的第三权重，对各所述图像帧进行融合。

在一种可选的实现方式中，所述关联关系包括图像帧之间的关系特征，所述对于所述视频流中的每个图像帧，根据每个所述图像帧与所述视频流中各图像帧的关联关系，确定每个所述图像帧的第一权重，包括：

分别提取各个所述图像帧的图像特征；

将各个所述图像帧的图像特征两两组合而成的每个特征对分别进行关系特征提取，得到所述每个特征对所对应的关系特征；

对于每个所述图像帧，根据每个所述图像帧所对应的各关系特征，得到每个所述图像帧的第一权重。