[发明专利]一种图像处理的方法、终端设备及计算机可读介质

权利要求书

1.一种图像处理方法，其特征在于，包括：

接收待处理图像；

提取所述待处理图像的特征图，在所述特征图中包含第一图像元素和第二图像元素；

对所述第一图像元素和所述第二图像元素分别进行内容识别得到第一内容和第二内容；

依据所述第一内容和所述第二内容进行关系预测得到关系预测结果。

2.根据权利要求1所述的方法，其特征在于，所述对所述第一图像元素和所述第二图像元素分别进行内容识别得到第一内容和第二内容，包括：

对所述第一图像元素进行内容分类预测得到第一分类结果，对所述第一图像元素的位置进行预测得到第一预测位置；对所述第二图像元素进行内容分类预测得到第二分类结果，对所述第二图像元素的位置进行预测得到第二预测位置；

所述依据所述第一内容和所述第二内容进行关系预测得到关系预测结果包括：

依据所述第一分类结果和所述第一预测位置以及所述第二分类结果和所述第二预测位置进行关系预测得到关系预测结果。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

在所述待处理图像的特征图上生成至少两个目标元素区域，所述目标元素区域为所述特征图上包含单个图像元素的图像区域；

所述对所述第一图像元素进行内容分类预测得到第一分类结果，对所述第一图像元素的位置进行预测得到第一预测位置；对所述第二图像元素进行内容分类预测得到第二分类结果，对所述第二图像元素的位置进行预测得到第二预测位置；依据所述第一分类结果和所述第一预测位置以及第二分类结果和所述第二预测位置进行关系预测得到关系预测结果，包括：

对所述目标元素区域中的内容进行分类预测，得到所述目标元素区域中的内容的分类结果；

对所述目标元素区域的位置进行位置预测，得到所述目标元素区域的预测位置；

对所述目标元素区域中内容之间的关系进行关系预测，得到所述目标元素区域中内容之间的关系预测结果。

4.根据权利要求3所述的方法，其特征在于，所述对所述目标元素区域中的内容进行分类预测，得到所述目标元素区域中的内容的分类结果；对所述目标元素区域的位置进行位置预测，得到所述目标元素区域的预测位置；对所述目标元素区域中内容之间的关系进行关系预测，得到所述目标元素区域中内容之间的关系预测结果，包括：利用概率函数

Pr(x|I,BI)=Πi∈VΠj≠iPr(xicls,xibbox,xi→j|I,BI)]]>

计算所述目标元素区域中内容的分类预测概率、所述目标元素区域的位置预测概率、以及所述目标元素区域中内容之间的关系预测概率；其中，是变量的集合，Pr为每个变量x的概率函数名，n为所述目标元素区域的个数，V是所述目标元素区域的集合，是第i个所述目标元素区域中内容的分类变量，是表示所述目标元素区域的坐标的变量，x_i→j是第i个所述目标元素区域中内容和第j个所述目标元素区域中内容的关系变量，I为所述待处理图像的特征图，B_I为所述目标元素区域，∏是各项连乘的运算符号；

利用方程x^*＝argmax_xPr(x|I,B_I)解得所述目标元素区域中的内容的分类结果、所述目标元素区域的预测位置、所述目标元素区域中内容之间的关系预测结果；其中，x^*为所述目标元素区域中的内容的分类结果变量、所述目标元素区域的预测位置变量、所述目标元素区域中内容之间的关系预测结果变量的集合，argmax_xPr(x|I,B_I)为寻找使得所述概率函数Pr(x|I,B_I)取得最大值所对应的变量x的函数。