[发明专利]一种图像配文方法、存储介质及终端设备在审
申请号: | 202011568927.7 | 申请日: | 2020-12-25 |
公开(公告)号: | CN114693839A | 公开(公告)日: | 2022-07-01 |
发明(设计)人: | 钟高高;翟润熙;林海石;李启明;张瑶 | 申请(专利权)人: | TCL科技集团股份有限公司 |
主分类号: | G06T11/60 | 分类号: | G06T11/60;G06V20/00;G06V10/44;G06V10/46;G06V10/764;G06V10/82;G06K9/62;G06F16/55;G06F16/583;G06N3/04;G06N3/08;G06N20/00 |
代理公司: | 深圳市君胜知识产权代理事务所(普通合伙) 44268 | 代理人: | 温宏梅 |
地址: | 516006 广东省惠州市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 图像 方法 存储 介质 终端设备 | ||
1.一种图像配文方法,其特征在于,所述方法包括:
获取待配文图像对应的若干描述语句,以及各描述语句各自对应的第一情感信息;
获取待配文图像对应的第二情感信息;
基于若干描述语句、若干描述语句中的各描述语句各自对应的第一情感信息以及所述第二情感信息,确定所述待配文图像对应的配文信息。
2.根据权利要求1所述图像配文方法,其特征在于,所述基于若干描述语句、若干描述语句中的各描述语句各自对应的第一情感信息以及所述第二情感信息,确定所述待配文图像对应的配文信息具体包括:
对于每个描述语句,确定该描述语句配置的第一情感信息与所述第二情感信息的匹配度;
基于各第一情感信息各自对应的匹配度,确定所述待配文图像对应的配文信息。
3.根据权利要求2所述图像配文方法,其特征在于,所述基于各第一情感信息各自对应的匹配度,确定所述待配文图像对应的配文信息具体包括:
将各第一情感信息各自对应的匹配度分别作为各第一情感信息各自对应的描述语句对应的匹配度;
基于匹配度在若干描述语句中选取目标描述语句,其中,所述目标描述语句为所述若干描述语句中的一个描述语句,并且所述目标描述语句对应的匹配度大于若干描述语句中除所述目标描述语句外的任一描述语句对应的匹配度。
4.根据权利要求1所述图像配文方法,其特征在于,所述获取待配文图像对应的若干描述语句,以及各描述语句各自对应的第一情感信息具体包括:
将所述待配文图像输入经过训练的语句预测模型;
通过所述语句预测模型确定所述待配文图像对应的若干描述语句以及各描述语句各自对应的第一情感信息。
5.根据权利要求4所述图像配文方法,其特征在于,所述语句预测模型配置若干默认情感以及若干预设描述语句,所述通过所述语句预测模型确定所述待配文图像对应的若干描述语句以及各描述语句各自对应的第一情感信息具体包括:
通过所述语句预测模型确定所述待配文图像对应的若干图像组以及若干图像组中的每个图像组各自对应的评价分数,其中,每个图像组均包括所述待配文图像、若干默认情感中的一默认情感以及若干预设描述语句中的一预设描述语句;
基于各图像组以及各图像组各自对应的评价分数,确定所述待配文图像对应的图像组集;
对于所述图像组集中的每个目标图像组,将该目标图像组包括的预设描述语句作为待配文图像对应的描述语句,将该目标图像组包括的作为该描述语句对应的第一情感信息。
6.根据权利要求5所述图像配文方法,其特征在于,对于若干图像组中的任意两个图像组,两个图像组中的默认情感和/或预设描述语句不相同。
7.根据权利要求5所述图像配文方法,其特征在于,所述评价分数的确定过程具体包括:
对于每个图像组,通过所述语句预测模型确定该图像组中的待配文图像对应的图像特征、该图像组中的默认情感对应的情感特征以及该图像组中的预设描述语句对应的语句特征;通过所述语句预测模型、该图像特征、该情感特征及该语句特征,确定该图像组对应的评价分数。
8.根据权利要求7所述图像配文方法,其特征在于,所述语句预测模型包括特征提取模块、线性模块以及词特征提取模块,所述通过所述语句预测模型确定所述待配文图像对应的图像特征,该图像组中的默认情感对应的情感特征以及该图像组中的预设描述语句对应的语句特征具体包括:
将该图像组中的所述待配文图像输入所述特征提取模块,通过所述特征提取模块确定所述待配文图像对应的图像特征;
将该图像组中的默认情感输入所述线性模块,通过所述线性模块确定默认情感对应的情感特征;
将所述该图像组中的预设描述语句输入所述词特征提取模块,通过所述词特征提取模块确定预设描述语句对应的语句特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于TCL科技集团股份有限公司,未经TCL科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011568927.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:烹饪器具的控制方法及烹饪器具
- 下一篇:光刻装置及光刻方法
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序