[发明专利]图像描述模型中奖赏及图像描述模型的构建方法

摘要

本发明涉及图像描述技术领域，具体涉及图像描述模型中奖赏及图像描述模型的构建方法，其中奖赏的构建方法包括：获取测试图像的标签描述以及预设图像描述模型基于测试图像的生成描述；基于标签描述以及生成描述，计算生成描述中n元组的奖赏；比较n元组的奖赏与第一阈值的大小关系以及n元组中每个单词的奖赏与第二阈值的大小关系，以筛选出生成描述中的奖赏待提升的单词；根据标签描述以及与奖赏待提升的单词对应的n元组的奖赏，计算奖赏待提升的单词的奖赏。通过对不太频繁出现的单词给予更高的奖励来实现其约束，可以很好地解决不均匀的单词分布问题，并有助于捕捉图像的更具体的视觉细节，以提高图像描述的准确性。

主权项

1.一种图像描述模型中奖赏的构建方法，其特征在于，包括：获取测试图像的标签描述以及预设图像描述模型基于所述测试图像的生成描述；基于所述标签描述以及所述生成描述，计算所述生成描述中n元组的奖赏；比较所述n元组的奖赏与第一阈值的大小关系以及所述n元组中每个单词的奖赏与第二阈值的大小关系，以筛选出所述生成描述中的奖赏待提升的单词；根据所述标签描述以及与所述奖赏待提升的单词对应的所述n元组的奖赏，计算所述奖赏待提升的单词的奖赏，以更新所述生成描述中每个单词的奖赏。