[发明专利]多媒体数据描述模型的训练方法和描述信息的生成方法

摘要

本申请提供了多媒体数据描述模型的训练方法和描述信息的生成方法，该模型包括依次级联的编码模块和解码模块，解码模块包括至少一个解码器，该训练方法包括：获取训练数据集；基于训练数据集对模型进行训练，直至模型的总损失函数收敛；总损失函数包括第一损失函数，训练时，对于训练数据集中的每一样本多媒体数据，将该样本多媒体数据输入至编码模块中，得到编码特征，将编码特征分别输入至各解码器中，得到各解码器的第一解码结果；基于各样本多媒体数据的各描述标注和对应于各解码器的第一解码结果，计算第一损失函数的值。基于本申请提供的方法，能够有效提高生成的多媒体数据的描述信息的准确性。