[发明专利]图像内容提取方法、装置及电子设备

权利要求书

1.一种图像内容提取方法，其特征在于，所述方法包括：

分别对各图像进行内容识别，得到各图像分别对应的识别结果；

分别对各所述识别结果进行命名实体识别，得到各所述识别结果分别对应的知识图谱，其中，所述知识图谱包括：图像标识、命名实体以及内容位置标识之间的对应关系，每个所述图像标识对应一个图像；

从所述命名实体中提取关键词；

依据所述关键词，分别从各所述知识图谱中查找目标对应关系；

分别依据各所述目标对应关系，从各所述识别结果中提取目标片段；

将各所述目标片段拼接成目标文档。

2.根据权利要求1所述的方法，其特征在于，所述分别对各图像进行内容识别，得到各图像分别对应的识别结果的步骤，包括：

针对每个所述图像，依据用户对所述图像的第一输入，确定所述图像中的目标区域；

对所述图像中的目标区域进行内容识别，得到所述图像对应的识别结果。

3.根据权利要求1所述的方法，其特征在于，所述依据所述关键词，分别从各所述知识图谱中查找目标对应关系的步骤，包括：

针对每个所述知识图谱，查找所述知识图谱中与所述关键词匹配的目标命名实体；

将所述目标命名实体关联的对应关系，确定为目标对应关系。

4.根据权利要求1所述的方法，其特征在于，所述分别依据各所述目标对应关系，从各所述识别结果中提取目标片段的步骤，包括：

针对每个所述目标对应关系，查找所述目标对应关系关联的目标图像标识，其中，每个所述目标图像标识对应一个目标图像；

依据所述目标对应关系中的所述内容位置标识，确定目标片段在所述目标图像中的位置；

基于所述位置，从所述目标图像对应的识别结果中提取目标片段。

5.一种图像内容提取装置，其特征在于，所述装置包括：

第一识别模块，用于分别对各图像进行内容识别，得到各图像分别对应的识别结果；

第二识别模块，用于分别对各所述识别结果进行命名实体识别，得到各所述识别结果分别对应的知识图谱，其中，所述知识图谱包括：图像标识、命名实体以及内容位置标识之间的对应关系，每个所述图像标识对应一个图像；

第一提取模块，用于从所述命名实体中提取关键词；

查找模块，用于依据所述关键词，分别从各所述知识图谱中查找目标对应关系；

第二提取模块，用于分别依据各所述目标对应关系，从各所述识别结果中提取目标片段；

第一拼接模块，用于将各所述目标片段拼接成目标文档。

6.根据权利要求5所述的装置，其特征在于，所述第一识别模块包括：

第一子模块，用于针对每个所述图像，依据用户对所述图像的第一输入，确定所述图像中的目标区域；

第二子模块，用于对所述图像中的目标区域进行内容识别，得到所述图像对应的识别结果。

7.根据权利要求5所述的装置，其特征在于，所述查找模块包括：

第三子模块，用于针对每个所述知识图谱，查找所述知识图谱中与所述关键词匹配的目标命名实体；

第四子模块，用于将所述目标命名实体关联的对应关系，确定为目标对应关系。

8.根据权利要求5所述的装置，其特征在于，所述第二提取模块包括：

第五子模块，用于针对每个所述目标对应关系，查找所述目标对应关系关联的目标图像标识，其中，每个所述目标图像标识对应一个目标图像；

第六子模块，用于依据所述目标对应关系中的所述内容位置标识，确定目标片段在所述目标图像中的位置；

第七子模块，用于基于所述位置，从所述目标图像对应的识别结果中提取目标片段。

9.一种电子设备，其特征在于，包括处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-4任一项所述的图像内容提取方法的步骤。

10.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-4任一项所述的图像内容提取方法的步骤。