[发明专利]图像内容提取方法、装置及电子设备

说明书

本申请公开了图像内容提取方法、装置及电子设备，属于通信技术领域，该方法包括：分别对各图像进行内容识别，得到各图像分别对应的识别结果；分别对各识别结果进行命名实体识别，得到各识别结果分别对应的知识图谱,知识图谱包括：图像标识、命名实体以及内容位置标识之间的对应关系；从命名实体中提取关键词；依据关键词，分别从各知识图谱中查找目标对应关系；分别依据各目标对应关系，从各识别结果中提取目标片段；将各目标片段拼接成目标文档。本申请可自动从各图像对应的识别结果中查找出关键词对应的目标片段，并对目标片段进行拼接得到目标文档，无需用户手动逐个查看图像查找目标片段，对目标片段进行编辑等统筹管理操作，操作便捷。

技术领域

本发明实施例涉及通信技术领域，尤其涉及一种图像内容提取方法、装置及电子设备。

背景技术

随着电子设备普及，越来越多的用户在学习、阅读、会议时都通过电子设备拍照，通过所拍摄的图像记录内容，所拍摄的图像存储至本地相册中。在具体使用过程中，用户可能通过电子设备对纸质或电子化的书籍、试卷、讲义、幻灯片等进行拍摄，所拍摄的图像上含有大量知识文档信息，文档中包括中英文文字、数学物理公式、化学符号、表格及其它各类图表信息。

目前从所拍摄的大量图像中查找特定信息时，需要逐张打开图像进行查看，查找效率低。当需要对多张图像中存在特定信息进行统筹管理时，需分别对包含特定信息的各图像进行截图、拼接等编辑处理，操作繁琐。

发明内容

本申请实施例的目的是提供一种图像内容提取方法、装置及电子设备，能够解决现有技术中存在的从图像中查找特定信息效率低、对所查找的内容进行统筹管理时操作繁琐的问题。

为了解决上述技术问题，本发明是这样实现的：

第一方面，本申请实施例提供了一种图像内容提取方法，其中，所述方法包括：分别对各图像进行内容识别，得到各图像分别对应的识别结果；分别对各所述识别结果进行命名实体识别，得到各所述识别结果分别对应的知识图谱，其中，所述知识图谱包括：图像标识、命名实体以及内容位置标识之间的对应关系，每个所述图像标识对应一个所述图像；从所述命名实体中提取关键词；依据关键词，分别从各所述知识图谱中查找目标对应关系；分别依据各所述目标对应关系，从各所述识别结果中提取目标片段；将各所述目标片段拼接成目标文档。

第二方面，本申请实施例提供了一种图像内容提取装置，其中，所述装置包括：第一识别模块，用于分别对各图像进行内容识别，得到各图像分别对应的识别结果；第二识别模块，用于分别对所述各识别结果进行命名实体识别，得到各所述识别结果分别对应的知识图谱，其中，所述知识图谱包括：图像标识、命名实体以及内容位置标识之间的对应关系，每个所述图像图标对应一个所述图像；第一提取模块，用于从所述命名实体中提取关键词；查找模块，用于依据所述关键词，分别从各所述知识图谱中查找目标对应关系；第二提取模块，用于分别依据各所述目标对应关系，从各所述识别结果中提取目标片段；第一拼接模块，用于将各所述目标片段拼接成目标文档。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。

第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。

第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。