[发明专利]一种基于图片的文本生成方法及装置有效
申请号: | 202010389908.1 | 申请日: | 2020-05-11 |
公开(公告)号: | CN111310867B | 公开(公告)日: | 2020-09-01 |
发明(设计)人: | 李长亮;樊骏锋;汪美玲 | 申请(专利权)人: | 北京金山数字娱乐科技有限公司 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06T11/60;G06F16/55;G06N3/04 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 王治东 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 图片 文本 生成 方法 装置 | ||
本申请提一种基于图片的文本生成方法及装置,其中,所述方法包括:确定至少一个目标垂直领域,根据待编辑图片对应所属的目标垂直领域获取所述待编辑图片对应的图片内容信息和所述待编辑图片对应的图片分类信息;根据所述待编辑图片对应的图片内容信息和所述待编辑图片对应的图片分类信息,生成所述待编辑图片对应的图片准确信息;根据所述待编辑图片对应的图片准确信息,通过本申请所述的文本生成模型生成所述待编辑图片对应的图片编辑文本。本申请通过针对目标垂直领域获取待编辑图片对应的图片准确信息,结合目标垂直领域编辑出具有专业性参考价值的图片编辑文本,从而辅助用户高效且准确的完成所在领域的专业文档编辑撰写工作。
技术领域
本申请涉及人工智能技术领域,特别涉及一种基于图片的文本生成方法、装置、计算设备及计算机可读存储介质。
背景技术
用户在进行写作等文章创作工作时,例如新闻类写作,需要将现场拍摄的图片信息转换为文字,该过程对用户在观察能力和先验知识要求较高,如果不能够准确识别图片中图片信息,就会出现用户对于图片的认识错误,并且会影响文章表述的准确性和写作效率。在现有技术中,将图片信息转换为文字的主要方式包括人工描述和开放域的图片识别及文字转换,其中,人工描述是指用户通过观察图片从而对图片内容进行人工编辑,开放域的图片识别及文字转换是指通过对图片进行目标检测,将图片中内容罗列供用户使用,然而,现有技术存在的问题在于,对于人工描述需要要求用户具有大量的专业知识,准确性难以保证,而开放域的图片识别及文字转换仅仅是将目标进行简单罗列,无法针对某个垂直领域,返回准确的图片信息,同时由于返回的文本内容为图片中目标名称的简单罗列,无法供用户直接使用且效率较低。
发明内容
有鉴于此,本申请实施例提供了一种基于图片的文本生成方法、装置、计算设备及计算机可读存储介质,以解决现有技术中存在的技术缺陷。
根据本说明书实施例的第一方面,提供了一种基于图片的文本生成方法,包括:
确定至少一个目标垂直领域,根据待编辑图片对应所属的目标垂直领域获取所述待编辑图片对应的图片内容信息和所述待编辑图片对应的图片分类信息;
根据所述待编辑图片对应的图片内容信息和所述待编辑图片对应的图片分类信息,生成所述待编辑图片对应的图片准确信息;
根据所述待编辑图片对应的图片准确信息,通过训练得到的文本生成模型生成所述待编辑图片对应的图片编辑文本。
根据本说明书实施例的第二方面,提供了一种基于图片的文本生成方法,包括:
确定至少一个目标垂直领域,根据待编辑图片对应所属的目标垂直领域获取所述待编辑图片对应的图片内容信息和所述待编辑图片对应的图片分类信息;
根据所述待编辑图片对应的图片内容信息和所述待编辑图片对应的图片分类信息,生成所述待编辑图片对应的图片准确信息;
根据所述待编辑图片对应的图片准确信息,通过预设的中文模板库生成所述待编辑图片对应的图片编辑文本。
根据本说明书实施例的第三层方面,提供了一种基于图片的文本生成装置,包括:
第三信息获取模块,被配置为确定至少一个目标垂直领域,根据待编辑图片对应所属的目标垂直领域获取所述待编辑图片对应的图片内容信息和所述待编辑图片对应的图片分类信息;
第二准确信息构建模块,被配置为根据所述待编辑图片对应的图片内容信息和所述待编辑图片对应的图片分类信息,生成所述待编辑图片对应的图片准确信息
第一文本生成模块,被配置为根据所述待编辑图片对应的图片准确信息,通过训练得到的文本生成模型生成所述待编辑图片对应的图片编辑文本。
根据本说明书实施例的第四方面,提供了一种基于图片的文本生成装置,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山数字娱乐科技有限公司,未经北京金山数字娱乐科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010389908.1/2.html,转载请声明来源钻瓜专利网。