[发明专利]图像处理装置和方法在审
申请号: | 201710913272.4 | 申请日: | 2017-09-29 |
公开(公告)号: | CN109584864A | 公开(公告)日: | 2019-04-05 |
发明(设计)人: | 不公告发明人 | 申请(专利权)人: | 上海寒武纪信息科技有限公司 |
主分类号: | G10L15/22 | 分类号: | G10L15/22;G10L15/26;G06K9/62 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 200120 上海市浦*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 目标区域 图像处理指令 图像处理装置 目标图像处理 待处理图像 图像处理器 语音采集器 指令转换器 处理区域 处理软件 目标语音 输入语音 图像处理 学习图像 用户体验 语音信号 指令转换 采集 图像 转换 | ||
1.一种图像处理装置,其特征在于,包括:
语音采集器,用于采集用户输入的语音信号;
指令转换器,用于根据目标语音指令转换模型将所述语音信号转换成图像处理指令和目标区域,所述目标区域为待处理图像的处理区域;
图像处理器,用于根据所述图像处理指令和目标图像处理模型对所述标区域进行处理。
2.根据权利要求1所述的图像处理装置,其特征在于,所述指令转换器包括:
第一语音识别器,用于将语音信号通过所述语音识别技术转换成文本信息;
语音文本转换器,用于将文本信息通过自然语言处理技术和所述目标语音指令转换模型转换成所述图像处理指令;
第一图像识别器,用于根据所述图像处理指令中的语义区域的粒度和图像识别技术对所述待处理图像进行区域划分,获取所述目标区域。
3.根据权利要求1所述的图像处理装置,其特征在于,所述指令转换器包括:
第二语音识别器,用于将所述语音信号通过所述语音识别技术、语义理解技术和所述目标语音指令转换模型转换成所述图像处理指令;
第二图像识别器,用于根据所述图像处理指令中的语义区域的粒度和图像识别技术对所述待处理图像进行区域划分,获取所述目标区域。
4.根据权利要求1-3任一项所述的图像处理装置,其特征在于,所述图像处理装置还包括:
存储器,用于存储所述文本信息或者所述图像处理指令或者所述目标区域。
5.根据权利要求4所述的图像处理装置,其特征在于,所述图像处理器包括:
取指令模块,用于在预设时间窗口内从所述存储器中获取M条图像处理指令;
处理模块,用于根据所述M条图像处理指令和所述目标图像处理模型对所述目标区域进行处理。
6.根据权利要求5所述的图像处理装置,其特征在于,所述处理模块用于:
删除所述M条图像处理指令中功能相同的图像处理指令,得到N条图像处理指令,所述M为大于1的整数,所述N为小于所述M的整数;
根据所述N条图像处理指令和所述目标图像处理模型对所述目标区域进行处理。
7.根据权利要求1的图像处理装置,其特征在于,所述指令转换器用于:
对语音指令转换模型进行自适应训练,以得到所述目标语音指令转换模型。
8.根据权利要求7所述的图像处理装置,其特征在于,所述指令转换器对所述语音指令转换模型进行自适应训练是离线进行的或者是在线进行的。
9.根据权利要求7或8所述的图像处理装置,其特征在于,所述指令转换器对所述语音指令转换模型进行自适应训练是有监督的或者是无监督的。
10.根据权利要求7所述的图像处理装置,其特征在于,所述指令转换器还用于:
根据所述语音指令转换模型将所述语音信号换成预测指令;
确定所述预测指令与其对应的指令集合的相关系数;
根据所述预测指令与其对应的指令集合的相关系数优化所述语音指令转换模型,以得到所述目标语音指令转换模型。
11.根据权利要求1所述的图像处理装置,其特征在于,所述图像处理装置还包括:
训练器,用于根据所述语音指令转换模型将所述语音信号换成预测指令;确定所述预测指令与其对应的指令集合的相关系数;根据所述预测指令与其对应的指令集合的相关系数优化所述语音指令转换模型,以得到所述目标语音指令转换模型。
12.根据权利要求1所述的图像处理装置,其特征在于,所述图像处理器用于:
对图像处理模型进行自适应训练,以得到所述目标图像处理模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海寒武纪信息科技有限公司,未经上海寒武纪信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710913272.4/1.html,转载请声明来源钻瓜专利网。