[发明专利]待交互对象的交互方法、智能终端、电子设备及存储介质在审
申请号: | 202210880397.2 | 申请日: | 2022-07-25 |
公开(公告)号: | CN115203450A | 公开(公告)日: | 2022-10-18 |
发明(设计)人: | 马骞女;揭志伟;孙红亮;王子彬 | 申请(专利权)人: | 上海商汤智能科技有限公司 |
主分类号: | G06F16/535 | 分类号: | G06F16/535;G06F16/538;G06F16/54;G06F16/583 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 张祺浩 |
地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 交互 对象 方法 智能 终端 电子设备 存储 介质 | ||
1.一种待交互对象的交互方法,其特征在于,所述方法包括:
获取用户对当前场景内的待交互对象进行拍摄所形成的图像;
获取从所述图像中提取出的第一文字序列;
从数据库中获取所述待交互对象在当前拍摄角度下所对应的第二文字序列;
将所述第二文字序列中的文字与所述第一文字序列中的文字进行匹配,以获得匹配结果;
向所述用户呈现所述匹配结果。
2.根据权利要求1所述的方法,其特征在于,所述获取从所述图像中提取出的第一文字序列包括:
基于对所述图像进行场景识别,并根据识别到的场景信息和所述图像的图像信息提取出所述图像中对应的第一文字序列,获取所述第一文字序列;或者
基于已训练的文字识别模型对所述图像进行文字识别,并提取出所述图像中识别的第一文字序列,获取所述第一文字序列。
3.根据权利要求1所述的方法,其特征在于,所述将所述第二文字序列中的文字与所述第一文字序列中的文字进行匹配,以获得匹配结果包括:
对所述第二文字序列中文字的字数与所述第一文字序列中文字的字数进行匹配;
响应于字数匹配相同,按照预设的排列顺序将所述第二文字序列中文字与所述第一文字序列中的文字进行逐一匹配;
响应于字数匹配不相同,将所述第一文字序列中的文字所在区域的图像特征与所述第二文字序列中的文字所关联的图像特征进行匹配。
4.根据权利要求1所述的方法,其特征在于,所述从数据库中获取所述待交互对象在当前拍摄角度下所对应的第二文字序列包括:
从所述数据库中获取基于所述图像所确定的所述待交互对象的三维模型;其中,所述三维模型关联有与观察角度相关的第二文字序列,不同所述观察角度下的第二文字序列不同;
获取所述当前拍摄角度所对应的所述三维模型的观察角度所关联的第二文字序列,并作为所述当前拍摄角度下所对应的第二文字序列。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
对所述图像进行场景识别,并基于识别到的场景信息确定所述待交互对象的当前拍摄角度;或者
从所述图像中识别出所述待交互对象,将识别出的所述待交互对象与不同观察角度下的所述三维模型进行匹配,并将匹配到的观察角度作为所述当前拍摄角度。
6.根据权利要求1所述的方法,其特征在于,所述图像为视频图像;所述向所述用户呈现所述匹配结果包括:
根据所述视频图像的当前拍摄角度的变化,向所述用户呈现对应于所述当前拍摄角度变化的匹配结果。
7.根据权利要求1所述的方法,其特征在于,所述向所述用户呈现所述匹配结果包括:
将所述匹配结果对应的第二文字序列叠加到所述图像中;其中,在所述图像中的所述第一文字序列的每个文字附近的预定位置叠加所匹配到的第二文字序列中的文字;
向所述用户呈现叠加所述第二文字序列后的所述图像。
8.根据权利要求7所述的方法,其特征在于,所述向所述用户呈现所述匹配结果包括:
在所述图像中叠加显示关于所述第一文字序列的注释信息。
9.一种智能终端,其特征在于,所述智能终端包括:
图像获取模块,用于获取用户对当前场景内的待交互对象进行拍摄所形成的图像;
文字序列获取模块,用于获取从所述图像中提取出的第一文字序列,以及从数据库中获取所述待交互对象在当前拍摄角度下所对应的第二文字序列;
文字序列匹配模块,用于将所述第二文字序列中的文字与所述第一文字序列中的文字进行匹配,以获得匹配结果;
结果呈现模块,用于向所述用户呈现所述匹配结果。
10.一种电子设备,其特征在于,所述电子设备包括处理器以及与所述处理器连接的存储器,其中,所述存储器中存储有程序数据,所述处理器调取所述存储器存储的所述程序数据,以执行如权利要求1-8任意一项所述的待交互对象的交互方法。
11.一种计算机可读存储介质,内部存储有程序指令,其特征在于,所述程序指令被执行以实现如权利要求1-8任意一项所述的待交互对象的交互方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤智能科技有限公司,未经上海商汤智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210880397.2/1.html,转载请声明来源钻瓜专利网。