[发明专利]增强现实处理方法及装置、显示终端及计算机存储介质有效
申请号: | 201710340898.0 | 申请日: | 2017-05-15 |
公开(公告)号: | CN108875460B | 公开(公告)日: | 2023-06-20 |
发明(设计)人: | 庞英明;魏扼 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06T19/00 | 分类号: | G06T19/00;G06T19/20;G06T7/73;G06T5/50 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 张所明 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 增强 现实 处理 方法 装置 显示 终端 计算机 存储 介质 | ||
1.一种增强现实AR处理方法,其特征在于,应用于显示终端中,所述显示终端包括AR引擎、所述显示终端与网络平台数据传输的数据传输单元和与用于进行显示交互的UI单元,包括:
通过应用打开摄像头,使得视频流由所述UI单元导入所述数据传输单元;
基于所述视频流,显示视频;
通过所述数据传输单元提取所述视频流中至少部分图像的特征点,根据所述特征点的数目和所述特征点的分布,计算各个子区域特征点的分布密度,当一个图像中存在预设数量个子区域的分布密度大于密度阈值时,确定所述图像为满足预设清晰条件的待识别图像,其中,所述特征点为第一灰度值的第一像素点,所述第一灰度值与所述第一像素点邻近的第二像素点的第二灰度值的差异满足预设差异条件;
通过所述数据传输单元将所述待识别图像传给后台代理服务器;
其中,所述后台代理服务器用于接收所述待识别图像,并将所述待识别图像发送给云端识别服务器,所述云端识别服务器用于针对所述待识别图像进行图像泛化识别,以识别出所述待识别图像中目标对象的类别、位置和个数信息,并将识别结果传给所述后台代理服务器;所述后台代理服务器还用于将所述识别结果发送给咨询搜索中心服务器,所述咨询搜索中心服务器用于向所述后台代理服务器返回与所述识别结果对应的AR信息;所述后台代理服务器还用于将所述AR信息发送给所述数据传输单元;
通过所述数据传输单元将所述AR信息发送给所述AR引擎;
通过所述AR引擎定位所述视频流中的前一图像帧中所述目标对象的第一位置参数;以所述第一位置参数在所述视频的当前图像帧对应的边缘位置,向外扩展预设个像素,作为搜索区域;通过将所述搜索区域与所述前一图像帧中目标对象的图像匹配,定位出所述目标对象在所述当前图像帧中的第二位置参数;
通过所述AR引擎接收到所述AR信息时,将所述第二位置参数传给所述数据传输单元;
通过所述数据传输单元更新所述目标对象的位置信息,并将所述AR信息和所述第二位置参数传送给所述UI单元;
通过所述UI单元根据所述第二位置参数,将所述AR信息叠加显示在所述当前图像帧中,所述AR信息邻近对应的目标对象进行显示。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于在前一图像帧对所述目标对象的跟踪,确定所述目标对象在当前帧中的基准点,其中,所述基准点为表征所述目标对象在前一图像帧的显示位置的像素点;
确定在当前图像帧的各个特征点相对于所述基准点的偏移向量;
基于所述偏移向量,确定各个所述特征点相对于所述基准点的均值偏移向量,其中,所述均值偏移向量包括:均值偏移方向和均值偏移量;
基于所述基准点及所述均值偏移向量,定位所述目标对象对应的目标点;其中,所述目标点为下一图像帧的基准点,且与所述第二位置参数相对应。
3.根据权利要求1所述的方法,其特征在于,
所述目标对象为显示在所述待识别图像的焦点区域内的图形对象。
4.根据权利要求1所述的方法,其特征在于,
所述方法还包括:
在获取所述AR信息的过程中,在所述视频的画面上显示获取提示,其中,所述获取提示,用于提示当前正在获取所述AR信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710340898.0/1.html,转载请声明来源钻瓜专利网。