[发明专利]场景显示方法及装置、电子设备、车辆、可读存储介质在审
申请号: | 202110777817.X | 申请日: | 2021-07-09 |
公开(公告)号: | CN113487744A | 公开(公告)日: | 2021-10-08 |
发明(设计)人: | 孙红亮;王子彬;李炳泽;朱赟 | 申请(专利权)人: | 浙江商汤科技开发有限公司 |
主分类号: | G06T19/00 | 分类号: | G06T19/00;G06K9/00;G06K9/62 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 何倚雯 |
地址: | 311215 浙江省杭州市萧*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 场景 显示 方法 装置 电子设备 车辆 可读 存储 介质 | ||
1.一种场景显示方法,其特征在于,所述方法包括:
响应于车辆行驶中,获取图像采集设备实时拍摄的当前帧的现实场景图像;
对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物;
基于所述目标物确定目标显示特效;
将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据;
将所述增强现实数据通过车载显示组件进行显示。
2.根据权利要求1所述的场景显示方法,其特征在于,所述基于所述目标物确定目标显示特效,包括:
获取到所述目标物的各部分的拆分特效;
所述将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据,包括:
将所述目标物的所述各部分的拆分特效分别添加到所述现实场景中所述各部分的对应位置,生成所述目标物与所述目标物的各部分的拆分特效相叠加的增强现实数据。
3.根据权利要求2所述的场景显示方法,其特征在于,所述将所述目标物各部分的拆分特效分别添加到所述现实场景中所述各部分的对应位置,生成所述目标物与所述目标物的各部分的拆分特效相叠加的增强现实数据,还包括:
依次对所述目标物的各部分的拆分特效进行语音讲解。
4.根据权利要求1所述的场景显示方法,其特征在于,所述对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物,包括:
利用目标识别网络对获取的所述现实场景图像进行语义识别,识别出所述目标物;其中,所述目标识别网络是利用神经网络训练得到的。
5.根据权利要求1所述的场景显示方法,其特征在于,所述对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物,包括:
响应于识别出多个目标,按照预设规则从所述多个目标中确定一个作为所述目标物。
6.根据权利要求5所述的场景显示方法,其特征在于,所述响应于识别出多个目标,按照预设规则从所述多个目标中确定一个作为所述目标物,包括:
响应于识别出多个目标,将面积最大的目标、知名度最高的目标、预先设定的目标或者接收用户选择指令确定的目标中的一种或多种作为所述目标物。
7.根据权利要求1~6任一项所述的场景显示方法,其特征在于,
所述获取图像采集设备实时拍摄的当前帧的现实场景图像,包括:
利用AR车的图像采集设备实时拍摄的当前帧的所述现实场景图像;和/或,
所述对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物,包括:
利用所述AR车连接的云端服务器对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物;和/或
所述基于所述目标物确定目标显示特效,包括:
通过所述云端服务器确定所述目标显示特效;和/或
所述将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据,包括:
通过所述云端服务器将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据;和/或
所述将所述增强现实数据通过车载显示组件进行显示,包括:
将所述增强现实数据回传到所述AR车的车载显示屏进行显示。
8.一种场景显示装置,其特征在于,包括:
获取模块,所述获取模块用于响应于车辆行驶中,获取图像采集设备实时拍摄的当前帧的现实场景图像;
识别模块,所述识别模块用于对所述现实场景图像进行语义识别,以识别出所述现实场景图像中的目标物;
确定模块,所述确定模块用于基于所述目标物确定目标显示特效;
生成模块,所述生成模块用于将所述目标显示特效添加到所述现实场景图像中,生成所述目标物与所述目标显示特效相叠加的增强现实数据;
显示模块,所述显示模块用于将所述增强现实数据通过车载显示组件进行显示。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江商汤科技开发有限公司,未经浙江商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110777817.X/1.html,转载请声明来源钻瓜专利网。