[发明专利]一种增强现实AR特效生成方法、装置及设备在审
申请号: | 202010523888.2 | 申请日: | 2020-06-10 |
公开(公告)号: | CN111652983A | 公开(公告)日: | 2020-09-11 |
发明(设计)人: | 王子彬;孙红亮;李炳泽 | 申请(专利权)人: | 上海商汤智能科技有限公司 |
主分类号: | G06T19/00 | 分类号: | G06T19/00;G06K9/00 |
代理公司: | 北京中知法苑知识产权代理有限公司 11226 | 代理人: | 李明;赵吉阳 |
地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 增强 现实 ar 特效 生成 方法 装置 设备 | ||
1.一种增强现实AR特效生成方法,其特征在于,包括:
获取用户位于设定游乐场所内的多个用户图像;
针对所述多个用户图像进行骨骼特征点检测,确定所述用户的肢体姿态变化信息;
基于所述肢体姿态变化信息,确定与所述用户对应的AR场景中虚拟对象的AR展示特效,其中,在所述AR展示特效中所述虚拟对象的肢体姿态变化与所述多个用户图像中所述用户的肢体姿态变化相同;
根据所述虚拟对象的AR展示特效和所述多个用户图像,生成AR特效图像。
2.根据权利要求1所述的方法,其特征在于,针对所述多个用户图像进行骨骼特征点检测,确定所述用户的肢体姿态变化信息,包括:
识别所述用户的N个骨骼特征点在每个用户图像中的位置,其中,N为大于1的整数;
在所述N个骨骼特征点中,确定M个目标骨骼特征点在相邻两个用户图像中的位置变化信息,其中,M为大于1且小于N的整数;
将所述M个目标骨骼特征点在所述相邻两个用户图像中的位置变化信息,作为所述用户的肢体姿态变化信息;
所述基于所述肢体姿态变化信息,确定与所述用户对应的AR场景中虚拟对象的AR展示特效,包括:
在所述虚拟对象中,确定所述M个目标骨骼特征点对应的M个目标虚拟骨骼特征点;
根据所述位置变化信息,和确定的所述M个目标虚拟骨骼特征点,生成所述虚拟对象的AR展示特效,其中,在所述AR展示特效中,所述虚拟对象的所述M个目标虚拟骨骼特征点的位置发生变化。
3.根据权利要求2所述的方法,其特征在于,在获取所述多个用户图像之前,还包括:
获取所述用户位于所述设定游乐场所内的初始化用户图像;
在所述初始化用户图像中识别所述用户的N个骨骼特征点;
在所述虚拟对象中,确定所述N个骨骼特征点中每个骨骼特征点对应的虚拟骨骼特征点;
在所述虚拟对象中,确定所述M个目标骨骼特征点对应的M个目标虚拟骨骼特征点,包括:
在所述虚拟对象中,确定所述M个目标骨骼特征点中每个目标骨骼特征点对应的目标虚拟骨骼特征点。
4.根据权利要求3所述的方法,其特征在于,在所述虚拟对象中,确定所述N个骨骼特征点中每个骨骼特征点对应的虚拟骨骼特征点,包括:
在所述虚拟对象中的预设的P个虚拟骨骼特征点中,确定所述N个骨骼特征点中每个骨骼特征点对应的虚拟骨骼特征点,其中P为大于或等于N的整数;或者
在所述虚拟对象的初始化图像中,确定所述N个骨骼特征点中每个骨骼特征点对应的虚拟骨骼特征点。
5.根据权利要求2至4任一项所述的方法,其特征在于,识别所述用户的N个骨骼特征点在每个用户图像中的位置,包括:
基于肢体识别模型,对每个用户图像进行骨骼特征点识别,确定所述N个骨骼特征点在每个用户图像中的位置;
其中,所述肢体识别模型是根据多个肢体图像样本数据训练得到的;每个肢体图像样本数据包括:包含人体的图像样本以及该图像样本中多个骨骼特征点的位置。
6.根据权利要求2至5任一项所述的方法,其特征在于,根据所述位置变化信息,和确定的所述M个目标虚拟骨骼特征点,生成所述虚拟对象的AR展示特效,包括:
根据所述位置变化信息,确定每个目标骨骼特征点的位移;
根据所述每个目标骨骼特征点的位移,确定与该目标骨骼特征点对应的目标虚拟骨骼特征点的目标位移;
根据每个目标虚拟骨骼特征点的目标位移,生成所述虚拟对象的AR展示特效,其中,在所述AR展示特效中,所述虚拟对象的每个目标虚拟骨骼特征点发生相应的目标位移。
7.根据权利要求1至6任一项所述的方法,其特征在于,在生成所述AR特效图像之后,所述方法还包括:
控制AR设备展示所述AR特效图像;或者
控制AR设备展示所述AR特效图像对应的标识码,以便所述用户基于所述标识码获取所述AR特效图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤智能科技有限公司,未经上海商汤智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010523888.2/1.html,转载请声明来源钻瓜专利网。