[发明专利]基于AR模型的交互方法、装置、设备和存储介质有效
申请号: | 201910576731.3 | 申请日: | 2019-06-28 |
公开(公告)号: | CN110321008B | 公开(公告)日: | 2023-10-24 |
发明(设计)人: | 庞文杰 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06V20/40;G06V40/20 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 朱颖;臧建明 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 ar 模型 交互 方法 装置 设备 存储 介质 | ||
本申请提供一种基于AR模型的交互方法、装置、设备和存储介质,其中,该方法,包括:获取视频流,并识别视频流中的对象的关键点和关键点运动信息;根据关键点与AR模型的动作点之间的对应关系,确定与关键点对应的动作点;根据关键点运动信息,控制AR模型的动作点进行动作,以控制AR模型进行动作。不需要额外动作捕捉设备,就可以实现用户与终端设备上的AR模型之间的交互,完成AR模型的动作,可以降低成本;并且,由于将视频流中的对象的关键点与AR模型的动作点之间,建立了对应关系,可以依据该对应关系,控制AR模型的动作点做出各种相应的动作;提升了AR模型的动作多样性。
技术领域
本申请实施例涉及终端技术领域,尤其涉及一种基于AR模型的交互方法、装置、设备和存储介质。
背景技术
随着智能技术的发展,增强现实技术(Augmented Reality,简称AR)模型开始出现和发展。AR模型可以根据用户的需求,呈现出各种动作。目前,提供了动作捕捉设备,可以将动作捕捉设备与用户的身体连接,进而动作捕捉设备将用户的动作传递给终端设备;终端设备根据接收到的信息,控制AR模型进行运动。
现有技术中,在用户与终端设备之间进行交互,以实现AR模型的动作的情况下,也可以采用现有的动作捕捉设备,捕捉用户的动作,以赋予AR模型的动作。
然而现有技术中,采用现有的动作捕捉设备,捕捉用户的动作,以赋予AR模型动作,这样的方式,需要昂贵的动作捕捉设备。在用户使用终端设备时,对于用户与终端设备之间交互以完成AR模型的动作来说,现有技术的方式还需要额外的动作捕捉设备,不便于用户与终端设备之间的交互,无法及时的完成AR模型的动作,并且成本较高。
发明内容
本申请实施例提供一种基于AR模型的交互方法、装置、设备和存储介质,用于解决现有技术中还需要额外的动作捕捉设备,不便于用户与终端设备之间的交互,无法及时的完成AR模型的动作,并且成本较高的问题。
本申请第一方面提供一种基于AR模型的交互方法,所述方法应用于终端设备,所述方法,包括:
获取视频流,并识别所述视频流中的对象的关键点和关键点运动信息;
根据所述关键点与AR模型的动作点之间的对应关系,确定与所述关键点对应的动作点;
根据所述关键点运动信息,控制所述AR模型的动作点进行动作,以控制所述AR模型进行动作。
进一步地,根据所述关键点运动信息,控制所述AR模型的动作点进行动作,包括:
根据各所述关键点,确定不同的关键点之间的连动关系;
根据所述连动关系和各所述关键点的关键点运动信息,控制与各所述关键点对应的各动作点进行动作。
进一步地,根据各所述关键点,确定不同的关键点之间的连动关系,包括:
根据预设的数据库,其中,所述数据库中包括多个连动关系,所述多个连动关系中的每一个连动关系为至少两个关键点之间的关系,查询各所述关键点所对应的连动关系。
进一步地,每一所述关键点为手指上的一预设点;
每一所述连动关系为同一手指上的各预设点之间连动关系,或者,每一所述连动关系为不同手指之间的连动关系。
进一步地,每一所述关键点为面部器官上的一预设点;
每一所述连动关系为同一面部器官上的各预设点之间连动关系,或者,每一所述连动关系为不同面部器官之间的连动关系。
进一步地,根据所述关键点运动信息,控制所述AR模型的动作点进行动作,包括:
根据所述关键点运动信息,确定各所述关键点之间的连动关系;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910576731.3/2.html,转载请声明来源钻瓜专利网。