[发明专利]虚拟对象的驱动方法、装置、可读介质及电子设备在审
申请号: | 202310118642.0 | 申请日: | 2023-01-31 |
公开(公告)号: | CN116110398A | 公开(公告)日: | 2023-05-12 |
发明(设计)人: | 毕成;马泽君 | 申请(专利权)人: | 北京有竹居网络技术有限公司 |
主分类号: | G10L15/25 | 分类号: | G10L15/25;G06F18/23 |
代理公司: | 北京英创嘉友知识产权代理事务所(普通合伙) 11447 | 代理人: | 贺晓蕾 |
地址: | 101299 北京市平谷区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 对象 驱动 方法 装置 可读 介质 电子设备 | ||
本公开涉及一种虚拟对象的驱动方法、装置、可读介质及电子设备,可以获取目标虚拟对象对应的目标音频;针对所述目标音频对应的每个国际音标IPA,根据预先建立的IPA聚类簇确定所述IPA对应的目标唇形参数;所述IPA聚类簇包括多个IPA集合,每个IPA集合包括至少一个IPA,同一IPA集合中的IPA对应的唇形参数相同;根据每个所述IPA分别对应的所述目标唇形参数对所述目标虚拟对象进行唇形驱动。
技术领域
本公开涉及对虚拟对象的控制领域,具体地,涉及一种虚拟对象的驱动方法、装置、可读介质及电子设备。
背景技术
随着用户对品质细节的要求越来越高,对于一些虚拟对象的表情和口型的灵活、生动、自然表达也十分关注,因此,选用合适的虚拟对象的驱动方式显得尤为重要。
相关技术中在对3D虚拟对象中的唇形进行驱动时,通常采用规则描述“文本信息--唇形变化曲线”的映射关系,其中,文本信息通常是音素序列和时长序列,但音素到唇形变化本身的动态变化比较复杂,因此,规则描述无法覆盖全部的唇形变化,这会导致唇形的变化在观感上存在不自然的问题,影响用户的视觉体验。
发明内容
提供该部分内容以便以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。该部分内容并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
第一方面,本公开提供一种虚拟对象的驱动方法,所述方法包括:
获取目标虚拟对象对应的目标音频;
针对所述目标音频对应的每个IPA(International Phonetic Alphabet,国际音标),根据预先建立的IPA聚类簇确定所述IPA对应的目标唇形参数;所述IPA聚类簇包括多个IPA集合,每个IPA集合包括至少一个IPA,同一IPA集合中的IPA对应的唇形参数相同;
根据每个所述IPA分别对应的所述目标唇形参数对所述目标虚拟对象进行唇形驱动。
第二方面,本公开提供一种虚拟对象的驱动装置,所述装置包括:
获取模块,用于获取目标虚拟对象对应的目标音频;
确定模块,用于针对所述目标音频对应的每个国际音标IPA,根据预先建立的IPA聚类簇确定所述IPA对应的目标唇形参数;所述IPA聚类簇包括多个IPA集合,每个IPA集合包括至少一个IPA,同一IPA集合中的IPA对应的唇形参数相同;
驱动模块,用于根据每个所述IPA分别对应的所述目标唇形参数对所述目标虚拟对象进行唇形驱动。
第三方面,提供一种计算机可读介质,其上存储有计算机程序,该程序被处理装置执行时实现本公开第一方面所述方法的步骤。
第四方面,提供一种电子设备,包括:
存储装置,其上存储有至少一个计算机程序;
至少一个处理装置,用于执行所述存储装置中的所述至少一个计算机程序,以实现本公开第一方面所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京有竹居网络技术有限公司,未经北京有竹居网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310118642.0/2.html,转载请声明来源钻瓜专利网。