[发明专利]虚拟人脸动画的生成方法及装置有效
申请号: | 201611248090.1 | 申请日: | 2016-12-29 |
公开(公告)号: | CN106653052B | 公开(公告)日: | 2020-10-16 |
发明(设计)人: | 李松南 | 申请(专利权)人: | TCL科技集团股份有限公司 |
主分类号: | G10L21/10 | 分类号: | G10L21/10;G10L13/08;G10L13/10;G10L15/25;G06T13/40 |
代理公司: | 深圳中一联合知识产权代理有限公司 44414 | 代理人: | 李艳丽 |
地址: | 516006 广东省惠州市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟 动画 生成 方法 装置 | ||
本发明适用于人工智能技术领域,提供了一种虚拟人脸动画的生成方法及装置,包括:将输入文本转化为语音信号;根据语音信号中静音帧的出现位置,对输入文本进行分句处理,得到多个短句;对于每个短句,生成虚拟人脸动画中的一个头部摆动动作;将每个短句映射成至少一个唇形;将每个短句对应的头部摆动动作与唇形融合,以生成每个短句对应的虚拟人脸动画。本发明基于文本与语音结合的方式来生成虚拟人脸动画,通过生成头部摆动动作以及唇形,并将二者融合,为用户提供了更接近现实的视觉感受,避免得到的虚拟人脸动画仅包含唇形信息,提高了虚拟人脸动画的真实性,且无需依赖昂贵、复杂的设备来实现,降低了成本,扩大了虚拟人脸动画的应用范围。
技术领域
本发明属于人工智能技术领域,尤其涉及一种虚拟人脸动画的生成方法及装置。
背景技术
随着人工智能技术的进步,虚拟个人助手如Apple Siri、Google Assistant、以及Microsoft Cortana等已逐步参与到人们的生活中。目前大多数的虚拟个人助手都只能单纯地使用语音与用户交流,而没有一个具体的视觉动画形象,因此,与真实世界中人与人之间的交流依然存在一定的区别。对于电视机、个人电脑、手机等可提供音视频输出的设备而言,创建一个看得见且听得着的虚拟个人助手将是人工智能技术发展的一个重要趋势。
现有的虚拟人脸动画主要基于语音识别技术或基于真实表演者模拟的方式来生成。基于语音识别技术的虚拟人脸动画生成方法大多只能生成与语音同步的嘴唇运动,真实度较低;基于真实表演者模拟的方式来生成的虚拟人脸动画,其需要真实表演者的介入,并且还需要提供昂贵、复杂的动作捕捉设备方可实现,因此,此种虚拟人脸动画的生成方法成本过高,从而导致其应用范围过于狭窄,难以推广使用。
综上,现有的虚拟人脸动画的生成方法存在真实度较低、成本过高以及应用范围过于狭窄的问题。
发明内容
本发明实施例提供一种虚拟人脸动画的生成方法及装置,旨在解决目前虚拟人脸动画的真实度较低、成本过高以及应用范围过于狭窄的问题。
本发明实施例是这样实现的,一种虚拟人脸动画的生成方法,包括:
将输入文本转化为语音信号;
根据所述语音信号中静音帧的出现位置,对所述输入文本进行分句处理,得到多个短句;
对于每个所述短句,生成虚拟人脸动画中的一个头部摆动动作;
将每个所述短句映射成至少一个唇形;
将每个所述短句对应的所述头部摆动动作与所述唇形融合,以生成每个所述短句对应的虚拟人脸动画。
本发明实施例的另一目的在于提供一种虚拟人脸动画的生成装置,包括:
第一获取单元,用于将输入文本转化为语音信号;
分句单元,用于根据所述语音信号中静音帧的出现位置,对所述输入文本进行分句处理,得到多个短句;
生成单元,用于对于每个所述短句,生成虚拟人脸动画中的一个头部摆动动作;
映射单元,用于将每个所述短句映射成至少一个唇形;
融合单元,用于将每个所述短句对应的所述头部摆动动作与所述唇形融合,以生成每个所述短句对应的虚拟人脸动画。
本发明实施例基于文本与语音结合的方式来生成虚拟人脸动画,根据输入文本中的每个短句,生成头部摆动动作以及唇形,为用户提供了更接近现实的视觉感官效果,避免了最后得到的虚拟人脸动画仅包含唇形信息,提高了虚拟人脸动画的真实性。此外,本发明实施例提供的虚拟人脸动画的生成方法无需依赖昂贵、复杂的设备来实现,从而降低了成本,扩大了虚拟人脸动画的应用范围,促进了人工智能技术的发展。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于TCL科技集团股份有限公司,未经TCL科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611248090.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种视频聋哑模式的方法及装置
- 下一篇:生成语音动画的方法和装置