[发明专利]基于语义驱动虚拟形象的实现方法、客户端和服务器在审
申请号: | 201811292531.7 | 申请日: | 2018-11-01 |
公开(公告)号: | CN109326151A | 公开(公告)日: | 2019-02-12 |
发明(设计)人: | 张丽丽 | 申请(专利权)人: | 北京智能优学科技有限公司 |
主分类号: | G09B5/06 | 分类号: | G09B5/06;G06K9/62 |
代理公司: | 北京卓唐知识产权代理有限公司 11541 | 代理人: | 唐海力;李志刚 |
地址: | 100000 北京市朝阳*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 虚拟形象 客户端 口型 音节特征 播放信息 语义驱动 播放 服务器 特征提取 虚拟效果 语义 体征 申请 匹配 肢体 表情 驱动 分析 进程 | ||
本申请公开了一种基于语义驱动虚拟形象的实现方法、客户端和服务器。所述方法包括:客户端对播放信息进行特征提取,得到播放信息的每个指定音节特征以及每个指定音节特征对应的播放时间;客户端匹配出对应每个指定音节特征的指定虚拟形象的口型特征;客户端在播放播放信息的进程中,基于每个指定音节特征的口型特征和播放时间,改变显示的指定虚拟形象的口型形状。本申请可以实现基于对信息进行语义体征提取分析,可以驱动虚拟形象的表情、口型和肢体等进行相应改变,进而解决了相关技术中虚拟形象拟人虚拟效果差的技术问题。
技术领域
本申请涉及数据应用技术领域,具体而言,涉及一种基于语义驱动虚拟形象的实现方法、客户端和服务器。
背景技术
随着英语教育的普及,家长对孩子接受英语教育的诉求也越来越强烈。目前应用教育还普遍存在价格高,老师质量参差不齐,上课不方便等缺点。
现有的英语授课方式,常见的有以下两种方式,例如:1.线下中教/外教课堂授课,学生定期到线下机构上课。这种方式普遍存在价格高,路程远,不够便捷。2.线上外教视频一对一,一对多教学。这种方式普遍存在网络状态差导致视频模糊或卡顿,时差原因导致外教老师状态不好,约课难。除此之外,两种方式都存在以下重要问题:1.不能随时随地学习。2.授课内容不能个性化。3.授课方式不能个性化。4.缺乏长期,持续的指导反馈。而采用远程3D虚拟形象代替老师进行教学时,3D虚拟形象无法针对播放语音做出动作,虚拟显示效果差。
针对3D虚拟形象拟人虚拟效果差的问题,相关技术中并未公开任何技术方案。
发明内容
本申请的主要目的在于提供一种基于语义驱动虚拟形象的实现方法、客户端和服务器,以解决相关技术中虚拟形象拟人虚拟效果差的问题。
为了实现上述目的,第一方面,本申请实施例提供了一种基于语义驱动虚拟形象的实现方法。
根据本申请的基于语义驱动虚拟形象的实现方法包括:
客户端对播放信息进行特征提取,得到播放信息的每个指定音节特征以及每个指定音节特征对应的播放时间;
客户端匹配出对应每个指定音节特征的指定虚拟形象的口型特征;
客户端在播放播放信息的进程中,基于每个指定音节特征的口型特征和播放时间,改变显示的指定虚拟形象的口型形状。
可选地,播放信息为语音消息;客户端对播放信息进行特征提取,包括:
客户端对语音消息中的每个元音音节进行提取,得到语音消息中的每个元音音节以及每个元音音节在语音消息播放中对应的播放时间,其中,指定音节特征包括播放消息中的元音音节。
可选地,该方法还包括:
客户端接收播放信息和对应播放信息的表情特征;
客户端在播放播放信息的进程中,基于表情特征,改变显示的指定虚拟形象的表情形状。
第二方面,本申请实施例还提供了一种基于语义驱动虚拟形象的实现方法,该方法包括:
服务器对语句信息进行情感分析,得到语句信息对应的情绪特征;
服务器将语句信息生成播放信息,以及匹配出对应情绪特征的表情特征;
服务器将播放信息和对应播放信息的表情特征发送给客户端,以使客户端根据对播放信息进行特征提取,得到播放信息的每个指定音节特征以及每个指定音节特征对应的播放时间;客户端匹配出对应每个指定音节特征的指定虚拟形象的口型特征;客户端在播放播放信息的进程中,基于表情特征、每个指定音节特征的口型特征和播放时间,改变显示的指定虚拟形象的表情形状和口型形状。
第三方面,本申请实施例还提供了一种客户端,该客户端包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京智能优学科技有限公司,未经北京智能优学科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811292531.7/2.html,转载请声明来源钻瓜专利网。