[发明专利]有声动图生成、播放方法、数据处理方法、系统及设备有效
申请号: | 201810631243.3 | 申请日: | 2018-06-19 |
公开(公告)号: | CN110619673B | 公开(公告)日: | 2023-04-11 |
发明(设计)人: | 毛灵超;曾广 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06T13/20 | 分类号: | G06T13/20 |
代理公司: | 北京太合九思知识产权代理有限公司 11610 | 代理人: | 刘戈 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 有声 生成 播放 方法 数据处理 系统 设备 | ||
1.一种有声动图生成方法,其特征在于,包括:
基于动图图像对应的语义特征或基于用户输入的文案信息,确定关键词;
获取为动图图像配置的第一音频;其中,第一音频与所述关键词匹配;
所述第一音频的音频时长与所述动图图像的图像时长不等时,对所述第一音频进行时长缩放处理,以得到音频时长满足设定要求的第二音频;
根据所述动图图像及所述第二音频,生成有声动图。
2.根据权利要求1所述的方法,其特征在于在,获取为动图图像配置的第一音频,包括:
从网络侧或本地,获取与所述关键词匹配的至少一个音频;
将所述至少一个音频中的一个作为所述第一音频。
3.根据权利要求1所述的方法,其特征在于,基于动图图像对应的语义特征,确定关键词,包括:
分别对构成所述动图图像的多幅图像信息进行语义识别,以得到各幅图像信息的语义特征;
根据所述各幅图像信息的语义特征,确定所述关键词。
4.根据权利要求1所述的方法,其特征在于,基于用户输入的文案信息,确定关键词,包括:
获取用户针对所述动图图像输入的文案信息;
根据所述文案信息,确定所述关键词。
5.根据权利要求2所述的方法,其特征在于,从网络侧或本地,获取与所述关键词匹配的至少一个音频,包括:
从网络侧或本地,获取含有所述关键词或所述关键词的近义词的至少一段歌词;
分别获取所述至少一段歌词中各段歌词对应的歌曲片段。
6.根据权利要求5所述的方法,其特征在于,获取所述至少一段歌词中的第一段歌词对应的歌曲片段,包括:
从网络侧或本地,获取所述第一段歌词对应的歌曲音频;
从所述歌曲音频中,节选出歌曲片段。
7.根据权利要求6所述的方法,其特征在于,从所述歌曲音频中,节选出歌曲片段,包括:
响应于用户针对所述歌曲音频的节选操作,获取用户节选出的歌曲片段。
8.根据权利要求6所述的方法,其特征在于,从所述歌曲音频中,节选出歌曲片段,包括:
根据所述歌曲音频对应的歌词文件,确定所述第一段歌词的起始时间和终止时间;
从所述歌曲音频中,节选出所述起始时间至所述终止时间内的歌曲片段。
9.根据权利要求8所述的方法,其特征在于,从所述歌曲音频中,节选出歌曲片段,还包括:
根据所述图像时长,调整所述起始时间和/或所述终止时间,以使所述起始时间至所述终止时间的时长满足预设条件。
10.根据权利要求9所述的方法,其特征在于,所述预设条件包括:所述起始时间至所述终止时间的时长与所述图像时长之差小于第一预设阈值。
11.根据权利要求9所述的方法,其特征在于,从所述歌曲音频中,节选出歌曲片段,还包括:
结合所述歌曲音频对应的歌词文件判定所述起始时间至所述终止时间内的歌曲片段包含不完整句式的歌词时,继续调整所述起始时间和/或所述终止时间,直至所述起始时间至所述终止时间的时长与所述图像时长的时差满足预设条件,且所述起始时间至所述终止时间内的歌曲片段包含完整句式的歌词。
12.根据权利要求1至4中任一项所述的方法,其特征在于,所述设定要求包括:
所述音频时长与所述图像时长之差小于或等于第二预设阈值。
13.根据权利要求1至4中任一项所述的方法,其特征在于,所述第一音频为歌曲音频或歌曲片段;以及
所述方法,还包括:
获取所述第一音频对应的歌词;
将所述歌词添加至所述有声动图,以在有声动图上同步展示所述歌词。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810631243.3/1.html,转载请声明来源钻瓜专利网。