[发明专利]一种具备情感的中文文本人声合成方法有效

专利信息
申请号: 201711407738.X 申请日: 2017-12-22
公开(公告)号: CN108364632B 公开(公告)日: 2021-09-10
发明(设计)人: 沈傲东;俞豪敏;孔佑勇;吴剑锋;董涵;舒华忠;王坤 申请(专利权)人: 东南大学
主分类号: G10L13/02 分类号: G10L13/02;G06F40/289
代理公司: 南京众联专利代理有限公司 32206 代理人: 杜静静
地址: 210096 *** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 具备 情感 中文 文本 人声 合成 方法
【权利要求书】:

1.一种具备情感的中文文本人声合成方法,其特征在于:所述合成方法包括以下步骤:

(1)构建情感语料库;

(2)基于波形拼接的带情感语音合成;

步骤(1)中所述的构建情感语料库具体操作如下:

(11)分词和词性标注,基于已有的隐马尔可夫模型对原始文本进行分词和词性标注,并将分词结果转化为文本形式;

(12)语音采集和自动切分,

(12.1)基于安卓智能设备完成语音采集,具体录音采集参数为:采样率8000Hz,单通道,16位精度;将录音数据保存为WAV格式;

(12.2)根据录音数据内的间歇和频率特征,结合步骤(11)中获取的分词结果,得到各个词语在音频中所对应的起止时刻点;

(12.3)根据音频起讫时刻序列,切割出对应词语的音频,保存为PCM格式音频,构建分词-音频的对应关系;

(13)情感分析,将原始文本进行分句,对各个语句进行情感的分析判别,共分为七种情感:乐,好,怒,哀,惧,恶,惊,基于语句的情感特征值,计算语句中的各个词语的情感特征值;

(14)输入语料库,综合上述步骤获得的分词文本内容、词性、句型、情感特征以及词语音频文件地址,录入语料库中;

步骤(2)中所述的基于波形拼接的带情感语音合成,包括如下步骤:

(21)分词和情感分析,对待合成文本进行分词和情感分析,得到各个词语的词语内容、词性、句型和七种情感特征值;

(22)选取最优语料:

(22.1)从语料库中取出所有该分词tk所对应的音频数据集{pcmk};

(22.2)根据分词文本的词性、句型、情感特征值分别计算音频数据集{pcmk}中的匹配特征度Wk

其中p表示分词文本的词性,t表示所属句型,如果相同输出为1,否则为输出为0,ei表示候选词语的第i种情感特征值,Ei表示目标词语的第i种情感特征值;

(22.3)通过对候选集中的音频数据排序,选取出最优匹配特征度的语料结果;

(23)语音合成,基于波形拼接合成输出最优语料的音频内容。

2.根据权利要求1所述的一种具备情感的中文文本人声合成方法,其特征在于,步骤(11)分词和词性标注,具体如下,

分词过程分为预处理、粗切分和词性标注,预处理包括文本过滤和原子切分,过滤未定义符号、非汉语常用符号;基于完成的预处理文本,根据基础词典找出文本中所有的词语,构造出词语切分有向无环图,针对该图,在所有的路径中,找出长度值最小的集合作为粗切分结果集;

对于获得的粗切分结果集,基于一阶隐马模型可得最终分词结果W#计算公式为

其中{ci}表示与{wi}对应的类别序列,通过语法分析建立角色表,在分词结果的基础上利用隐马模型得到概率最大的角色序列,生成最终的词性标注结果。

3.根据权利要求2所述的一种具备情感的中文文本人声合成方法,其特征在于,步骤(13)情感分析,具体如下,将原始文本进行分句,根据构建的情感词典,对各个语句基于贝叶斯模型:

进行情感的分析判别,其中X为短句文本分词集合,Ci为情感类别,共分为七种情感:乐,好,怒,哀,惧,恶,惊,选择最大概率P(Ci|X)作为短句的情感所属类别,根据短句情感分析结果,输出语句中的各个词语的情感特征值。

4.根据权利要求3所述的一种具备情感的中文文本人声合成方法,其特征在于,步骤(23)语音合成,基于波形拼接合成输出最优语料的音频内容,具体步骤如下:根据获得的最优音频集合,获取对应PCM存放地址的一个完整序列,根据存放地址取出文件,各自存入一个Byte数组中,在内存中完成拼接形成对应的语音数据。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东南大学,未经东南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201711407738.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top