[发明专利]文本断句方法及系统有效
申请号: | 201610993731.X | 申请日: | 2016-11-11 |
公开(公告)号: | CN108090038B | 公开(公告)日: | 2022-01-14 |
发明(设计)人: | 占吉清;高建清;王智国 | 申请(专利权)人: | 科大讯飞股份有限公司 |
主分类号: | G06F40/211 | 分类号: | G06F40/211;G06F40/289;G10L15/06;G10L15/26 |
代理公司: | 北京维澳专利代理有限公司 11252 | 代理人: | 赵景平;宋少华 |
地址: | 230088 安徽省*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 断句 方法 系统 | ||
1.一种文本断句方法,其特征在于,包括:
预先收集少量文本数据及其对应的语音数据,构建基于文本断句特征和声学断句特征的长时记忆断句模型;
在对文本断句时,获取待断句文本及其对应的语音数据;
分别根据所述待断句文本及所述待断句文本对应的语音数据提取文本断句特征和声学断句特征;所述声学断句特征包括:词间停顿时长、词尾基频走势、词内音素平均时长、词内元音音素平均时长、说话人历史平均语速、词尾能量走势、词声调;
根据提取的文本断句特征、声学断句特征以及所述长时记忆断句模型,对所述待断句文本进行断句,所述断句是指将一段连续不间断的文字切分为若干个句子;其中,在构建长时记忆断句模型时,将词间停顿时长、词内音素平均时长、词内元音音素平均时长、说话人历史平均语速、词声调归为第一组声学断句特征;将词尾基频走势归为第二组声学断句特征;将词尾能量走势归为第三组声学断句特征;且,通过长时记忆断句模型的规整层直接对第一组声学断句特征进行规整,以及通过规整层对第二组声学断句特征与第三组声学断句特征拼接后的向量进行规整。
2.根据权利要求1所述的方法,其特征在于,所述收集少量文本数据及其对应的语音数据,构建基于文本断句特征和声学断句特征的长时记忆断句模型包括:
收集少量文本数据及其对应的语音数据;
将所述文本数据作为训练数据,并标注所述训练数据的断句标签;
根据所述训练数据提取文本断句特征,并根据所述训练数据对应的语音数据提取声学断句特征;
将提取的文本断句特征及声学断句特征作为训练特征,利用所述训练特征及所述训练数据的断句标签构建长时记忆断句模型。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:预先收集大量纯文本数据,构建文本断句模型,所述文本断句模型包括输入层、一个或多个隐层、及输出层;
所述根据所述训练数据提取文本断句特征包括:
对所述训练数据进行分词,并计算得到的各词的词向量;
依次将各词的词向量输入所述文本断句模型,根据所述文本断句模型最后一个隐层的输出得到各词的文本断句特征。
4.根据权利要求3所述的方法,其特征在于,所述收集大量纯文本数据,构建文本断句模型包括:
收集大量纯文本数据;
根据所述纯文本数据的标点位置,标注文本数据的断句标签;
对所述纯文本数据进行分词,并计算各词的词向量;
根据所述纯文本数据中每个词的词向量及所述断句标签,构建文本断句模型。
5.根据权利要求3所述的方法,其特征在于,所述文本断句模型为:双向LSTM结构、或双向RNN结构,并且每个词的隐层节点的输入分别为当前词前一个词及后一个词隐层节点的输出以及当前词上一层的输出。
6.根据权利要求2所述的方法,其特征在于,所述根据所述训练数据对应的语音数据提取声学断句特征包括:
将所述训练数据与其对应的语音数据进行对齐;
根据对齐后的训练数据及其语音数据提取声学断句特征。
7.根据权利要求1所述的方法,其特征在于,所述长时记忆断句模型包括输入层、规整层、一个或多个隐层、输出层;规整层用于对输入层输入的不同断句特征进行规整;每个词的隐层节点的输入分别为当前词前一个词及后一个词隐层节点的输出以及当前词上一层的输出。
8.根据权利要求1-7任一项所述的方法,其特征在于,所述方法还包括:
在得到待断句文本的断句结果后,将断句后的文本反馈给用户;或者
在得到待断句文本的断句结果后,将在需要断句处添加断句标记后的文本反馈给用户。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于科大讯飞股份有限公司,未经科大讯飞股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610993731.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:自动排版方法和装置
- 下一篇:一种人名识别方法和装置