[发明专利]一种基于文本信息的辅助说话人分离方法及相关装置有效
申请号: | 201911424875.3 | 申请日: | 2019-12-30 |
公开(公告)号: | CN111128223B | 公开(公告)日: | 2022-08-05 |
发明(设计)人: | 方昕;柳林;刘海波;方磊 | 申请(专利权)人: | 科大讯飞股份有限公司 |
主分类号: | G10L21/0272 | 分类号: | G10L21/0272;G10L25/03 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 熊永强 |
地址: | 230088 安徽省*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 文本 信息 辅助 说话 分离 方法 相关 装置 | ||
本申请实施例公开了一种基于文本信息的辅助说话人分离方法及相关装置,方法包括:获取待分离的第一语音信息;对待分离的第一语音信息进行第一分离处理,得到第一分离结果,第一分离处理是指对第一语音信息中的不同说话人进行初步分割和聚类;对第一分离结果进行语音处理,得到第二语音信息,语音处理包括语音识别或语音表征信息采集;将第二语音信息输入预先训练好的说话人转变点识别模型,确定第二语音信息中的说话人的转变点;根据说话人的转变点和第一分离结果得到目标分离结果。可见,本申请通过获取的第一语音信息获取文本信息,融合底层声学特征与文本信息进行说话人分离,提高说话人分离的准确性。
技术领域
本申请涉及电子设备技术领域,具体涉及一种基于文本信息的辅助说话人分离方法及相关装置。
背景技术
近年来,随着音频处理技术的不断提高,从海量的数据中,如电话录音、新闻广播、会议录音等,获取感兴趣的特定人声已成为研究热点。说话人分离技术是指从多人对话中自动地将语音依据说话人进行划分,并加以标记的过程,即解决的是“什么时候由谁说”的问题。借助说话人分离技术人们可以实现对音频数据流的一种结构化管理,对音频中的不同人的角色信息进行有效区分,进而为在更高语义层次上实现结构化音频内容提供基础。说话人分离技术具有很多实际应用价值,可以利用分离出的结果来做说话人自适应(SpeakerAdaption),以提高语音识别的识别率;可以辅助电话、会议数据进行自动转写构建话者音频档案,进而实现说话人音频文档管理;另外,还可以通过说话人分离技术,实现语料库的自动跟踪和标注。在说话人分离的过程当中,一般都是采用语音声学特征作为判决的依据,通过语音的音色信息来区分不同的说话人,然而当一段语音中两人的性别相同,音色接近的时候,往往容易导致分离错误。
发明内容
本申请实施例提供了一种基于文本信息的辅助说话人分离方法及相关装置,以期融合底层声学特征与文本信息进行说话人分离,提高说话人分离的准确性。
第一方面,本申请实施例提供一种基于文本信息的辅助说话人分离方法,包括:
获取待分离的第一语音信息;
对所述待分离的第一语音信息进行第一分离处理,得到第一分离结果,所述第一分离处理是指对第一语音信息中的不同说话人进行初步分割和聚类;
对所述第一分离结果进行语音处理,得到第二语音信息,所述语音处理包括语音识别或语音表征信息采集;
将所述第二语音信息输入预先训练好的说话人转变点识别模型,确定所述第二语音信息中的说话人的转变点;
根据所述说话人的转变点和第一分离结果得到目标分离结果。
第二方面,本申请实施例提供一种基于文本信息的辅助说话人分离装置,包括处理单元和通信单元,其中,
所述处理单元,用于获取待分离的第一语音信息;以及对所述待分离的第一语音信息进行第一分离处理,得到第一分离结果,所述第一分离处理是指对第一语音信息中的不同说话人进行初步分割和聚类;以及对所述第一分离结果进行语音处理,得到第二语音信息,所述语音处理包括语音识别或语音表征信息采集;以及将所述第二语音信息输入预先训练好的说话人转变点识别模型,确定所述第二语音信息中的说话人的转变点;以及根据所述说话人的转变点和第一分离结果得到目标分离结果。
第三方面,本申请实施例提供一种电子设备,包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。
第四方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于科大讯飞股份有限公司,未经科大讯飞股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911424875.3/2.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置