[发明专利]利用提前停止聚类的讲话者分离在审
申请号: | 201980035652.X | 申请日: | 2019-03-29 |
公开(公告)号: | CN112204657A | 公开(公告)日: | 2021-01-08 |
发明(设计)人: | 陈丽萍;宋謌平 | 申请(专利权)人: | 微软技术许可有限责任公司 |
主分类号: | G10L17/00 | 分类号: | G10L17/00 |
代理公司: | 永新专利商标代理有限公司 72002 | 代理人: | 张立达 |
地址: | 美国华*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 利用 提前 停止 讲话 分离 | ||
本公开提供了用于利用提前停止聚类的讲话者分离的方法和装置。可以将音频流分割为至少一个语音段,所述音频流包括来自至少一个讲话者的语音。可以将所述至少一个语音段聚类为多个簇,所述多个簇的数量大于所述至少一个讲话者的数量。可以从所述多个簇中选择相似度最高的至少一个簇,所选择的至少一个簇的数量等于所述至少一个讲话者的数量。可以基于所选择的至少一个簇来建立讲话者分类模型。可以通过所述讲话者分类模型,将所述音频流中的语音帧与所述至少一个讲话者对准。
背景技术
讲话者分离(speaker diarization)是将输入音频流划分为分别对应于不同讲话者的多个部分的过程。讲话者分离旨在确定在音频流中“谁在何时讲话?”,以及每个讲话者处于活动状态的时间间隔。通过对涉及来自多个讲话者的语音的音频流应用讲话者分离,可以确定音频流中的每个语音话语是由哪个讲话者讲出的,或者每个讲话者已经讲出了什么语音话语。讲话者分离被广泛地用于各种场景。例如,对于来自会议的音频流,讲话者分离可用于自动生成会议记录,其记录了在会议期间的语音话语并为每个语音话语标识了讲话者。
发明内容
提供本发明内容以便介绍一组概念,这组概念将在以下的具体实施方式中做进一步描述。本发明内容并非旨在标识所保护主题的关键特征或必要特征,也不旨在用于限制所保护主题的范围。
本公开的实施例提出了用于利用提前停止聚类的讲话者分离的方法和装置。可以将音频流分割为至少一个语音段,所述音频流包括来自至少一个讲话者的语音。可以将所述至少一个语音段聚类为多个簇,所述多个簇的数量大于所述至少一个讲话者的数量。可以从所述多个簇中选择相似度最高的至少一个簇,所选择的至少一个簇的数量等于所述至少一个讲话者的数量。可以基于所选择的至少一个簇来建立讲话者分类模型。可以通过所述讲话者分类模型,将所述音频流中的语音帧与所述至少一个讲话者对准。
应当注意,以上一个或多个方面包括以下详细描述以及权利要求中具体指出的特征。下面的说明书及附图详细提出了所述一个或多个方面的某些说明性特征。这些特征仅仅指示可以实施各个方面的原理的多种方式,并且本公开旨在包括所有这些方面和其等同变换。
附图说明
以下将结合附图描述所公开的多个方面,这些附图被提供用以说明而非限制所公开的多个方面。
图1示出了传统讲话者分离的示例性过程。
图2示出了根据实施例的利用提前停止聚类的讲话者分离的示例性过程。
图3示出了根据实施例的在讲话者分离中执行提前停止聚类的示例性过程。
图4示出了根据实施例的在讲话者分离中执行提前停止聚类的示例性过程。
图5示出了根据实施例的在讲话者分离中估计讲话者数量的示例性过程。
图6示出了根据实施例的在讲话者分离中选择簇的示例性过程。
图7示出了根据实施例的用于讲话者分离的示例性方法的流程图。
图8示出了根据实施例的用于讲话者分离的示例性装置。
图9示出了根据实施例的用于讲话者分离的示例性装置。
具体实施方式
现在将参考多种示例性实施方式来讨论本公开。应当理解,这些实施方式的讨论仅仅用于使得本领域技术人员能够更好地理解并从而实施本公开的实施例,而并非教导对本公开的范围的任何限制。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于微软技术许可有限责任公司,未经微软技术许可有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201980035652.X/2.html,转载请声明来源钻瓜专利网。
- 上一篇:光差分检测器及检查装置
- 下一篇:CEST磁共振成像中的运动检测