[发明专利]基于短时离散谐波变换的音色特征提取方法在审
申请号: | 201910881274.9 | 申请日: | 2019-09-18 |
公开(公告)号: | CN110570878A | 公开(公告)日: | 2019-12-13 |
发明(设计)人: | 李海峰;孙聪珊;杨婧;马琳;李洪伟;陈婧;薄洪健;丰上;熊文静 | 申请(专利权)人: | 哈尔滨工业大学 |
主分类号: | G10L25/18 | 分类号: | G10L25/18 |
代理公司: | 51241 成都方圆聿联专利代理事务所(普通合伙) | 代理人: | 李鹏 |
地址: | 150001 黑龙*** | 国省代码: | 黑龙;23 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 谐波结构 音色特征 信息提取 基音周期估计 互相关函数 基音周期 离散谐波 频域变换 信息冗余 音频信号 中心削波 三电平 稀疏性 谐波谱 构建 音色 | ||
1.一种基于短时离散谐波变换的音色特征提取方法,其特征在于:包括:短时离散谐波变换方法和音色谐波谱特征提取方法;
a.短时离散谐波变换方法
基于谐波结构理论,根据音源的物理特性:物体振动发出的音频是复音,即具有谐波结构,且每个复音均有一个基频f0,它是谐波谱的最小频率,不同音频的基音不同其f0也不同;用频率序列来表示复音的谐波结构,将谐音按频率由低到高的顺序编号,使用向量HS=(f0,f1,...,fm,...,fM)保存谐波谱的各次谐波频率值,M是最高谐波次数;谐波谱中第m条谱线所对应的模拟频率(中心频率)为:
fm=f0·m (1)
其中相邻谐波谱对应的带宽为:
Bm=fm+1-fm=f0 (2)
由此可以看出任意相邻谱线的间隔(带宽)为一个常值,此时中心频率和带宽的比值pm为中心频率对应的谱线次序:
pm=fm/Bm=m (3)
设信号的采样频率为fs;T0为谐波谱的基音频率f0对应的基音周期,则满足:
T0=fs/f0 (4)
若信号最高频率分量为fmax,则至少满足以下关系,才不会产生混叠失真;
fs≥2fmax (5)
折叠频率(fs/2)是能够分析模拟信号的最高频率;又因为在谐波谱中:
fmax≥M·f0 (6)
由于最高谐波次数M为一个整数,所以向下取整得到:
对于窗长为N的信号序列,根据对离散信号的频域采样定理得到离散谱的数字频率的间隔必须满足下述公式:
Bm·N≤fs (8)
对上式中取等号则得到N的表达式,由于N为一个整数,所以向下取整得到:
由上式可得,对于音频信号当已知基频或基音周期时,可求得基于谐波结构的时频变换的窗长和最高谐波次数;对(8)式去等号,并结合式(3)知,谐波谱中谱线m处的数字频率为:
基于离散短时傅立叶变换(the Diserete Short Time Fourier Transform,DSTFT)的相应分量,并进行标准化,得到基于谐波频率的稀疏变换,离散谐波变换(DiscreteHarmonic Transform,DHT);设音频信号为有限长序列x(n),DHT的m次谱分量表达式如下:
其中,N为谐波谱时频变换时对应的窗长度;wN(n)是长度为N的窗函数;m=1,…,M,m是序列谐波谱的频率下标,表示第m次谐波,M为最高谐波次数;设对原始信号x(n)分帧后的第i帧为xi(n),对xi(n)进行离散谐波变换,得到称为信号的短时离散谐波变换:
b.音色谐波谱特征提取方法
谐波结构的频谱能量分布是影响音色的重要特征;因此,基于公式12的短时离散谐波变换,令Em.表示第m次谐波能量,则第i帧的第m次谐波能量为:
对M个进行归一化,并记为则短时离散谐波能量可表示为:
对EDHTi中的每个进行离散余弦变换(Discrete Cosine Transform,DCT):
其中,p=1,2,...,M;则短时离散谐波变换系数可表示为:
对SDHTCi求一阶差分,得到谐波能量变换幅值,用一阶短时离散谐波变换系数ΔSDHTCi表示;对SDHTCi求二阶差分,得到谐波能量变换率,用二阶短时离散谐波变换系数Δ2SDHTCi表示;则音色谐波谱特征由短时离散谐波变换系数、一阶差分短时离散谐波变换系数和二阶差分短时离散谐波变换系数构成局部音色谐波谱特征。
2.根据权利要求1所述的方法,其特征在于:对信号所有帧求得的第m次音色谐波谱特征求统计特征如均值、标准差、20%分位数、50%分为数、80%分为数以及峰度可以作为全局音色谐波谱特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工业大学,未经哈尔滨工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910881274.9/1.html,转载请声明来源钻瓜专利网。