[发明专利]一种基于语音的多通道手写中文纠错方法

权利要求书

1.一种基于语音的多通道手写中文纠错方法，其步骤包括：

1)同时进行笔迹和语音输入；

2)将所述笔迹过切分为多个片断序列，得到笔迹所有的过切分结果，所述片段为汉字的最小切分段；

3)将笔迹和语音表示成音素序列，利用音素间的相似度，计算所述笔迹片段序列对应的所有过切分的音素序列与语音音素序列的Levenshtein距离；

4)利用所述Levenshtein距离计算笔迹片段序列和语音音素序列的分治融合代价；根据最小分治融合代价对应的过切分位置，获得正确的手写中文。

2.如权利要求1所述的基于语音的多通道手写中文纠错方法，其特征在于，步骤2)中，所述过切分方法为：

1)将所有笔迹过切分的片断序列F＝f₀f₁...f_T-1组织成有向图G；所述有向图中的顶点为各个片段序列{f₀，f₁，...，f_T-1}和一个附加顶点f_T，所述f_i代表一个片断，T表示片段的序列长度；

2)按如下公式找到所有的过切分结果：

3.如权利要求1所述的基于语音的多通道手写中文纠错方法，其特征在于，步骤3)中，所述笔迹的音素表示通过查字典的方式获得；所述语音的音素表示由语音识别器获得。

4.如权利要求1所述的基于语音的多通道手写中文纠错方法，其特征在于，步骤3)中，所述过切分的音素序列的Levenshtein距离的计算是通过将替换操作的代价用音素序列间的相似度表示。

5.如权利要求1所述的基于语音的多通道手写中文纠错方法，其特征在于，步骤3)中，所述音素间的相似度S(ph₁，ph₂)＝sIn(in₁，in₂)+sFn(fn₁，fn₂)，其中ph表示音素，in表示音素的声母，fn表示音素的韵母。

6.如权利要求1所述的基于语音的多通道手写中文纠错方法，其特征在于，步骤4)中，所述笔迹片段序列和语音音素序列的分治融合代价的计算方法如下：

1)当笔迹过切分的片断序列F_i，j的长度小于预先设定的阈值threshold时，穷举策略的融合代价ExFusion(F_i，j，PH_k，l)为上述笔迹片段序列F_i，j对应的所有过切分的音素序列PH_hw与语音音素序列PH_k，l的Levenshtein距离LD(PH_hw，PH_k，l)的最小值；

2)笔迹过切分的片断序列长度大于设定阈值threshold时，计算F_i，j在笔迹的过切分位置p的过切分代价DCCost(p，F_i，j，PH_k，l)，选择其最小值，递归得到所述分治融合代价DCFusion(Fi,j,PHk,l)=ExFusion(Fi,j,PHk,l),ifj-i<thresholdmint-1≤p≤t+1(DCCost(p,Fi,j,PHk,l)),else,]]>

t＝(i+j)/2，其中，DCCost(p,Fi,j,PHk,l)=mink≤q≤lDCFusion(Fi,p,PHk,q)+DCFusion(Fp+1,j,PHq+1,l),]]>

q为在语音音素序列的位置，k≤q≤l。