[发明专利]一种对话生成的方法、装置、存储介质及电子设备

权利要求书

1.一种对话生成的方法，其特征在于，包括：

获取源序列，根据所述源序列生成具有最大概率的、预设数量的目标序列，并确定每个所述目标序列的正向概率，所述正向概率为基于所述源序列生成所述目标序列的概率；

确定每个所述目标序列的反向概率，所述反向概率为基于所述目标序列预测生成所述源序列的概率；

根据每个所述目标序列的正向概率和反向概率分别确定每个所述目标序列的双向互信息，所述双向互信息与所述正向概率和所述反向概率之间均为正相关关系；

将具有最大双向互信息的目标序列作为与所述源序列相对应的有效序列。

2.根据权利要求1所述的方法，其特征在于，所述根据所述源序列生成具有最大概率的、预设数量的目标序列，并确定每个所述目标序列的正向概率，包括：

根据所述源序列选取N个最大概率的第一候选词，每个所述第一候选词生成一个候选序列；

在当前解码时刻，基于所述源序列和当前的N个所述候选序列，确定每个所述候选序列对应的M个最大概率的第二候选词，分别将M个所述第二候选词添加至相应的所述候选序列中，生成N×M个新的候选序列；根据所述候选序列所包含的所有候选词的概率确定每个候选序列的概率，并在N×M个候选序列中选取N个最大概率的候选序列；

之后将下一解码时刻作为新的当前解码时刻，重复上述在当前解码时刻选取N个最大概率的候选序列的过程，直至解码过程结束；

将最终选取的N个最大概率的候选序列作为目标序列，且所述目标序列的正向概率为相应的候选序列的概率。

3.根据权利要求1所述的方法，其特征在于，所述确定每个所述目标序列的反向概率包括：

基于编码模型确定所述目标序列的编码隐状态；

基于解码模型，在当前解码阶段，根据所述编码隐状态确定所述源序列的每个源分词的概率，所述源分词为对所述源序列进行分词处理后所确定的分词；

根据所有所述源分词的概率生成所述目标序列的反向概率。

4.根据权利要求3所述的方法，其特征在于，所述根据所述编码隐状态确定所述源序列的每个源分词的概率包括：

在当前解码阶段，确定所述编码模型每个编码阶段的编码隐状态的权重，并根据所述编码模型每个编码阶段的编码隐状态以及相应的权重确定在当前解码阶段的上下文向量；根据当前解码阶段的上下文向量、上一解码阶段的解码隐状态、上一解码阶段所对应源分词，确定当前解码阶段的解码隐状态以及当前解码阶段所对应的源分词的概率；

之后将下一解码阶段作为当前解码阶段，重复上述确定解码隐状态以及源分词的概率的过程，直至确定所有源分词的概率。

5.根据权利要求4所述的方法，其特征在于，所述根据所述编码模型每个编码阶段的编码隐状态以及相应的权重确定在当前解码阶段的上下文向量包括：

将所述目标序列的总的编码隐状态[h₁,h₂,…,h_j,…]^T与上一解码阶段的解码隐状态s_i-1进行点乘，确定在第i个解码阶段、所述编码模型每个编码阶段的编码隐状态的点乘值e_ij，j∈[1,m]；之后对所有的点乘值e_ij进行归一化处理，确定每个所述编码模型每个编码阶段的编码隐状态的权重ω_ij；其中，h_j表示所述编码模型在第j个编码阶段的编码隐状态，m为所述编码隐状态的数量，所述第i个解码阶段为当前解码阶段；

根据所述编码模型每个编码阶段的编码隐状态h_j以及相应的权重e_ij确定在第i个解码阶段的上下文向量c_i，且

6.根据权利要求1所述的方法，其特征在于，所述目标序列的双向互信息D为：

D＝log p(sou|tar)+logp(tar|sou)；其中，p(sou|tar)表示所述目标序列的正向概率，p(tar|sou)表示所述目标序列的反向概率。