[发明专利]用于语料处理的任务生成方法及装置

说明书

本申请公开了一种用于语料处理的任务生成方法及装置。该方法包括根据领域建立语义框架；在所述语义框架的基础上建立语料剧本；根据所述语料剧本选择种子模板；以及确定需要用于改述的种子模板并生成改述语料众包任务。本申请解决了对于语料处理的任务生成方式效果较差的技术问题。通过本申请生成众包任务并获取高质量语料。此外，通过借助小程序可以以较低地成本完成适合中文改述语料收集的改述众包任务。进而可以更加动态地获得用户反馈，提升众包质量。

技术领域

本申请涉及自然语言生成领域，具体而言，涉及一种用于语料处理的任务生成方法及装置。

背景技术

自然语言生成(英文全称：Natural Language Generation，简称：NLG)是任务导向型对话系统的重要组成模块之一。

发明人发现，对于语料处理缺少有效的众包任务生成方式。进一步，无法通过众包任务的方式来获取含义相同但表述不同的高质量语料。

针对相关技术中对于语料处理的任务生成方式效果较差的问题，目前尚未提出有效的解决方案。

发明内容

本申请的主要目的在于提供一种用于语料处理的任务生成方法及装置，以解决对于语料处理的任务生成方式效果较差的问题。

为了实现上述目的，根据本申请的一个方面，提供了一种用于语料处理的任务生成方法，用于获取同一语义下的不同自然语言表达方式。

根据本申请的用于语料处理的任务生成方法包括：根据领域建立语义框架；在所述语义框架的基础上建立语料剧本；根据所述语料剧本选择种子模板；以及确定需要用于改述的种子模板并生成改述语料众包任务。

进一步地，根据领域建立语义框架包括：过滤人机对话过程中的行为得到对话行为；根据拟完成任务时需要获取的信息类型确定槽以及槽值；以及根据所述对话行为、所述槽以及所述槽值生成语义框架。

进一步地，在所述语义框架的基础上建立语料剧本包括：变更所述对话行为的组合、所述槽的组合以及所述槽的顺序的组合生成不同的对话片段；以及通过对话片段建立人机之间的对话内容作为语料剧本。

进一步地，根据所述语料剧本选择种子模板包括：生成所述种子模版中参与对话的人的角色信息；生成对话发生场景的背景信息；生成所述种子模版中的上下文环境信息；以及确定需要语料泛化的所述种子模版。

进一步地，确定需要用于改述的种子模板并生成改述语料众包任务包括：确定需要用于改述的种子模板并通过服务器上数据接口或应用程序编程接口发布改述语料众包任务；配置发布改述语料众包任务的任务完成条件；以及按照预设规则调度并通过社交网络服务器下发改述语料众包任务。

为了实现上述目的，根据本申请的另一方面，提供了一种用于语料处理的任务生成装置，用于获取同一语义下的不同自然语言表达方式。

根据本申请的用于语料处理的任务生成装置包括：领域模块，用于根据领域建立语义框架；剧本模块，用于在所述语义框架的基础上建立语料剧本；种子模板生成模块，用于根据所述语料剧本选择种子模板；以及任务生成模块，用于确定需要用于改述的种子模板并生成改述语料众包任务。

进一步地，所述领域模块包括：过滤单元，用于过滤人机对话过程中的行为得到对话行为；确定单元，用于根据拟完成任务时需要获取的信息类型确定槽以及槽值；以及语义框架生成单元，用于根据所述对话行为、所述槽以及所述槽值生成语义框架。

进一步地，所述领域模块还包括：变更单元，用于变更所述对话行为的组合、所述槽的组合以及所述槽的顺序的组合生成不同的对话片段；以及建立单元，用于通过对话片段建立人机之间的对话内容作为语料剧本。