[发明专利]一种数据处理方法、装置、服务器及存储介质有效
申请号: | 201811004455.5 | 申请日: | 2018-08-30 |
公开(公告)号: | CN109344395B | 公开(公告)日: | 2022-05-20 |
发明(设计)人: | 王文斌;赵学敏;苏可 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F40/279 | 分类号: | G06F40/279;G06F16/332 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;贾允 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 服务器 存储 介质 | ||
本发明公开了一种数据处理方法、装置、服务器及存储介质,所述方法包括:获取待识别语句数据;将所述待识别语句数据输入预设领域的意图识别模型进行意图识别,得到所述待识别语句数据具有所述预设领域的意图的概率;判断所述待识别语句数据具有所述预设领域的意图的概率是否大于等于所述预设领域的召回阈值且小于所述预设领域的可出阈值;当判断的结果为是时,将所述待识别语句数据作为所述预设领域的待标注语句数据;其中,所述召回阈值为数据被召回的下限值,所述可出阈值为数据被召回的上限值。利用本发明实施例提供的技术方案可以减少对待识别语句数据进行人工标注识别的人力成本,有效提高处理效率。
技术领域
本发明涉及互联网通信技术领域,尤其涉及一种数据处理方法、装置、服务器及存储介质。
背景技术
智能问答系统是一种新型的信息服务系统,在知识处理、语义识别等功能的基础上能够分析用户意图,为用户解答问题。目前,智能问答系统在智能客服、智能家电等领域得到了广泛的应用,也受到了广大用户的喜爱。
现有的智能问答系统进行问答处理过程中由于终端用户的表达千差万别,常常遇到系统不支持的语句。现有技术中往往导出所有不支持的语句进行人工标注,确定用户需要查询的语句的意图,进而确定相应的应答结果。但对大量的不支持的语句进行人工,需要大量的人力成本,处理效率低。因此,需要提供更高效的方案。
发明内容
本发明提供了一种数据处理方法、装置、服务器及存储介质,可以减少对待识别语句数据进行人工标注识别的人力成本,有效提高处理效率。
第一方面,本发明提供了一种数据处理方法,所述方法包括:
获取待识别语句数据;
将所述待识别语句数据输入预设领域的意图识别模型进行意图识别,得到所述待识别语句数据具有所述预设领域的意图的概率;
判断所述待识别语句数据具有所述预设领域的意图的概率是否大于等于所述预设领域的召回阈值且小于所述预设领域的可出阈值;
当判断的结果为是时,将所述待识别语句数据作为所述预设领域的待标注语句数据;
其中,所述召回阈值为数据被召回的下限值,所述可出阈值为数据被召回的上限值。
第二方面提供了一种数据处理装置,所述装置包括:
语句数据模块,用于获取待识别语句数据;
意图识别模块,用于将所述待识别语句数据输入预设领域的意图识别模型进行意图识别,得到所述待识别语句数据具有所述预设领域的意图的概率;
第一判断模块,用于判断所述待识别语句数据具有所述预设领域的意图的概率是否大于等于所述预设领域的召回阈值且小于所述预设领域的可出阈值;
待标注语句数据确定模块,用于当所述第一判断模块判断的结果为是时,将所述待识别语句数据作为所述预设领域的待标注语句数据;
其中,所述召回阈值为数据被召回的下限值,所述可出阈值为数据被召回的上限值。
第三方面提供了一种数据处理服务器,所述服务器包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如第一方面所述的数据处理方法。
第四方面提供了一种计算机可读存储介质,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如第一方面所述的数据处理方法。
本发明提供的数据处理方法、装置、服务器及存储介质,具有如下技术效果:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811004455.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种文本类数据质量监控系统
- 下一篇:文本识别方法、装置、及计算机设备