[发明专利]一种新闻事件生成式问答数据集的生成方法有效
申请号: | 201810057805.8 | 申请日: | 2018-01-22 |
公开(公告)号: | CN110110050B | 公开(公告)日: | 2021-08-03 |
发明(设计)人: | 沙磊;穗志方 | 申请(专利权)人: | 北京大学 |
主分类号: | G06F16/332 | 分类号: | G06F16/332 |
代理公司: | 北京万象新悦知识产权代理有限公司 11360 | 代理人: | 黄凤茹 |
地址: | 100871*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公布了一种新闻事件生成式问答数据集的生成方法,用于构建面向事件的新闻场景生成式问答数据集,能够实现事件生成式的智能自动问答;包括:提取得到所有有对应链接页面的事件;将生成问题模版和生成的问题的核心信息进行拼接生成事件的问题;提取事件页面下方的所有参考文献中的新闻链接页面,并将参考文献中的新闻链接页面中的新闻文本作为语料放入语料集;将事件页面的正文部分的第一段话作为所生成事件的问题的参考答案。本发明方法为自动生成,无需人工标注,且生成新闻场景数据的准确性和有效性高。 | ||
搜索关键词: | 一种 新闻 事件 生成 问答 数据 方法 | ||
【主权项】:
1.一种新闻事件生成式问答数据集的生成方法,包括如下步骤:1)从当前事件页面所有年份的事件列表中,提取得到所有有对应链接页面的事件;链接页面为相应事件页面;2)所述事件页面的标题为名词性短语,针对每个事件页面的事件,将该事件页面的标题作为要生成的问题的核心信息,采用将生成问题模版与生成的问题的核心信息进行拼接的方式,生成该事件的问题;通过所生成的事件的问题,能够模糊地询问相应的事件;3)对于每个事件页面的事件,提取出该事件页面的所有参考文献中的新闻链接页面,并将参考文献中的新闻链接页面中的新闻文本作为语料,放入语料集;4)对于每个事件页面的事件,将该事件页面的正文部分的第一段话作为步骤2)所生成事件的问题的参考答案;生成的新闻场景生成式问答数据集包括步骤2)生成的事件的问题、步骤3)得到的语料集及步骤4)生成的针对问题的参考答案。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京大学,未经北京大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810057805.8/,转载请声明来源钻瓜专利网。