[发明专利]一种提问式的分析节点生成方法、系统及存储介质有效
申请号: | 202011259004.3 | 申请日: | 2020-11-12 |
公开(公告)号: | CN112270189B | 公开(公告)日: | 2023-07-18 |
发明(设计)人: | 姜磊;钟颖欣;辛岩;杨钊 | 申请(专利权)人: | 佰聆数据股份有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F16/33;G06F16/332;G06F18/2411;G06N3/0464;G06N3/049;G06N3/08 |
代理公司: | 广州市华学知识产权代理有限公司 44245 | 代理人: | 林梅繁 |
地址: | 510663 广东省广州市高新技术产业开*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 提问 分析 节点 生成 方法 系统 存储 介质 | ||
本发明涉及数据分析技术,为提问式的分析节点生成方法、系统及存储介质,其方法包括:对所输入自然语言问题进行预处理、分词处理;对预处理后的输入自然语言问题对应的文本数据进行特征表示、特征提取,转化为数值形式;将自然语言问题中的关键信息抽取出来,对关键信息进行类型识别;构建意图识别模型,判断所输入自然语言问题的分析意图;结合特征提取、类型识别、意图识别的结果,得到自然语言问题中所需要分析的数据源、分析维度、分析指标、分析任务以及其他附加数据分析信息,并自动生成分析节点。本发明使得用户不需要了解复杂的数据结构以及分析方法就可以完成数据分析探索工作,从而快速探索数据发现业务中的问题。
技术领域
本发明涉及数据分析技术,尤其涉及一种提问式的分析节点生成方法、系统及存储介质。
背景技术
现有的提问式数据分析系统,一般是用户提出简单的自然语言问题,系统经过解析后自动查询数据库,得到结果并呈现给用户一个可视化的答案。这仅仅是针对一些特定的比较简单的问题查询,例如用户提出“某地区这个月的用电量是多少”,现有的提问式数据分析系统会将数据库中当月的用电量数据聚合成一个汇总值,并返回给用户一个可视化的视图或者一个具体的数值。
当用户的提问比较复杂时,如“上半年广州市不同用户类型的用电趋势如何?”,上述现有的提问式数据分析系统,由于仅有数据查询功能,用户所提问题对应的结果并不直接存在于数据库中,因而将不能满足用户的复杂提问式分析需求。
此外,若用户的问题与数据分析系统共享库中的分析路径没有关系,则从提问式数据分析系统上,用户也得不到有效的分析路径推荐反馈。因此,有必要提出提问式的分析节点生成方法、系统等,用于解决上述分析路径推荐式的数据分析系统所存在的问题。
发明内容
本发明提供提问式的分析节点生成方法、系统及存储介质,可以基于用户提出的自然语言问题进行解析,自动抽取数据,选择分析功能并生成分析节点,使得用户不需要了解复杂的数据结构以及分析方法就可以完成数据分析探索工作,从而快速探索数据发现业务中的问题。
根据本发明的提问式的分析节点生成方法,包括以下步骤:
S1、对所输入自然语言问题进行预处理、分词处理,得到分词处理后的词语;
S2、对预处理后的输入自然语言问题对应的文本数据进行特征表示、特征提取,转化为数值形式;
S3、将所输入自然语言问题中的关键信息抽取出来,对关键信息进行类型识别,得到实体类别信息;
S4、构建意图识别模型,判断所输入自然语言问题的分析意图,完成意图识别;
S5、结合上述步骤S2-S4中特征提取、类型识别、意图识别的结果,得到自然语言问题中所需要分析的数据源、分析维度、分析指标、分析任务以及其他附加数据分析信息,并自动生成分析节点。
在优选的实施例中,步骤S5包括:
S51、分析节点任务数据接口制定,针对每个分析节点任务制定标准的数据接口;
S52、数据接口信息生成,基于实体类别信息,结合元数据信息,匹配索引得到数据源信息、指标信息、维度信息以及其他附加数据分析信息;基于分析意图确定分析节点任务;将数据源信息、指标信息、维度信息以及其他附加数据分析信息经过处理后,传递给对应的分析节点任务,同时调用该分析节点任务完成分析结果的生成和展示。
根据本发明的提问式的分析节点生成系统,包括:
预处理模块,用于对所输入自然语言问题进行预处理、分词处理,得到分词处理后的词语;
特征提取模块,用于对预处理后的输入自然语言问题对应的文本数据进行特征表示、特征提取,转化为数值形式;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于佰聆数据股份有限公司,未经佰聆数据股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011259004.3/2.html,转载请声明来源钻瓜专利网。