[发明专利]舆情数据的查询方法及相关装置在审
申请号: | 202111674018.6 | 申请日: | 2021-12-31 |
公开(公告)号: | CN114356930A | 公开(公告)日: | 2022-04-15 |
发明(设计)人: | 李锟;王令则;孙琳;李谨秀;刘春波;狄晓帆 | 申请(专利权)人: | 中国农业银行股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/242;G06F16/28 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 杨泽;刘芳 |
地址: | 100005 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 舆情 数据 查询 方法 相关 装置 | ||
本申请涉及数据处理技术领域,尤其涉及一种舆情数据的查询方法及相关装置。本申请提供的技术方案由舆情数据查询系统执行,舆情数据查询系统接收查询条件信息,查询条件信息用于查询目标舆情数据,根据查询条件信息,在数据库中查询目标舆情数据的概要信息,概要信息包括除目标舆情数据的正文文件以外的数据信息,从文件服务器中查询目标舆情数据的正文文件,显示目标舆情数据的查询结果,查询结果包括目标舆情数据的概要信息和正文文件。本申请提供的技术方案,提高了舆情数据的查询效率,降低了舆情数据的查询成本。
技术领域
本申请涉及数据处理技术领域,尤其涉及一种舆情数据的查询方法及相关装置。
背景技术
企业舆情信息,通常是来自于互联网的非结构化的数据。但是企业内部使用的舆情数据通常是外部采购的、由第三方机构收集和加工后的结构化数据,包括了标题、正文、来源、情感色彩判定等字段。企业舆情数据具有数据量大、单条数据占用存储空间大等特点。
对于中小型企业信息查询类系统,通常使用关系型数据库(Mysql数据库)完成对企业舆情数据的联机查询,但Mysql数据库通常具有单数据库和单数据表的容量限制,超出该容量限制则会导致数据库并发性能的急剧下降。舆情类数据通常包含正文、标题等大信息量数据,由Mysql数据库直接进行大数据表的联机查询不仅使得查询性能低下,甚至会影响系统的整体稳定,导致其他功能无法正常使用。
目前,企业信息查询类系统对企业舆情数据执行查询功能时,主要通过合理的分库、分表来分散系统的性能压力。例如,将大数据量表根据预设规则,较为均匀的拆分为多个数据库的多张数据库表,如按照企业舆情数据的获取日期的尾号进行拆分等,为前端应用设备配置多个数据源,对应拆分后的多个数据库和数据库表,根据接收的查询条件,从不同的数据库和数据库表中查询数据,前端应用设备对查询到的数据进行拼接,得到查询结果集并进行展示。但拆分数据库或数据库表增加了数据库服务器的资源成本,增加了批量程序的时间复杂度,拼接结果集耗费了大量的计算资源和内存。
因此,如何提高企业舆情数据的查询效率并降低查询成本成为了亟待解决的问题。
发明内容
本申请提供了一种舆情数据的查询方法及相关装置,提高了舆情数据的查询效率,降低了舆情数据的查询成本。
第一方面,本申请提供一种舆情数据的查询方法,所述方法由舆情数据查询系统执行,所述方法包括:接收查询条件信息,所述查询条件信息用于查询目标舆情数据;根据所述查询条件信息,在数据库中查询所述目标舆情数据的概要信息,所述概要信息包括除所述目标舆情数据的正文文件以外的数据信息;从文件服务器中查询所述目标舆情数据的正文文件;显示所述目标舆情数据的查询结果,所述查询结果包括所述目标舆情数据的概要信息和正文文件。
本方法中,舆情数据查询系统根据接收的查询条件信息从数据库中查询目标舆情数据的概要信息,从文件服务器中查询目标舆情数据的正文文件,并将查询到的概要信息和正文文件作为目标舆情数据的查询结果。相比于从多个不同的数据库和数据库表中查询数据,再对查询到的数据进行拼接,得到查询结果集并进行展示,节约了数据库服务器的资源成本,降低了批量程序的时间复杂度,提高了舆情数据的查询效率,降低了查询成本。
在一种可能的实现方式中,所述方法还包括:导出所述舆情数据的正文文件;将所述舆情数据的正文文件保存至所述文件服务器中;生成舆情正文文件对照表,所述舆情正文文件对照表包括所述舆情数据的正文文件标识符和正文文件路径。
该实现方式中,将舆情数据的正文文件导出并保存至文件服务器中,并将文件服务器返回的正文文件标识和正文文件路径生成为舆情债正文文件对照表,以便后续根据接收的查询条件信息查询目标舆情数据的正文文件,充分发挥了文件服务器的索引优势。另外,将舆情数据的概要信息等结构化轻量数据存储于数据库中,节约了数据库空间,使宝贵的联机资源得以最大化利用,避免了多数据库交互带来的处理复杂度升高和性能损耗,节约了资源成本。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国农业银行股份有限公司,未经中国农业银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111674018.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种适用于铲车的铁托盘
- 下一篇:一种曲尼斯特的合成方法
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置