[发明专利]用于海量数据处理的实时数据计算方法在审
| 申请号： | 201810225319.2 | 申请日： | 2018-03-19 |
| 公开（公告）号： | CN108427759A | 公开（公告）日： | 2018-08-21 |
| 发明（设计）人： | 张悠;陈熹 | 申请（专利权）人： | 四川意高汇智科技有限公司 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30 |
| 代理公司： | 北京天奇智新知识产权代理有限公司 11340 | 代理人： | 杨春 |
| 地址： | 610000 四川省成都市高新*** | 国省代码： | 四川;51 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 海量数据处理 多维搜索 实时数据 过滤项 分词 搜索引擎 搜索 数据搜索引擎 多维数据 高效实现 搜索过程 索引结构 预先建立 页面 解析 命中 更新 优化 保证 | ||
1.一种用于海量数据处理的实时数据计算方法，用于在搜索引擎中实现多维数据搜索，其特征在于，包括：
在搜索过程中，搜索引擎解析用户输入的多维搜索请求，获取与多维搜索请求对应的分词过滤项；
根据分词过滤项，搜索预先建立的索引结构，获取与分词过滤项对应的命中页面。
2.根据权利要求1所述的方法，其特征在于，所述分词过滤项包括首级分词过滤项，和/或次级分词过滤项。
3.根据权利要求1所述的方法，其特征在于，所述搜索引擎基于MapReduce框架。
4.根据权利要求3所述的方法，其特征在于，所述根据分词过滤项，搜索预先建立的索引结构，获取与分词过滤项对应的命中页面，进一步包括：
首先根据首级分词过滤项，确定对应的主页面ID集合；之后根据次级分词过滤项，确定对应的映射文档集，在该映射文档集中以主页面ID为Key，以与主页面ID对应的次级页面ID集合为对应的Value；
在获取主页面ID集合以及映射文档集之后，通过将主页面ID集合与映射文档集中的Key取交集，可以确定最终满足条件的命中主页面ID集合，之后根据映射文档集中与命中主页面ID集合对应的Value，确定与命中主页面ID对应的命中次级页面ID集合。
5.根据权利要求1所述的方法，其特征在于，还包括：
按照预定义排序规则对与命中主页面ID集合对应的命中主页面进行排序，并将排序结果结合与命中次级页面ID集合对应的命中次级页面进行显示。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于四川意高汇智科技有限公司，未经四川意高汇智科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201810225319.2/1.html，转载请声明来源钻瓜专利网。
