[发明专利]用于基于词典的压缩的并行历史搜索和编码有效
申请号: | 201580055720.0 | 申请日: | 2015-10-21 |
公开(公告)号: | CN107111623B | 公开(公告)日: | 2020-04-03 |
发明(设计)人: | 巴纳比·道尔顿;扎赫拉·腊克;布莱恩·穆迪;曼努埃尔·萨尔达纳 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | H03M7/30 | 分类号: | H03M7/30 |
代理公司: | 北京弘权知识产权代理事务所(普通合伙) 11363 | 代理人: | 逯长明;许伟群 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 基于 词典 压缩 并行 历史 搜索 编码 | ||
1.一种用于历史搜索输入数据流的电路,以生成历史搜索输出数据流,所述电路包括:
(a)输入单元,用于接收传入输入数据流,所述输入数据流包括一系列符号;
(b)存储器设备,用于在存储位置存储输入数据流的一系列符号;
(c)并行处理器,用于通过并行排序在存储器设备输入数据流上执行基于词典的历史搜索以生成令牌的历史搜索输出数据流,每个令牌定义一种类型,该类型为文字令牌或复制令牌,每个文字令牌定义输入数据流一系列符号的文字符号,每个具有复制参考指针的复制令牌识别输入数据流一系列符号中一个或多个复制符号的位置,该位置对应于存储所述输入数据流的所述存储器设备的存储位置中的一个存储位置,一个或多个复制符号具有所述历史搜索输出数据流的文字令牌的对应一个或多个文字符号;
(d)比较器,用于将来自所述存储器的所述存储位置的一系列符号进行比较,以识别用于并行排序的一个或多个复制符号及相应的一个或多个文字符号;
(e)存储器选择器,对于每个复制参考指针,所述存储器选择器选择对应位置的存储位置,对应位置通过各复制参考指针识别;以及
(f)输出单元,用于连接至接收设备以输出用于所述输入数据流压缩的所述历史搜索输出数据流。
2.根据权利要求1的电路,其中所述并行处理器连续生成表示所述输入数据流的标签,每个标签定义一系列符号中k个连续符号的窗口,其中k为整数,以及所述输入数据流的一系列符号的标签位置、窗口中k个连续符号中的第一个符号的标签位置及所述存储器设备中k个符号窗口的第一个符号的对应存储位置的标签位置;对于并行排序,基于k个符号的窗口排序所述标签。
3.根据权利要求2的电路,其中对于具有两个连续标签位置的第一标签和第二标签,第一标签窗口的k个符号的一部分通过(k-1)个重叠符号与第二标签窗口的k个符号的另一部分重叠。
4.根据权利要求2的电路,其中所述比较器将每个标签与预定量的邻近或相邻标签进行比较,以确定冗余的标签,对于每个冗余的标签,k个符号的窗口与另一个标签的k个符号的窗口相同。
5.根据权利要求4的电路,其中对于每个冗余标签,所述并行处理器生成用于历史搜索输出数据流的复制令牌的一个复制令牌,并且对于用于冗余标签的复制令牌的复制参考指针,所述存储器选择器选择对应于其他标签的标签位置的存储位置。
6.根据权利要求4的电路,其中所述并行处理器可根据标签位置对标签,包括冗余标签,进行排序,以生成所述文字令牌和所述复制令牌的输出数据流,在所述输出数据流中的标签位置,复制令牌与冗余标签相对应。
7.根据权利要求1的电路,在图形处理器或并行中央处理器上实现。
8.根据权利要求2的电路,其中所述复制令牌定义符号长度和所述复制参考指针的偏移值。
9.根据权利要求2的电路,其中k的范围为4-7。
10.根据权利要求2的电路,其中所述排序基于标签的k个符号窗口的词典顺序或字母顺序。
11.一种压缩设备,所述压缩设备可具有权利要求1所述电路,以及,还具有编码器和输出生成器,通过将历史搜索输出数据流的复制令牌的一部分和文字令牌的一部分合并在一起,所述编码器耦合到电路的输出单元将历史搜索输出数据流转换成压缩输出流,所述压缩输出流相对于所述输入数据流压缩,所述输出生成器用于输出所述压缩输出流。
12.根据权利要求11的压缩设备,其中通过将连续重叠复制令牌合并到较长复制令牌,所述编码器将一部分复制令牌进行合并。
13.根据权利要求11的压缩设备,其中通过将各个文字令牌合并到已合并的较大的文字令牌,所述编码器将一部分文字令牌进行合并。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201580055720.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:摇杆手柄
- 下一篇:基于物联网的共享车位服务方法及系统