[发明专利]消息存储方法、装置、设备及存储介质

说明书

本发明实施例公开了一种消息存储方法、装置、设备及存储介质。该方法包括：获得待存储消息；将待存储消息存储在消息日志文件中；从检查点文件中提取最大自增消息序列值对应的消息在消息日志文件中的偏移地址；根据偏移地址，获取偏移地址对应的消息的自增消息序列值；比较获得的自增消息序列值与待存储消息对应的自增消息序列值；根据比较结果，生成待存储消息对应的消息索引信息；将消息索引信息存储在消息索引文件中。本发明实施例的消息存储方法、装置、设备及存储介质，能够提高消息存储系统的性能，减少消息存储系统维护难度，提高消息存储系统的处理效率。

技术领域

本发明涉及数据存储技术领域，尤其涉及一种消息存储方法、装置、设备及存储介质。

背景技术

消息系统一般包含三个角色：消息发送者、消息接收者和消息队列。其中，消息发送者生产并发送消息至消息队列，消息队列存储消息并建立消息索引，消息接收者接收消息。消息队列作为在消息的传输过程中保存消息的容器，在整个消息系统中占据核心地位，消息队列的设计直接关系到整个消息系统的性能。

当前主流的消息存储系统中，消息的存储一般基于关系型数据库和文件系统。基于关系型数据库的消息存储系统，消息会被直接存储在对应的表中，对消息的读写操作，需要通过对表的操作来完成；基于文件系统的消息存储系统，一般会有日志文件和索引文件组成，消息存储在日志文件中，通过索引文件对消息进行索引。

基于关系型数据库存储的消息，受限于关系型数据库本身的能力，一般性能都比较差，应用数据修改可能会触发数据库数据结构修改，带来共享数据的应用改造，增加维护集成难度。基于文件系统存储的消息，一般存储和索引结构设计复杂，维护难度较高。

发明内容

本发明实施例提供一种消息存储方法、装置、设备及存储介质，能够提高消息存储系统的性能，减少消息存储系统维护难度，提高消息存储系统的处理效率。

一方面，本发明实施例提供了一种消息存储方法，方法包括：

获得待存储消息；

将待存储消息存储在消息日志文件中；

从检查点文件中提取最大自增消息序列值对应的消息在消息日志文件中的偏移地址；

根据偏移地址，获取偏移地址对应的消息的自增消息序列值；

比较获得的自增消息序列值与待存储消息对应的自增消息序列值；

根据比较结果，生成待存储消息对应的消息索引信息；

将消息索引信息存储在消息索引文件中。

在本发明的一个实施例中，根据比较结果，生成待存储消息对应的消息索引信息，包括：

若获得的自增消息序列值小于待存储消息对应的自增消息序列值，根据待存储消息对应的自增消息序列值、待存储消息在消息日志文件中的偏移地址、待存储消息占用的字节数与待存储消息对应的校验和占用的字节数之和，生成待存储消息对应的消息索引信息。

在本发明的一个实施例中，本发明实施例提供的消息存储方法还包括：

将检查点文件中存储的最大自增消息序列值对应的消息在消息日志文件中的偏移地址，修改为待存储消息在消息日志文件中的偏移地址。

在本发明的一个实施例中，根据比较结果，生成待存储消息对应的消息索引信息，包括：

若获得的自增消息序列值不小于待存储消息对应的自增消息序列值，将待存储消息对应的自增消息序列值修改为用于表示消息为重复消息的标识信息，根据标识信息、待存储消息在消息日志文件中的偏移地址、待存储消息占用的字节数与待存储消息对应的校验和占用的字节数之和，生成待存储消息对应的消息索引信息。