[发明专利]多媒体数据与其关联互动数据的同步方法和装置

说明书

本发明公开了一种多媒体数据与其关联互动数据的同步方法，该方法包括：接收来自运营管理台的针对互动数据的下发请求；接收来自运营管理台的互动数据和用于多媒体数据的编码配置；基于编码配置计算出多媒体数据编码后的时间戳与互动数据的插入时间点之间的时间偏移量；以及基于时间偏移量将互动数据在多媒体数据处理后台的接入层中插入到多媒体数据中。还公开了一种同步装置和计算机可读存储介质。

技术领域

本发明涉及多媒体数据的同步方法，具体来说涉及一种同步多媒体数据与其关联的互动数据的方法、装置和计算机可读存储介质。

背景技术

在大型直播活动中需要实时与观众侧用户进行互动的场景下，需要多媒体数据有较高的稳定性，并且互动数据与直播多媒体数据在绝对时间上保持强一致性。不同的直播设备（例如演播室的采集器、手机等）编码能力不同，并且从主播端发起的互动数据需要经过采集与编码、直播流后台以及内容分发网络CDN（Content Delivery Network），最终到观众端，因此互动数据（例如，用于展示信息、展示广告、下发指令等）与直播流的同步展示比较困难，往往会出现互动数据早于对应的直播时间点展现到用户端，造成互动时间点与直播画面不匹配，影响用户的整体互动体验。

发明内容

提供一种可以缓解、减轻或消除上述问题的解决方案将是有利的。

根据本发明的一方面，提供了一种多媒体数据与其关联互动数据的同步方法，该方法包括：接收来自运营管理台的针对互动数据的下发请求；接收来自运营管理台的互动数据和用于多媒体数据的编码配置；基于编码配置计算出多媒体数据编码后的时间戳与互动数据的插入时间点之间的时间偏移量；以及基于时间偏移量将互动数据在多媒体数据处理后台的接入层中插入到多媒体数据中。

根据一个实施例，基于编码配置计算出多媒体数据编码后的时间戳与互动数据的插入时间点之间的时间偏移量包括：通过多媒体数据的编码时间与接收互动数据的延迟时间的差值来计算时间偏移量。

根据一个实施例，基于编码配置计算出多媒体数据编码后的时间戳与互动数据的插入时间点之间的时间偏移量还包括：预先将编码配置同步并存储在运营管理台中。

根据一个实施例，该方法还包括基于编码配置参数设定多媒体数据的编码时间。

根据一个实施例，基于编码配置参数设定多媒体数据的编码时间还包括：基于至少两个编码配置参数的加权和来设定多媒体数据的编码时间。

根据一个实施例，编码配置中的编码配置参数包括码率、帧率和画面组。

根据一个实施例，基于时间偏移量将互动数据在多媒体数据处理后台的接入层中插入到多媒体数据中还包括：通过最新接收到的帧的时间戳是否大于等于时间偏移量来判断最新接收到的多媒体数据的帧是否是互动数据意图与其同步发送的帧，并在最新接收到的帧的时间戳大于等于时间偏移量时，在最新接收到的时间戳开始的时间处将互动数据在直播流后台的接入层中插入到多媒体数据中。

根据本发明的另一方面提供了一种多媒体数据与其关联互动数据的同步装置，装置包括：接收模块，接收来自运营管理台的针对互动数据的下发请求，以及接收来自运营管理台的互动数据和用于多媒体数据的编码配置；计算模块，基于编码配置计算出多媒体数据编码后的时间戳与互动数据的插入时间点之间的时间偏移量；以及插入模块，基于时间偏移量将互动数据在多媒体数据处理后台的接入层中插入到多媒体数据中。

根据一个实施例，计算模块基于编码配置计算出多媒体数据编码后的时间戳与互动数据的插入时间点之间的时间偏移量包括：计算模块通过多媒体数据的编码时间与接收互动数据的延迟时间的差值来计算时间偏移量。

根据一个实施例，计算模块基于编码配置计算出多媒体数据编码后的时间戳与互动数据的插入时间点之间的时间偏移量还包括：计算模块预先将编码配置同步并存储在运营管理台中。