[发明专利]基于网络全景图的视频轻量嵌入方法

说明书

本发明公开了一种基于网络全景图的视频轻量嵌入方法，包括：在视频中选择活动目标，从视频中以帧为单位分离活动目标，形成活动目标序列，存储活动目标每个像素在视频中的位置，对活动目标序列中的相邻活动目标的像素进行插值或删除运算；在网络全景图中设置活动目标序列的嵌入位置，活动目标序列中每一个活动目标与网络全景图嵌入位置背景进行滤波，以使活动目标与嵌入位置背景的像素数据平滑；嵌入位置的确定方法包含视频与网络全景图的位置匹配或配准；在网络全景图播放过程中，活动目标序列在嵌入位置进行动态展示。本发明技术方案将视频中活动目标与全景图融合为整体，减小了内容传输的网络带宽，扩充了网络全景图对动态内容的展示能力。

技术领域

本发明涉及网络全景图领域，特别是涉及一种基于网络全景图的视频轻量嵌入方法。

背景技术

随着互联网HTML5技术的广泛应用，网络全景图在互联网的传播不再依赖Flash、SilverLight等插件，用户直接通过支持HTML5技术的客户端与服务端的全景图进行交互。在虚拟旅游、虚拟购物、数字展馆以及地理导航领域，网络全景图都以其互动能力强，分辨率高，体积轻量等特点被广发应用。在工程实践中，全景图是物理实景在空间上的组合展示，对基于时间变化的视频内容展现能力较差。在现有技术中，视频作为网络全景图的独立模块嵌入到全景图中，一方面视频体积较大，需要占用较多的网络带宽，消耗较多的系统资源；另一方面，视频内容与网络全景图内容没有进行融合，内容再现形式局限，尤其是视频场景与网络全景图的场景相同时，两者不能基于一种背景展示内容，用户体验欠佳。

鉴于此，本发明的目的在于提供一种基于网络全景图的视频轻量嵌入方法，将视频中的活动目标提取后嵌入到网络全景图中，以缓解现有技术存在的问题。

发明内容

一种基于网络全景图的视频轻量嵌入方法，包括：在视频中选择活动目标，从视频中以帧为单位分离活动目标，形成活动目标序列，存储活动目标每个像素在视频中的位置；对活动目标序列中的相邻活动目标的像素进行插值或删除运算；在网络全景图中设置活动目标序列的嵌入位置，活动目标序列中每一个活动目标与网络全景图嵌入位置背景进行滤波，以使活动目标与嵌入位置背景的像素数据平滑；嵌入位置的确定方法包含视频与网络全景图的位置匹配或配准；在网络全景图播放过程中，活动目标序列在嵌入位置进行动态展示。

进一步地，在视频中选择活动目标的方法，包括以下至少一种：根据活动目标的时域特征，将视频每一帧中的活动目标进行检测；根据活动目标的光流特性，检测视频中活动目标的轮廓。

进一步地，视频与网络全景图的位置匹配，包括：在活动目标序列中选择任一活动目标，在活动目标上设置至少一个第一标记点，在网络全景图上设置相同数量的第二标记点，至少一个第一标记点形成的图形经过旋转、平移、缩放、仿射中的至少一种图形运算映射到第二标记点形成的图形；活动目标序列进行相同的图形运算映射到网络全景图的嵌入位置。

进一步地，视频与网络全景图的配准，包括：如果网络全景图与视频对应同一物理实景时，视频以帧为单位形成的图像与网络全景图进行图像配准，得到视频到网络全景图的变换矩阵；通过变换矩阵运算，活动目标序列映射到网络全景图的嵌入位置。

进一步地，活动目标序列在嵌入网络全景图前，包括以下至少一种处理：活动目标序列的亮度调整至与网络全景图一致；活动目标序列根据网络全景图的光源配置，在活动目标上设置亮度退化。

进一步地，活动目标序列在嵌入位置进行动态展示，包括以下至少一种：如果网络全景图的显示区域包含活动目标序列的嵌入位置，活动目标序列在嵌入位置进行动态展示；如果网络全景图接收到鼠标、键盘、语音、视频、图像中至少一种触发，活动目标序列在嵌入位置进行动态展示。

进一步地，如果视频包含声音，在目标序列动态展示时，根据目标序列开始时刻播放声音。