[发明专利]视频传输方法、装置及计算机可读存储介质在审
申请号: | 202210228829.1 | 申请日: | 2022-03-08 |
公开(公告)号: | CN114973051A | 公开(公告)日: | 2022-08-30 |
发明(设计)人: | 霍永凯;邝宏业 | 申请(专利权)人: | 深圳大学 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06N3/08;G06N3/04;G06V10/25;G06V10/82 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 熊海武 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 传输 方法 装置 计算机 可读 存储 介质 | ||
1.一种视频传输方法,其特征在于,所述视频传输方法包括以下步骤:
获取目标全景视频的待传输视频片段,以及所述待传输视频片段中各个视频帧对应的基础图块;
基于所述目标全景视频对应的目标用户的历史视点轨迹,通过目标强化学习模型的分割模型对所述基础图块进行分割,以获得各个基础图块对应的子图块;
基于所述待传输视频片段对应的历史带宽信息,通过目标强化学习模型的质量分配模型确定各个子图块对应的比特率;
基于所述比特率以及所述子图块传输所述待传输视频片段至所述目标用户对应的目标终端。
2.如权利要求1所述的视频传输方法,其特征在于,所述基于所述目标全景视频对应的目标用户的历史视点轨迹,通过目标强化学习模型的分割模型对所述基础图块进行分割,以获得各个基础图块对应的子图块的步骤包括:
将历史视点轨迹输入第一LSTM长短期记忆网络模型进行模型训练,以获得各个所述基础图块中各个图块区域对应的预测观看概率;
基于各个预测观看概率所属的观看概率范围以及所述图块区域,通过所述分割模型确定所述基础图块对应的图块;
基于所述图块对应的观看概率范围,通过所述分割模型确定各个图块对应的图像质量,以获得各个基础图块对应的子图块。
3.如权利要求1所述的视频传输方法,其特征在于,所述基于所述待传输视频片段对应的历史带宽信息,通过目标强化学习模型的质量分配模型确定各个子图块对应的比特率的步骤包括:
将所述历史带宽信息输入第二LSTM模型进行模型训练,以获得预测带宽信息;
基于所述预测带宽信息以及各个子图块对应的预测观看概率,通过强化学习模型确定各个子图块对应的比特率。
4.如权利要求1所述的视频传输方法,其特征在于,所述基于所述比特率以及所述子图块传输所述待传输视频片段至所述目标用户对应的目标终端的步骤之后,还包括:
获取所述待传输视频片段对应的观看体验信息以及所述带宽利用率,并基于所述观看体验信息以及所述带宽利用率确定所述待传输视频片段对应的第一奖励信息;
基于各个子图块对应的编码效率惩罚信息以及带宽浪费惩罚信息,确定各个子图块对应的第二奖励信息,并基于各个所述子图块的窗口质量、窗口平滑度以及子卡顿时间信息,确定各个子图块对应的第三奖励信息;
关联存储所述第一奖励信息、第二奖励信息以及第三奖励信息至预设存储区域。
5.如权利要求4所述的视频传输方法,其特征在于,所述获取所述待传输视频片段对应的观看体验信息以及所述带宽利用率的步骤包括:
获取所述待传输视频片段对应的视口平均质量、平滑度以及视频视口的质量空间变化信息,并获取所述待传输视频片段对应的卡顿时间信息;
基于所述卡顿时间信息、视口平均质量、平滑度以及视频视口的质量空间变化信息,确定所述待传输视频片段对应的观看体验信息;
基于所述用户视点轨迹、所述子图块对应的第一子存储空间信息以及所述基础图块对应的第一存储空间信息,确定所述待传输视频片段对应的带宽利用率。
6.如权利要求5所述的视频传输方法,其特征在于,所述获取所述待传输视频片段对应的视口平均质量、平滑度以及视频视口的质量空间变化信息的步骤包括:
获取所述子图块对应的第一子存储空间信息,基于所述第一子存储空间信息确定各个所述子图块对应的第一图像质量信息;
获取所述待传输视频片段对应的用户视点轨迹,基于所述用户视点轨迹以及所述视频帧的数量,确定确定各个所述子图块对应的权重信息;
基于所述子图块对应的权重信息以及所述第一图像质量信息,确定所述待传输视频片段对应的视口平均质量、平滑度以及视频视口的质量空间变化信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳大学,未经深圳大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210228829.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种压敏测量装置
- 下一篇:抗-CGRP抗体制剂