[发明专利]视频预测方法、装置、计算机设备和存储介质在审
申请号: | 202011421744.2 | 申请日: | 2020-12-08 |
公开(公告)号: | CN112581508A | 公开(公告)日: | 2021-03-30 |
发明(设计)人: | 郜杰 | 申请(专利权)人: | 上海眼控科技股份有限公司 |
主分类号: | G06T7/269 | 分类号: | G06T7/269;G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 姜晓云 |
地址: | 200030 上海市徐汇*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 预测 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及一种视频预测方法、装置、计算机设备和存储介质。所述方法包括:获取历史视频所对应的历史光流信息序列;根据所述历史光流信息序列进行预测,得到预测光流信息序列;根据所述预测光流信息序列确定预测视频对应的第一时空信息;根据所述第一时空信息和所述历史视频进行预测得到多个所述预测图像,并由多个所述预测图像组成所述预测视频。采用本方法能够提高视频预测的准确度。
技术领域
本申请涉及图像预测技术领域,特别是涉及一种视频预测方法、装置、计算机设备和存储介质。
背景技术
由于视频能够提供丰富的视觉信息,因此越来越多的信息展现都会采用视频方式。随着计算机技术和图像处理技术的发展,出现了视频预测技术。将视频预测技术应用到自动驾驶领域、天气预测领域等多个领域,可以为人们的工作和生活提供极大地便利。
相关技术中,视频预测技术通常是利用光流法对于历史视频图像进行外推,得到未来视频图像。但是,利用光流法进行图像外推存在预测不准确的问题。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高预测准确度的视频预测方法、装置、计算机设备和存储介质。
一种视频预测方法,该方法包括:
获取历史视频所对应的历史光流信息序列;历史视频由N个历史图像按照时间顺序排列组成,历史光流信息序列包括N-1个历史光流信息,历史光流信息表征一个历史图像与前一个历史图像之间的光流变化特征;
根据历史光流信息序列进行预测,得到预测光流信息序列;预测光流信息序列包括多个预测光流信息,预测光流信息表征每个预测图像与前一个图像之间的光流变化特征;
根据预测光流信息序列确定预测视频对应的第一时空信息;第一时空信息包括各预测图像对应的时间特征和空间特征;
根据第一时空信息和历史视频进行预测得到多个预测图像,并由多个预测图像组成预测视频。
在其中一个实施例中,上述根据预测光流信息序列确定预测视频对应的第一时空信息,包括:
根据预测光流信息序列和第N个历史图像进行形变处理,得到各预测图像所对应的图像内容信息;
将各预测图像所对应的图像内容信息输入到预先训练的编码网络中,得到编码网络输出的各预测图像对应的时间特征和空间特征,并由多个预测图像对应的时间特征和空间特征组成第一时空信息。
在其中一个实施例中,上述根据预测光流信息序列和第N个历史图像进行形变处理,得到各预测图像所对应的图像内容信息,包括:
根据第1个预测光流信息对第N个历史图像进行形变处理,得到第1个预测图像所对应的图像内容信息;
根据第i个预测光流信息对第i-1个预测图像进行形变处理,得到第i个预测图像所对应的图像内容信息;其中,i为大于1的正整数。
在其中一个实施例中,上述根据第一时空信息和历史视频进行预测得到多个预测图像,包括:
将历史视频和第一时空信息均输入到视频预测网络中,利用视频预测网络对历史视频进行特征提取,并根据提取出的第二时空信息和第一时空信息进行预测得到多个预测图像;第二时空信息包括各历史图像对应的时间特征和空间特征。
在其中一个实施例中,上述视频预测网络包括特征提取层,上述利用视频预测网络对历史视频进行特征提取,包括:
将N个历史图像分别输入到特征提取层,得到特征提取层输出的每个历史图像对应的时间特征和空间特征,并由多个历史图像对应的时间特征和空间特征组成第二时空信息。
在其中一个实施例中,上述视频预测网络包括视频预测层,上述根据提取出的第二时空信息和第一时空信息进行预测得到多个预测图像,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海眼控科技股份有限公司,未经上海眼控科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011421744.2/2.html,转载请声明来源钻瓜专利网。