[发明专利]视频快速切片方法、装置及电子设备有效
申请号: | 201910622592.3 | 申请日: | 2019-07-11 |
公开(公告)号: | CN110381391B | 公开(公告)日: | 2021-11-09 |
发明(设计)人: | 高永强 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | H04N21/845 | 分类号: | H04N21/845;H04N21/44 |
代理公司: | 北京竹辰知识产权代理事务所(普通合伙) 11706 | 代理人: | 陈龙 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 快速 切片 方法 装置 电子设备 | ||
本公开实施例提供了一种视频快速切片方法、装置及电子设备,所述方法包括:将所述视频划分为一个或多个视频片段;计算所述一个或多个视频片段的平均图集合;将所述平均图集合输入切片网络以便基于所述切片网络用于对所述平均图集合进行分类;以及根据所述切片网络的输出来标记所述平均图集合以将所述视频切分成一个或多个切片。通过本公开的处理方案,能够将视频自动地切分成包含相同主题的多个切片,从而方便用户浏览和阅读。
技术领域
本公开涉及视频处理技术领域,尤其涉及一种视频快速切片方法、装置及电子设备。
背景技术
随着4G技术与移动互联网技术的日趋成熟以及移动端设备大量的普及,用户能够更加便捷地获取信息、资讯、娱乐的需求与日俱增。生活节奏加快以及娱乐时间碎片化的现状,使得短视频——以新媒体为传播渠道,时长在3分钟以内的传播载体,通过占据用户大量碎片时间的方式蔚然成风。
而原始视频(未经过编辑的视频)通常可能包含多个主题的内容,从原始视频中截取精彩片段、高光时刻或者个性化定制片段的短视频生产方式,正好满足了用户在碎片化的时间中对热门影视剧作品、竞技体育类、综艺娱乐类等长视频资源的观赏需求,也符合时下用户期望快速获得娱乐资源或者能够获取个性化娱乐资源的消费习惯。因此,需要基于原始视频中包含的内容对视频执行切片操作
目前,各大视频平台的视频精彩集锦大多是通过大量专业的视频剪辑师在海量视频库中,通过人工手段对精彩片段进行定义、定位、剪辑、拼接后的处理结果。其结果有着时效性低、人工成本高、视频集锦产量低的特性,无法满足如此庞大用户群体的视听娱乐需求,也无法及时覆盖如此丰富多样的短视频内容需求。人工剪辑只能依据剧情进行剪辑,内容单一,定制化的集锦生成技术鲁棒性较差,制作的视频集锦风格种类较少,难以满足用户需求。
发明内容
有鉴于此,本公开实施例提供一种视频快速切片方法、装置及电子设备,至少部分解决现有技术中存在的问题。
第一方面,本公开实施例提供了一种视频快速切片方法,所述方法包括:
将所述视频划分为一个或多个视频片段;
计算所述一个或多个视频片段的平均图集合;
将所述平均图集合输入切片网络以便基于所述切片网络用于对所述平均图集合进行分类;以及
根据所述切片网络的输出来标记所述平均图集合以将所述视频切分成一个或多个切片。
根据本公开实施例的一种具体实现方式,所述计算所述一个或多个视频片段的平均图集合,包括:
通过公式来计算所述平均图集合,
其中,Iaverage(x,y)是视频片段的平均图在坐标(x,y)处的像素值,Ii(x,y)是第i个帧图像在坐标(x,y)处的像素值,并且N是该视频片段包含的帧图像的数量。
根据本公开实施例的一种具体实现方式,所述将所述平均图集合输入切片网络,包括:设置序列-分类器形式的循环神经网络作为所述切片网络,将获得的所述平均图集合按照视频的时间顺序输入到所述循环神经网络中,以对每个平均图进行分类。
根据本公开实施例的一种具体实现方式,所述循环神经网络为长短期记忆LSTM网络,所述长短期记忆LSTM网络包括输入门、遗忘门和输出门,
其中,所述输入门决定当前时间步的输入和前一个时间步的系统状态对内部状态的更新,
所述遗忘门决定前一个时间步内部状态对当前时间步内部状态的更新,
所述输出门决定内部状态对系统状态的更新。
根据本公开实施例的一种具体实现方式,所述切片网络的输出为多值向量,所述多值向量的值用于指示所述一个或多个切片的开始和结束。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910622592.3/2.html,转载请声明来源钻瓜专利网。