[发明专利]内容生成方法、装置以及介质在审
申请号: | 202010302033.7 | 申请日: | 2020-04-16 |
公开(公告)号: | CN111597381A | 公开(公告)日: | 2020-08-28 |
发明(设计)人: | 刘庆同;薛子育;王磊;郭沛宇 | 申请(专利权)人: | 国家广播电视总局广播电视科学研究院 |
主分类号: | G06F16/738 | 分类号: | G06F16/738;G06F16/783;G06F16/75 |
代理公司: | 北京博雅睿泉专利代理事务所(特殊普通合伙) 11442 | 代理人: | 马铁良 |
地址: | 100866 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 内容 生成 方法 装置 以及 介质 | ||
1.一种内容生成方法,其特征在于,包括:
对内容素材进行音视频分离处理,得到视频文件和音频文件;
从视频文件中提取出视频特征,对视频特征进行分析以得到视频分析结果;
从音频文件中提取出音频特征,对音频特征进行分析以得到音频分析结果;
根据视频分析结果和音频分析结果,确定视频文件的场景;
根据视频分析结果、音频分析结果以及视频文件的场景,从视频文件中选取出关键视频片段;
为关键视频片段对齐相应的音频片段,得到关键内容片段;
基于关键内容片段生成目标内容。
2.根据权利要求1所述的方法,基于第一深度卷积神经网络从视频文件中提取出所述视频特征,基于第二深度卷积神经网络从音频文件中提取出所述音频特征。
3.根据权利要求1所述的方法,在从视频文件中提取出视频特征之前,还包括:过滤掉视频文件中的无效镜头。
4.根据权利要求3所述的方法,所述无效镜头包括抖动镜头、长时间静止镜头、黑屏镜头、模糊镜头。
5.根据权利要求1所述的方法,所述对视频特征进行分析,至少包括下列步骤之一:检测人物、检测人脸、检测人物的动作、检测目标物体。
6.根据权利要求1所述的方法,所述对音频特征进行分析,至少包括下列步骤之一:提取有效声音、检测人声。
7.根据权利要求6所述的方法,所述对音频特征进行分析,还包括下列步骤之一:情感分析、内容预测、声音场景分析。
8.根据权利要求6所述的方法,声音场景包括无人声场景、室内讲话场景、室外讲话场景。
9.根据权利要求8所述的方法,根据视频分析结果和音频分析结果,确定视频文件的场景,包括:
根据视频分析结果和声音场景分析结果,确定视频文件的场景。
10.根据权利要求1所述的方法,所述根据视频分析结果、音频分析结果以及视频文件的场景,从视频文件中选取出关键视频片段,包括:
根据视频文件的场景,选择对应场景的内容生成模型;
将视频文件、视频分析结果以及音频分析结果输入至所述内容生成模型中,由所述内容生成模型从视频文件中选取出关键视频片段。
11.一种内容生成装置,其特征在于,包括存储器和处理器;所述存储器存储有计算机程序,所述计算机程序被所述处理器执行时实现权利要求1-10中任一项所述的内容生成方法。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-10中任一项所述的内容生成方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国家广播电视总局广播电视科学研究院,未经国家广播电视总局广播电视科学研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010302033.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种制造系统检验项目柔性定义和使用方法
- 下一篇:SIM卡控制方法及电子设备
- 内容再现系统、内容提供方法、内容再现装置、内容提供装置、内容再现程序和内容提供程序
- 内容记录系统、内容记录方法、内容记录设备和内容接收设备
- 内容服务系统、内容服务器、内容终端及内容服务方法
- 内容分发系统、内容分发装置、内容再生终端及内容分发方法
- 内容发布、内容获取的方法、内容发布装置及内容传播系统
- 内容提供装置、内容提供方法、内容再现装置、内容再现方法
- 内容传输设备、内容传输方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容发送设备、内容发送方法、内容再现设备、内容再现方法、程序及内容分发系统
- 内容再现装置、内容再现方法、内容再现程序及内容提供系统
- 内容记录装置、内容编辑装置、内容再生装置、内容记录方法、内容编辑方法、以及内容再生方法