[发明专利]一种基于视频脚本语义识别的视频生产方法及装置

说明书

本申请提供了一种基于视频脚本语义识别的视频生产方法及装置，所述方法包括获取用户给定的视频生产脚本，所述视频生产脚本中携带有多条视频制作语句，每条视频制作语句包括素材类型识别标签及素材属性标签，所述素材属性标签包括素材描述和/或素材展现形式；根据所述素材类型识别标签确定进行素材选取的素材库，在所述素材库中，根据所述素材属性标签确定素材和/或确定素材的运行方式，将所述素材按所述视频生产脚本中视频制作语句的顺序生成视频。通过上述方法或装置，本申请能够智能分析出海量视频素材，结合语义理解视频脚本，自动生成短视频。

技术领域

本申请属于视频处理技术领域，特别涉及一种基于视频脚本语义识别的视频生产方法及装置。

背景技术

传统的短视频人工生产方式的主要包括以下步骤：1、内容策划，编写视频脚本；2、拍摄素材或者将现有内容编辑为可用素材；3、使用视频编辑工具按照脚本将素材编辑为完整视频。这个过程每个步骤都需要消耗比较大的人力资源和时间在里面

现有一种视频模板的自动生产方式，即事前针对某种特定场景编辑一组固定的视频素材，然后使用者输入的指定文本内容，进行字幕和文字展示内容与语音替换。这种方式生产的视频形式基本固定，除了文字内容部分，视频画面内容相对固定。相当于视频脚本是固定模式并且素材也只能在比较小的范围内选择。这种方式虽然解决了一部分人工与时间成本，但应用场景有局限性，但对于一些自定义的视频脚本并不能应用此种方式解决人力和时间的消耗。例如交通事故相关的模板就只能局限在生产交通事故相关的视频上，如果想生产其他内容的视频，一种方式是系统开发人员增加相关的模板，这样就增加了开发人员的工作，或者由视频编辑人员自己手动替换模板中的素材，这样的话就增加了视频编辑人员的工作量。

发明内容

为了解决上述技术问题至少之一，本申请提供了一种基于视频脚本语义识别的视频生产方法及装置。

本申请的第一个方面，一种基于视频脚本语义识别的视频生产方法，包括：获取用户给定的视频生产脚本，所述视频生产脚本中携带有多条视频制作语句，每条视频制作语句包括素材类型识别标签及素材属性标签，所述素材属性标签包括素材描述和/或素材展现形式；根据所述素材类型识别标签确定进行素材选取的素材库，在所述素材库中，根据所述素材属性标签确定素材和/或确定素材的展现形式，将所述素材按所述视频AI生产脚本智能整合修改相关素材生成视频。

优选的是，根据所述素材属性标签确定素材包括：解析所述素材属性标签对应的素材选取规则；根据所述素材选取规则在对应素材库中进行素材的检索与提取，其中，按照与素材选取规则对应的划分逻辑进行素材划分并标注的方式构建所述素材库。

优选的是，构建所述素材库包括：将包含素材的视频进行片段划分；获取素材处理者对划分后的各素材片段进行的视频描述；将进行了视频描述后的素材片段按照预定的划分逻辑存入不同素材库，其中，所述预定的划分逻辑包括但不限于素材片段的时长，素材片段的分辨率，或者素材片段的视频描述。

优选的是，将进行了视频描述后的素材片段存入素材库包括：计算待入库的素材片段的感知哈希值；确定与待入库的素材片段的视频描述一致的素材库中是否存在相似感知哈希值的素材片段，若存在相似感知哈希值的素材片段，且待入库的素材片段与所述具有相似感知哈希值的素材片段的md5值不同，则将待入库的素材片段存入该视频描述所对应的素材库中，否则，将待入库的素材片段提交人工处理，由人工确定所述待入库的素材片段是否存入该视频描述对应的素材库；其中，所述相似感知哈希值是指两个感知哈希值的汉明距离小于预设值。

优选的是，根据所述素材属性标签确定素材的运行方式包括：校验所述素材属性标签与预制的素材处理命令是否一致，若一致，则按照预制的素材处理命令对所述素材进行处理。