[发明专利]一种具备交互功能的音视频创建、播放方法及装置有效
申请号: | 201910263196.6 | 申请日: | 2019-04-02 |
公开(公告)号: | CN109889921B | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 孙晓刚;戴帅湘 | 申请(专利权)人: | 杭州蓦然认知科技有限公司 |
主分类号: | H04N21/8547 | 分类号: | H04N21/8547;H04N21/845;H04N21/44;H04N21/439;H04N21/232;H04N21/435;H04N21/472;H04N21/478 |
代理公司: | 北京智丞瀚方知识产权代理有限公司 11810 | 代理人: | 杨乐 |
地址: | 310024 浙江省杭州市西*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 具备 交互 功能 视频 创建 播放 方法 装置 | ||
1.一种具备交互功能的音视频创建方法,其特征在于,所述方法包括:
获取待处理的音视频资源;对音视频资源进行分析处理,将所述音视频资源转换为内容数据以及与内容数据对应的播放时间;其中所述对音视频资源进行分析处理具体包括根据所述音视频资源中的视频数据,提取视频帧图像中的信息元素,所述信息元素包括播放时间数据以及内容数据;根据所述音视频资源中的音频数据,获取所述音频数据对应的文字内容数据以及与所述文字内容数据对应的播放时间;通过数据结构表存储转换的内容数据以及与内容数据对应的播放时间;
创建多个时间标签,所述时间标签包括音视频播放时间,或者音视频播放时间区间;
根据时间标签,对内容数据进行切分,提取一个或多个关键内容数据,关联音视频播放时间对应的时间标签与所述一个或多个关键内容数据;其中,所述关键内容数据包含属性值,其中所述属性值指示关键内容数据为被动展示或关键内容数据为主动展示;
创建对应于所述一个或多个关键内容数据的交互组件;所述交互组件包括与关键内容数据相关联的应用、插件或配置文件;构建基于图形的数据结构,其中所述基于图形的数据结构包含复数个数据节点,以及指示数据节点之间关系的一个或多个连接边,其中所述复数个数据节点包含一个或多个时间节点、一个或多个关键内容数据节点和一个或多个交互组件节点,所述连接边对应于时间、关键内容数据与交互组件节点的逻辑关联;所述连接到关键内容数据节点的多个交互组件节点具有不同的优先指数;使得当所述关键内容数据属性值为主动展示时,能够调用所述数据结构,基于播放时间对应的所述数据结构中的时间节点,根据所述数据结构确定出一个或多个交互组件节点,并根据所述交互组件节点的优先指数选择具有最高优先指数的交互组件节点,从而以浮动界面显示或跳转至所述交互组件;
将属于同一时间标签的关键内容数据及其对应的交互组件与音视频资源片段绑定。
2.根据权利要求1所述的方法,其特征在于,所述提取一个或多个关键内容数据包括
对内容数据进行分析,将所述内容数据拆分为一个或多个语义段落;
基于所述语义段落,确定段落内分词内容关键度,提取关键内容数据。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括
对绑定关键内容数据以及关键内容数据对应的交互组件的音视频资源片段进行封装,构建可交互的音视频资源;
存储可交互的音视频资源。
4.一种具备交互功能的音视频播放方法,其特征在于,所述具备交互功能的音视频是根据权利要求1-3任一项方法创建;所述播放方法进一步包括:
步骤201,判断是否接收用户指令,若是,确定接收用户指令时的音视频资源的播放时间;
步骤202,提取所述播放时间对应的时间标签及关键内容数据;
步骤203,判断用户指令是否符合第一触发条件,若符合第一触发条件,暂停播放;
步骤204,根据所述用户指令和所述关键内容数据,向用户提供与用户指令相关的交互服务。
5.根据权利要求4所述的方法,其特征在于,
所述用户指令可以包括:语音交互指令,和/或体感交互指令,和/或触控交互指令。
6.根据权利要求4所述的方法,其特征在于,所述步骤201还包括
步骤2011,若未接收用户指令,判断当前播放时间对应的时间标签是否存在关键内容数据;
步骤2012,若存在关键内容数据,进一步判断关键内容数据属性;
步骤2013,若标签属性为主动展示,调用关键内容数据交互组件与用户交互。
7.根据权利要求4所述的方法,其特征在于,所述判断用户指令是否符合第一触发条件具体还包括
步骤2031,解析用户指令,转换用户指令为第一文本数据;
步骤2032,判断所述第一文本数据是否符合所述第一触发条件,其中所述第一触发条件包括所述第一文本数据与关键内容数据相似度大于第一预设阈值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州蓦然认知科技有限公司,未经杭州蓦然认知科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910263196.6/1.html,转载请声明来源钻瓜专利网。