[发明专利]视频信息数据处理方法、装置、计算机设备和存储介质在审
申请号: | 201910301087.9 | 申请日: | 2019-04-15 |
公开(公告)号: | CN110134830A | 公开(公告)日: | 2019-08-16 |
发明(设计)人: | 谭莉 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | G06F16/783 | 分类号: | G06F16/783;G06F16/74;G06F16/75 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 王宁;李文渊 |
地址: | 518052 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 关键特征 关联数据 视频信息 视频元素 数据处理 计算机设备 存储介质 关联模型 数据关联 展示信息 存储 匹配准确度 多个目标 获取数据 目标视频 匹配成功 视频输入 选择数据 大数据 高效性 推送 匹配 视频 申请 | ||
本申请涉及大数据领域,提供了一种视频信息数据处理方法、装置、计算机设备和存储介质。方法包括:获取已训练的提取模型和数据关联模型,将当前视频输入提取模型中,提取出视频的多个目标视频元素,将各个目标视频元素与数据关联模型里存储的关键特征进行匹配,将匹配成功的关键特征作为目标关键特征,获取数据关联模型里存储的与所述目标关键特征对应的关联数据,将关联数据作为展示信息显示。通过提取模型准确提取视频元素,再选择数据关联模型中与视频元素匹配准确度高的关键特征对应的关联数据作为展示信息显示,能够向用户推送更准确的信息,提高了视频信息数据处理的高效性和准确性。
技术领域
本申请涉及计算机技术领域,特别是涉及一种视频信息数据处理方法、装置、计算机设备和存储介质。
背景技术
随着计算机多媒体技术的飞速发展,视频作为多媒体的重要组成部分,越来越活跃在人们的视野范围内,人们通过观看视频能获取到丰富的信息。目前,人们在观看视频时,想进一步了解视频内容,会根据视频中一些关键字,然后通过浏览器搜索相关信息进一步的了解视频内容。然而,当对视频内容原本信息就有缺失的用户偶然观看到一段不完整视频时,比如只有几秒钟的视频广告,用户虽然对视频的内容感兴趣,但是又不清楚视频内容中涉及的具体信息,比如视频广告中具体的产品型号,用户通过肉眼观看视频后,再使用一些关键字进行搜索时,受关键字准确率的影响,往往得出的信息也是不准确的,导致无法进行精确搜索。
发明内容
基于此,有必要针对用户无法更准确的进一步的了解视频内容的技术问题,提供高效且准确性高的视频信息数据处理方法、装置、计算机设备和存储介质。
一种视频信息数据处理方法,所述方法包括:
获取已训练的提取模型和数据关联模型;
将当前视频输入所述提取模型中,提取出所述当前视频的多个目标视频元素;
将所述各个目标视频元素与所述数据关联模型里存储的关键特征进行匹配;
将匹配成功的关键特征作为目标关键特征;
获取所述数据关联模型里存储的与所述目标关键特征对应的关联数据,将所述关联数据作为展示信息显示。
在一个实施例中,所述提取模型包括图像子模型、语音子模型、声纹子模型,所述提取模型的训练步骤包括:
获取训练样本集,所述训练样本集包括标注图像集、标注语音集、标注声纹集,所述标注图像集中的标注图像包含图像特征,所述标注语音集中的标注语音包含语音特征,所述标注声纹集中的标注声纹包含声纹特征;
获取训练视频;
将所述标注图像集和所述训练视频输入初始图像子模型中,所述初始图像子模型对所述训练视频进行分割,提取出所述训练视频的分割图像;
将所述标注语音集和所述训练视频输入初始语音子模型中,所述初始语音子模型对所述训练视频进行分割,提取出所述训练视频的分割音频;
将所述标注声纹集和所述训练视频输入初始声纹子模型中,所述初始声纹子模型对所述训练视频进行分割,提取出所述训练视频的分割声纹;
根据所述训练视频的分割图像和所述图像特征调整所述初始图像子模型的模型参数,根据所述训练视频的分割音频和所述语音特征调整所述初始语音子模型的模型参数,根据所述训练视频的分割声纹和所述声纹特征调整所述初始声纹子模型的模型参数,直至所述初始图像子模型、初始语音子模型、初始声纹子模型都满足收敛条件,得到已训练的所述提取模型。
在一个实施例中,所述数据关联模型包括多个数据关联子模型,数据关联模型的建立步骤包括:
将所述标注图像集中的标注图像、所述标注语音集中的标注语音、所述标注声纹集中的标注声纹作为所述关键特征,并存储;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910301087.9/2.html,转载请声明来源钻瓜专利网。