[发明专利]一种视频中人物特写片段的检测方法及装置有效
申请号: | 202010181935.X | 申请日: | 2020-03-16 |
公开(公告)号: | CN111401238B | 公开(公告)日: | 2023-04-28 |
发明(设计)人: | 杨杰;宋施恩;金义彬;肖恺吟;卢海波 | 申请(专利权)人: | 湖南快乐阳光互动娱乐传媒有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V40/16;G06V10/70;G06V10/82;G06N3/0464 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 林哲生 |
地址: | 410003 湖南省*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 人物 特写 片段 检测 方法 装置 | ||
本发明提供了一种视频中人物特写片段的检测方法及装置,通过调用预先构建的人像检测模型对视频中的每个视频帧进行人像检测,得到多个人像视频帧,并根据每个人像视频帧中的人像数量、人像的中心点坐标以及人像的屏占比,对多个人像视频帧进行筛选得到多个特写镜头帧,然后调用预先构建的目标人物人脸检测模型对特写镜头帧中的目标人物人脸,如明星人脸进行检测,得到包含目标人物人脸的多个目标视频帧,进一步,根据每个目标视频帧的时间,将包含同一目标人物,且连续时长超过预设值的多个目标视频帧确定为目标人物的特写片段,整个人物特写片段检测过程全部自动化完成,大幅度提高了视频中人物特写片段的检测速度和准确性。
技术领域
本发明涉及视频数据分析技术领域,更具体的,涉及一种视频中人物特写片段的检测方法及装置。
背景技术
在视频,如综艺影视剧集的播放中,会在目标人物第一次出场的特写镜头中对该目标人物进行介绍,介绍显示的时长一般为该目标人物特写片段的时长。对目标人物的介绍方式很多,当目标人物是明星时,在特写镜头下可以进行明星相关广告“创可贴”式投放、在明星特写片段中进行AI广告植入等。为了满足这些需求,需要对视频中目标人物的特写片段进行检测。
目前,一般通过人工浏览视频的方式检测视频中的人物特写片段,但是人工浏览效率低,不能实现对大量视频中的人物特写片段的快速检测;并且在人工浏览过程中,从发现人物特写片段到记录人物特写片段的起始时间,以及从发现人物特写片段结束到记录人物特写片段的结束时间,存在由于人工操作导致的时延,因此,人工检测人物特写片段的方式很难准确记录人物特写片段的起始时间和结束时间。
可见,目前通过人工浏览视频的方式检测视频中的人物特写片段,效率低下且准确性较低,亟需一种可以快速、准确检测视频中人物特写片段的方法
发明内容
有鉴于此,本发明提供了一种视频中人物特写片段的检测方法及装置,实现对视频中人物特写片段的快速、准确检测。
为了实现上述发明目的,本发明提供的具体技术方案如下:
一种视频中人物特写片段的检测方法,包括:
将视频中的每个视频帧依次输入预先构建的人像检测模型中进行人像检测,得到包含人像的多个人像视频帧;
获取每个所述人像视频帧中的人像数量、人像的中心点坐标以及人像的屏占比;
根据每个所述人像视频帧中的人像数量、人像的中心点坐标以及人像的屏占比,确定所述人像视频帧中的多个特写镜头帧;
调用预先构建的目标人物人脸检测模型,依次对多个所述特写镜头帧进行处理,得到包含目标人物人脸的多个目标视频帧,并记录每个目标视频帧的时间;
将包含同一目标人物,且连续时长超过预设值的多个目标视频帧确定为目标人物的特写片段。
可选的,所述根据每个所述人像视频帧中的人像数量、人像的中心点坐标以及人像的屏占比,确定所述人像视频帧中的多个特写镜头帧,包括:
从多个所述人像视频帧中提取仅包含一个人像的人像视频帧;
从仅包含一个人像的人像视频帧中提取人像的中心点坐标在中心预设区域的人像视频帧;
从仅包含一个人像且人像的中心点坐标在中心预设区域的人像视频帧中提取人像的屏占比大于阈值的视频帧,作为所述特写视频帧。
可选的,所述调用预先构建的目标人物人脸检测模型,依次对多个所述特写镜头帧进行处理,得到包含目标人物人脸的多个目标视频帧,包括:
分别从每个所述特写镜头帧中截取人像图像;
将每个所述人像图像依次输入预先构建的人脸检测模型中进行人脸检测,得到多个人脸图像;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湖南快乐阳光互动娱乐传媒有限公司,未经湖南快乐阳光互动娱乐传媒有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010181935.X/2.html,转载请声明来源钻瓜专利网。