[发明专利]眼部驱动控制方法和装置、存储介质及电子设备在审

专利信息
申请号: 202111296399.9 申请日: 2021-11-03
公开(公告)号: CN113946221A 公开(公告)日: 2022-01-18
发明(设计)人: 方依云 申请(专利权)人: 广州繁星互娱信息科技有限公司
主分类号: G06F3/01 分类号: G06F3/01;G06V40/16;G06V40/18
代理公司: 北京康信知识产权代理有限责任公司 11240 代理人: 周婷婷
地址: 510000 广东省广州市黄*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 眼部 驱动 控制 方法 装置 存储 介质 电子设备
【说明书】:

发明公开了一种眼部驱动控制方法和装置、存储介质及电子设备。其中,该方法包括:在当前直播画面中显示预先为主播对象配置的目标图片,其中,目标图片中显示有虚拟动物对象的面部;基于采集到的主播对象的人脸图像,识别主播对象的单眼闭合特征,其中,单眼闭合特征是基于主播对象的单个眼睛上采集到的多个闭合点组的位置偏移量计算得到的,单个闭合点组中包括与同一直线相交的上眼睑点和下眼睑点;根据单眼闭合特征所指示的眼部闭合程度,驱动控制目标图片中虚拟动物对象的眼部进行同步闭合调整。本发明解决了现有的技术无法保证对眼部驱动控制的准确性的技术问题。

技术领域

本发明涉及计算机领域,具体而言,涉及一种眼部驱动控制方法和装置、存储介质及电子设备。

背景技术

为了丰富直播画面,直播应用开发商常常会设置各种不同的直播特效。比如,基于三维(简称3D)人脸模型,为主播制作与其人脸相适配的虚拟人像,由该虚拟人像来代替主播的真实头像。或者,基于图片中显示的虚拟动物形象来代替主播的真实头像。通过上述方式来隐藏主播真正的肖像信息,保护主播的隐私。

在上述直播过程中,为了保证上述虚拟人像或虚拟动物形象与主播实现同步的面部表情变化,通常会由主播实际的面部表情变化,来驱动上述虚拟人像或虚拟动物形象的表情变化。

其中,用于确定面部表情的多个面部关键点中包括眼睛。然而,由于眼睛很敏感,眼部肌肉会经常小范围抖动,就很容易出现由于频繁变化而导致的短暂眼部检测丢失的情况,从而造成无法保证对眼部驱动控制的准确性的问题。

针对上述的问题,目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种眼部驱动控制方法和装置、存储介质及电子设备,以至少解决现有的技术无法保证对眼部驱动控制的准确性的技术问题。

根据本发明实施例的一个方面,提供了一种眼部驱动控制方法,包括:在当前直播画面中显示预先为主播对象配置的目标图片,其中,目标图片中显示有虚拟动物对象的面部;基于采集到的主播对象的人脸图像,识别主播对象的单眼闭合特征,其中,单眼闭合特征是基于主播对象的单个眼睛上采集到的多个闭合点组的位置偏移量计算得到的,单个闭合点组中包括与同一直线相交的上眼睑点和下眼睑点;根据单眼闭合特征所指示的眼部闭合程度,驱动控制目标图片中虚拟动物对象的眼部进行同步闭合调整。

根据本发明实施例的另一方面,还提供了一种眼部驱动控制装置,包括:显示单元,用于在当前直播画面中显示预先为主播对象配置的目标图片,其中,目标图片中显示有虚拟动物对象的面部;识别单元,用于基于采集到的主播对象的人脸图像,识别主播对象的单眼闭合特征,其中,单眼闭合特征是基于主播对象的单个眼睛上采集到的多个闭合点组的位置偏移量计算得到的,单个闭合点组中包括与同一直线相交的上眼睑点和下眼睑点;驱动控制单元,用于根据单眼闭合特征所指示的眼部闭合程度,驱动控制目标图片中虚拟动物对象的眼部进行同步闭合调整。

根据本发明实施例的又一方面,还提供了一种计算机可读的存储介质,该计算机可读的存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述眼部驱动控制方法。

根据本发明实施例的又一方面,还提供了一种电子设备,包括存储器和处理器,上述存储器中存储有计算机程序,上述处理器被设置为通过上述计算机程序执行上述的眼部驱动控制方法。

在本发明实施例中,在当前直播画面中显示预先为主播对象配置的目标图片,并基于采集到的主播对象的人脸图像,识别主播对象的单眼闭合特征,其中,单眼闭合特征是基于主播对象的单个眼睛上采集到的多个闭合点组的位置偏移量计算得到的,单个闭合点组中包括与同一直线相交的上眼睑点和下眼睑点,然后根据单眼闭合特征所指示的眼部闭合程度,驱动控制目标图片中虚拟动物对象的眼部进行同步闭合调整,从而避免了眼部肌肉小范围抖动的情况下而造成的眼部检测丢失的问题,因此提高了对直播画面中显示的动物形象的眼部驱动控制的准确性,进而解决了现有的技术无法保证对眼部驱动控制的准确性的技术问题。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州繁星互娱信息科技有限公司,未经广州繁星互娱信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111296399.9/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top