[发明专利]视频会议显示的控制方法、装置、电子设备及存储介质在审
申请号: | 202110215105.9 | 申请日: | 2021-02-25 |
公开(公告)号: | CN113014857A | 公开(公告)日: | 2021-06-22 |
发明(设计)人: | 梅书慧 | 申请(专利权)人: | 游密科技(深圳)有限公司 |
主分类号: | H04N7/15 | 分类号: | H04N7/15;G10L17/00;G06K9/00;G06F16/783;G06F16/683 |
代理公司: | 深圳市智圈知识产权代理事务所(普通合伙) 44351 | 代理人: | 苗燕 |
地址: | 518000 广东省深圳市南山区粤*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频会议 显示 控制 方法 装置 电子设备 存储 介质 | ||
1.一种视频会议显示的控制方法,其特征在于,包括:
获取视频会议的媒体数据,所述媒体数据包括视频数据以及音频数据;
根据所述视频数据,获取第一身份信息;
根据所述音频数据,获取第二身份信息;
根据所述第一身份信息以及所述第二身份信息,确定视频会议的演讲者;以及
根据接收到的显示指令,显示包含所述演讲者的面部的图像画面。
2.根据权利要求1所述的控制方法,其特征在于,所述根据视频数据,获取第一身份信息,包括:
根据所述视频数据,在与会人员的图像画面中确定发言者;以及
根据所述发言者的人脸图像,确定所述第一身份信息,所述第一身份信息包括对应于所述发言者的面部特征信息。
3.根据权利要求2所述的控制方法,其特征在于,所述根据所述视频数据,在与会人员的图像画面中确定发言者,包括:
提取所述视频数据中的至少一个人脸图像,每个所述人脸图像对应于一个与会人员的面部;
分别获取每个所述人脸图像的唇部特征信息;以及
根据相邻帧的图像画面中的所述唇部特征信息的变化值以及预设的变化阈值,在所述与会人员的图像画面中确定所述发言者。
4.根据权利要求3所述的控制方法,其特征在于,所述根据相邻帧的图像画面中的所述唇部特征信息的变化值以及预设的变化阈值,在所述与会人员的图像画面中确定所述发言者,包括:
从所述与会人员的图像画面中选择所述唇部特征信息的变化值大于或等于所述预设的变化阈值的人脸图像所对应的与会人员,作为所述发言者。
5.根据权利要求1所述的控制方法,其特征在于,所述根据所述第一身份信息以及所述第二身份信息,确定视频会议的演讲者,包括:
根据所述第一身份信息,获取第一身份对应的第一置信度;
根据所述第二身份信息,获取第二身份对应的第二置信度;以及
当所述第一身份与所述第二身份相同,且所述第一置信度及所述第二置信度均大于或等于预设置信度时,确定所述演讲者的身份为所述第一身份。
6.根据权利要求5所述的控制方法,其特征在于,所述第一身份信息包括面部特征信息,所述根据所述第一身份信息,获取第一身份对应的第一置信度,包括:
将所述面部特征信息与预设的信息库进行匹配,其中,所述信息库包括多个用户的身份及所述多个用户的面部特征;
根据所述面部特征信息与所述多个用户的面部特征的比对结果,获得多个第一匹配度,多个所述第一匹配度与多个所述用户的身份一一对应;
从多个所述第一匹配度中选取匹配度最大的所述第一匹配度,作为第一目标匹配度;
确定所述第一目标匹配度所对应的用户的身份为第一身份;以及
将所述第一目标匹配度作为所述第一身份对应的第一置信度。
7.根据权利要求5所述的控制方法,其特征在于,所述第二身份信息包括声纹特征信息,所述根据所述第二身份信息,获取第二身份对应的第二置信度,包括:
将所述声纹特征信息与预设的声纹库进行匹配,其中,所述声纹库包括多个用户的身份及所述多个用户的声纹特征;
根据所述声纹特征信息与所述多个用户的声纹特征的比对结果,获得多个第二匹配度,多个所述第二匹配度与多个所述用户的身份一一对应;
从多个所述第二匹配度中选取匹配度最大的所述第二匹配度,作为第二目标匹配度;
确定所述第二目标匹配度所对应的用户的身份为第二身份;以及
将所述第二目标匹配度作为所述第二身份对应的第二置信度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于游密科技(深圳)有限公司,未经游密科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110215105.9/1.html,转载请声明来源钻瓜专利网。