[发明专利]信息显示方法、设备及存储介质有效
申请号: | 202010874067.3 | 申请日: | 2020-08-26 |
公开(公告)号: | CN112001872B | 公开(公告)日: | 2021-09-14 |
发明(设计)人: | 叶春美;黄佳斌;王一同 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G06T5/50 | 分类号: | G06T5/50 |
代理公司: | 上海光栅知识产权代理有限公司 31340 | 代理人: | 关浩;马雯雯 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 信息 显示 方法 设备 存储 介质 | ||
1.一种信息显示方法,其特征在于,包括:
获取视频中包含第一对象的第一图像画面;
确定所述第一图像画面中是否存在第二对象;
在确定所述第一图像画面中存在所述第二对象,且所述第二对象与所述第一对象满足预设位置关系时,在所述第一图像画面中所述第二对象所在区域上叠加第一素材;所述第一对象为人脸,所述第二对象为口罩,所述预设位置关系具体为:在所述人脸上佩戴有所述口罩,所述第一素材用于指示所述第一对象的情绪和/或表情的状态。
2.根据权利要求1所述的方法,其特征在于,所述确定所述第一图像画面中是否存在第二对象,包括:
获取所述第一图像画面中包含所述人脸的目标图像;
将所述目标图像输入到口罩识别模型,得到识别结果,所述识别结果用于指示所述人脸上是否佩戴口罩,所述口罩识别模型为轻量级的机器学习模型。
3.根据权利要求2所述的方法,其特征在于,所述口罩识别模型包括通道交换模块、通道切分模块、2个1×1卷积模块、3×3卷积模块、通道合并模块。
4.根据权利要求2所述的方法,其特征在于,所述获取所述第一图像画面中包含所述人脸的目标图像,包括:
将所述第一图像画面输入至第一人脸识别模型,得到所述第一图像画面中人脸区域的第一图像,将所述第一图像作为所述目标图像。
5.根据权利要求2所述的方法,其特征在于,所述获取所述第一图像画面中包含所述人脸的目标图像,包括:
将所述第一图像画面输入至第二人脸识别模型,得到所述第一图像画面中人脸区域的第一图像以及所述人脸区域的关键点信息;
根据所述关键点信息对所述第一图像进行旋转处理,得到第二图像,将所述第二图像作为所述目标图像。
6.根据权利要求2-5中任一项所述的方法,其特征在于,所述口罩识别模型的训练过程,包括:
建立初始口罩识别模型;
获取正负图像样本和所述正负图像样本的标注结果,其中,正图像样本中包含的人脸佩戴有口罩,负图像样本中包含的人脸没有佩戴口罩,所述标注结果包括用于指示图像样本中人脸是否佩戴口罩的标签,以及口罩的位置信息;
通过将所述正负图像样本作为所述口罩识别模型的输入,将所述正负图像样本的标注结果作为所述口罩识别模型的输出,对所述初始口罩识别模型进行训练,得到所述口罩识别模型。
7.根据权利要求1-5中任一项所述的方法,其特征在于,在所述第一图像画面中所述第二对象所在区域上叠加第一素材之后,所述方法还包括:
在确定所述第一图像画面之后的第二图像画面中不存在所述第二对象时,去除所述第一素材,在所述第二图像画面中叠加第二素材,所述第二素材与所述第一素材不同。
8.根据权利要求1-5中任一项所述的方法,其特征在于,在所述第一图像画面中所述第二对象所在区域上叠加第一素材之后,所述方法还包括:
获取用户针对所述第一图像画面中所显示的所述第一素材的切换操作;
响应于所述切换操作,去除所述第一素材,在所述第一图像画面之后的第二图像画面中叠加第三素材,所述第三素材与所述第一素材不同。
9.根据权利要求8所述的方法,其特征在于,所述切换操作包括如下任意一项:手势操作、面部动作、头部动作、语音控制、界面的素材选择区域的选择操作、界面的文本输入区域的输入操作。
10.根据权利要求8所述的方法,其特征在于,所述第三素材为用户在界面的文本输入区域输入的文本信息或表情。
11.根据权利要求1-5中任一项所述的方法,其特征在于,所述方法还包括:
在确定所述第一图像画面中不存在所述第二对象时,在所述第一图像画面上显示提示信息,所述提示信息用于提示用户佩戴所述第二对象。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010874067.3/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置