[发明专利]一种视频通信方法及装置在审
申请号: | 202010542867.5 | 申请日: | 2020-06-15 |
公开(公告)号: | CN111641798A | 公开(公告)日: | 2020-09-08 |
发明(设计)人: | 王艳营;张小清;刘鑫 | 申请(专利权)人: | 黑龙江科技大学 |
主分类号: | H04N7/14 | 分类号: | H04N7/14;H04N21/4788;G06K9/00 |
代理公司: | 西安合创非凡知识产权代理事务所(普通合伙) 61248 | 代理人: | 居延娟 |
地址: | 150022 黑龙江*** | 国省代码: | 黑龙江;23 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 通信 方法 装置 | ||
1.一种视频通信方法,应用于视频数据的发送端,其特征在于,该方法包括:
获取包含用户面部信息的原始视频数据和音频数据;
分析原始视频数据,获得用户脸部五官的状态特征;
基于获取的脸部五官的状态特征驱动所选取的人物模型演示对应的面部表情特征;
将获取的音频数据及其对应的带动态面部表情特征视频数据一一打包后发送至视频数据的接收端。
2.如权利要求1所述的一种视频通信方法,其特征在于,分析原始视频数据时,首先调用视频取帧脚本,每隔一定帧数获取一张图像,将获取的图像按五官分割为眼睛区域、眉毛区域、鼻子区域、嘴巴区域和人脸轮廓区域,然后通过kinect深度传感器分别进行各区域深度图像的获取,然后将所获得的眼睛区域深度图像、眉毛区域深度图像、鼻子区域深度图像、嘴巴区域深度图像进行三角化,然后在尺度空间中融合所有三角化的深度图像构建分层有向距离场,对距离场中所有的体素应用整体三角剖分算法产生一个涵盖所有体素的凸包,并利用Marching Tetrahedra算法构造等值面,获得的眼睛区域等值面、眉毛区域等值面、鼻子区域等值面和嘴巴区域等值面,最后用所得的眼睛区域等值面、眉毛区域等值面、鼻子区域等值面和嘴巴区域等值面分别替换人物模型中的眼镜区域、眉毛区域、鼻子区域和嘴巴区域,即得携带面部表情特征的人物模型。
3.如权利要求1所述的一种视频通信方法,其特征在于,利用不同的信源编码为不同的完成打包的视频数据和音频数据分配不同的数据标识后发送至视频数据的接收端。
4.如权利要求1所述的一种视频通信方法,其特征在于,基于预设的模板完成获取到的音频数据及其同一时间点的带动态面部表情特征视频数据的排版打包处理。
5.一种视频通信装置,其特征在于:包括:
数据获取单元,用于获取包含用户面部信息的原始视频数据和音频数据;
人物模型选取单元,用于在人物模型数据库内选取喜欢的模型;
视频数据处理单元,用于分析所述原始视频数据,获得用户脸部五官的状态特征;
视频重构单元,用于基于获取的脸部五官的状态特征驱动所选取的人物模型演示对应的面部表情特征;
视频数据整理单元,用于将获取的音频数据及其对应的带动态面部表情特征视频数据一一打包后发送至视频数据的接收端。
6.如权利要求5所述的一种视频通信装置,其特征在于:所述视频数据处理单元包括:
视频图像获取模块,用于调用视频取帧脚本,每隔一定帧数获取一张视频图像;
图像特征提取模块,用于将获取的图像按五官分割为眼睛区域、眉毛区域、鼻子区域、嘴巴区域和人脸轮廓区域,然后通过kinect深度传感器分别进行各区域深度图像的获取,并将获取的各区域深度图像发送到视频重构单元。
7.如权利要求5所述的一种视频通信装置,其特征在于:所述视频重构单元用于将所获得的眼睛区域深度图像、眉毛区域深度图像、鼻子区域深度图像、嘴巴区域深度图像进行三角化,然后在尺度空间中融合所有三角化的深度图像构建分层有向距离场,对距离场中所有的体素应用整体三角剖分算法产生一个涵盖所有体素的凸包,并利用MarchingTetrahedra算法构造等值面,获得的眼睛区域等值面、眉毛区域等值面、鼻子区域等值面和嘴巴区域等值面,然后将所得的眼睛区域等值面、眉毛区域等值面、鼻子区域等值面和嘴巴区域等值面分别替换人物模型中的眼镜区域、眉毛区域、鼻子区域和嘴巴区域。
8.如权利要求5所述的一种视频通信装置,其特征在于:所述视频数据整理单元基于预设的模板完成获取到的音频数据及其同一时间点的带动态面部表情特征视频数据的排版打包处理,并利用不同的信源编码为完成打包处理后的数据分配不同的数据标识。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于黑龙江科技大学,未经黑龙江科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010542867.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种太赫兹波段温控开关器件
- 下一篇:一种无卡取现方法、装置、存储介质及设备