[发明专利]一种虚拟现实人像采集方法及装置

说明书

本申请公开了一种虚拟现实人像采集方法及装置，包括：获取第一图像和第二图像，所述第一图像包括人脸，所述人脸的局部区域被虚拟现实头戴装置遮挡，所述第二图像包括人脸的局部区域，所述第二图像由所述虚拟现实头戴装置中的图像采集装置采集得到；检测所述第一图像的第一区域，所述第一区域是被虚拟现实头戴装置遮挡的人脸的局部区域，并得到所述第一区域的边缘像素点的特征值；根据所述第一区域的边缘像素点的特征值，在第二图像中得到第二区域；将所述第一区域中的图像替换为所述第二区域中的图像。

技术领域

本申请涉及通信领域，尤其涉及一种虚拟人像采集方法及装置。

背景技术

虚拟现实头戴装置利用配戴在头部的显示器将人的对外界的视觉、听觉封闭，引导用户产生一种身在虚拟环境中的感觉。其显示原理是左右眼屏幕上分别显示左右眼的图像，人眼获取这种带有差异的信息后在脑海中产生立体感。虚拟现实头戴装置作为虚拟现实的显示设备，具有小巧和封闭性强的特点，在军事训练、虚拟驾驶和虚拟城市等项目中具有广泛应用。

目前主流的视频通话类产品多直接通过设备采集用户A的2D图像，通过移动网络、互联网等媒介传输至用户B的呈现终端上，以还原用户A的局部2D形象。然而，人们对这类业务体验所寄予的期待远远未被满足，3D视频采集、全景视频采集、虚拟现实视频采集等新技术的出现为这类视频通话业务提供了新的机遇。在利用头戴式虚拟现实设备进行视频通话时，用户佩戴虚拟现实头戴装置，在完全虚拟化的环境中与其他用户的虚拟3D形象或2D画面进行实时视频通信。用户在自己的视野范围内，看到的是完全虚拟出来的周围环境，这个环境可以是会议室、客厅或者桌游室。

目前利用头戴式虚拟现实设备进行视频通话的技术中，由于无法规避头盔遮挡脸部、人像掺杂背景等问题，不能将完整的人的立体画面实时采集出来并融入虚拟场景。例如因为用户眼部会被虚拟现实头戴装置遮挡，使得外部摄像头无法获取到用户眼部区域图像；以及目前的人像采集系统是将人像与周围的物理和背景在一个图像平面采集并呈现，无法直接地仅获取人像本身的图像。

由于以上存在的问题，在用户利用头戴式虚拟现实设备进行视频通话时，无法获取完整的人脸图像。

发明内容

本申请的目的就是为了解决上述问题，提供一种虚拟现实人像采集方法及装置，通过处理采集设备获取的图像，将人脸的虚拟现实图像完整化。

第一方面，本申请的一个实施例提供一种虚拟现实人像采集方法，该方法包括：

获取第一图像和第二图像，所述第一图像包括人脸，所述人脸的局部区域被虚拟现实头戴装置遮挡，所述第二图像包括人脸的局部区域，所述第二图像由所述虚拟现实头戴装置中的图像采集装置采集得到；

检测所述第一图像的第一区域，所述第一区域是被虚拟现实头戴装置遮挡的人脸的局部区域，并得到所述第一区域的边缘像素点的特征值；

根据所述第一区域的边缘像素点的特征值，在第二图像中得到第二区域；

将所述第一区域中的图像替换为所述第二区域中的图像。

其中，检测所述第一图像的第一区域，所述第一区域是被虚拟现实头戴装置遮挡的人脸的局部区域，具体包括如下步骤：

对所述第一图像的像素点进行卷积计算，得到像素点的灰度值；

检测出所述像素点的灰度值大于设定阈值的像素点为所述第一区域的边缘像素点，所述边缘像素点围成的区域为所述第一图像的第一区域。

其中，根据所述第一区域的边缘像素点的特征值，在第二图像中得到第二区域，具体包括如下步骤：

计算所述第一区域的边缘像素点的特征值；

计算所述第二图像中的像素点的特征值；