[发明专利]一种基于摄像耳机的图像拼接方法及系统

说明书

本发明涉及一种基于摄像耳机的图像拼接方法及系统，包括：获取至少两个不同角度的摄像耳机拍摄的图像；剔除两个摄像耳机拍摄的图像中被人脸遮挡的区域，获取有效的两个待拼接的图像；提取有效的两个待拼接的图像中的特征点并对进行配准；根据配准的特征点统一有效的两个待拼接的图像的坐标系，以获得初拼接的全景图；在初拼接的全景图找寻拼接缝并生成掩码图像；将掩码图和初拼接的全景图进行融合，获取拼接后的全景图。通过剔除两个不同角度的摄像耳机拍摄的图像中遮挡的区域，再将图像拼接形成全景图像，拼接成的全景图像完整且效果好，可获取超过人眼所看角度范围的全景图像视觉。

技术领域

本发明涉及一种图像处理领域，特别指针对摄像耳机拍摄的图像进行拼接的方法及系统。

背景技术

随着信息技术的发展，虚拟现实(Virtual Reality，以下简称VR)技术作为一种可以创建和体验虚拟世界的计算机仿真系统，迅速遍布了包括视频，游戏，图片，购物等各个领域。全景图像和全景视频作为VR内容的重要一部分，通过它们对应的生成工具如全景相机进行拼接以获取大视场图片，可以让观看者更加身临其境的感受拍摄这张图片或者视频时的各个视角。但是，目前市面上存在的全景相机产品体积相对较大，不便于携带，或者拍摄全景照片时需要刻意地手持用一个设备来进行拍摄，不够方便。

而方便携带或者体积较小的例如具有摄像功能的眼镜或者蓝牙耳机等却都是只有一个摄像头，而且因为一个摄像头必定其视场角不会太大，没法提供足够角度的内容让观看者有身临其境的感受，并且很少有人会在日常生活愿意戴一个眼镜上有一个摄像头的电子产品去进行拍摄，周围人也会觉得奇怪。

耳机作为目前大多数年轻人必不可少的电子消费品，首先在佩戴上不会给周围人很突兀的感受，而摄像耳机是在原有耳机本身能够佩戴听歌的前提下在左右听筒再各自置入一个摄像头进行拍摄，这样只要左右摄像头的视场角够大，就能够作为以第一视角采集当前佩戴者所处环境的最佳设备，而且也能够帮助佩戴者记录下自己的一些日常生活的美妙瞬间。

不过基于这种摄像耳机的拼接方法目前还处于空白，并且也有相应的挑战难度，由于佩戴摄像耳机进行摄影时，耳朵置于人头的中后方，必然会出现头部遮挡部分光线进入镜头，而用这种成像中有遮挡的照片进行拼接很容易出现拼接失败或者拼接效果非常差的情况。

发明内容

基于此，本发明的目的在于，提供一种基于摄像耳机的图像拼接方法，其具有可剔除左右摄像耳机拍摄的左右图像中遮挡的区域，可拼接形成无缝的全景图像，获取超过人眼所看角度范围的全景图像视觉，且拼接效率高的优点。

一种基于摄像耳机的图像拼接方法，包括如下步骤：

获取至少两个不同角度的摄像耳机拍摄的图像；其中，所述两个不同角度的摄像耳机为设置在佩戴者左耳的一侧的左摄像耳机，以及设置在佩戴者右耳的一侧的右摄像耳机；所述两个不同角度的摄像耳机拍摄的图像为左摄像耳机拍摄的左图像，以及右摄像耳机拍摄的右图像；

获取两个摄像耳机中的定位装置传送的定位信息，并根据定位信息计算出两个摄像耳机的相对位置，并根据两个摄像耳机相对位置查询数据库是否存在其对应的拼接模板数据；其中，所述两个摄像耳机中的定位装置为设置在左摄像耳机上的左陀螺仪和设置在右摄像耳机上的右陀螺仪；所述定位信息为左陀螺仪所在的姿态角和右陀螺仪所在的姿态角度；通过将左陀螺仪的姿态角度与右陀螺仪的姿态角度相减，计算出所述左摄像耳机和右摄像耳机的相对位置；

若存在，通过数据库存储的拼接模板数据将摄像耳机拍摄的图像拼接成初拼接的全景图，并获取拼接模板数据中的掩码图，将掩码图和初拼接的全景图进行融合，获取拼接后的全景图；

若不存在对应的拼接模板数据，剔除两个摄像耳机拍摄的图像中被人脸遮挡的区域，以获取有效的两个待拼接的图像；

提取有效的两个待拼接的图像中的特征点，并对有效的两个待拼接的图像的特征点进行配准；