[发明专利]一种基于移动平台的全景拍摄系统及方法

摘要

本发明公开了一种基于移动平台的全景拍摄方法，包括：打开前置相机和后置相机；读取前置相机和后置相机拍摄的图片或视频流以及实时的预览视频流；对两路图像分别作处理，包括图像矫正，色彩调整，噪点消除，曝光及对比度调整；图像特征点的提取、筛选及匹配；图像配准、拼接、融合；全景图像及视频的压缩及存储；图像渲染显示到手机屏幕上。系统包括：两个鱼眼镜头和一个加固机构；两个鱼眼镜头通过加固机构安装在手机或者平板的前置摄像头和后置摄像头上。本发明提出了一种基于移动平台拍摄全景图像以及视频的方法，较好地解决了现有全景拍摄方法存在成本高、拍摄过程繁琐、需要独立拍摄设备、无法录制全景视频的问题。

主权项

一种基于移动平台的全景拍摄方法，其特征在于，所述基于移动平台的全景拍摄方法包括：打开前置相机和后置相机，读取前置相机和后置相机拍摄的图片或视频流以及实时的预览视频流；对两路图像分别作处理，包括图像矫正，色彩调整，噪点消除，曝光及对比度调整；图像矫正是去除部分畸变以及Lens Shading，色彩校正是对于色温的调整，噪点消除涉及图像传感器固有噪声，以及图像数据读取时的噪声消除；图像特征点的提取、筛选及匹配；特征点提取算法检测到特征点的位置，并通过对特征点的描述，匹配到该点在另一幅画面中相对应的特征点，为后面的图像配准和拼接做准备；图像配准、拼接、融合：基于得到的图像特征点匹配对，计算得到前后相机的相对位置关系，以及画面的重叠区域，即I_front＝K[R|T]K^‑1I_back，其中I_front与I_back表示通过特征点提取找到的前后置相机画面的特征点匹配对，K表示的是相机的内部参数，包括相机的焦距，相机传感器中心相对镜头光轴的偏移量以及镜头的畸变参数，而[R|T]则是需用计算的相机相对位置关系，这个相对位置关系，描述成旋转和平移的数学模型，相对变换矩阵[R|T]是固定的；拼接算法则是基于确定后的图像重合情况将画面重叠区域移动到一起，最后通过图像融合将两张图像之间的重叠区域过度平滑；全景图像及视频的压缩及存储；图像渲染显示到移动设备的屏幕上。