[发明专利]全景实时图像处理方法

说明书

本发明提供一种全景实时图像处理方法。不同于现有技术无法实时性地生成360度全景影像，本发明的方法利用完成镜头参数校正的二个鱼眼摄影机撷取视频信息，并将所撷取的视频信息经过视频编码和串流化处理之后，通过有线传输或无线传输的方式传送至一电子产品，以藉由安装于该电子产品的一图像处理应用程序进行视频译码处理、全景坐标转换处理、影像缝接处理、以及边缘平滑化处理，进而于该电子产品的显示器上显示一视球全景影像。此外，藉由可编程图像处理器或数字信号处理器的协助，该图像处理应用程序亦可对该视球全景影像进行视野参数运算之后，通过平面全景显示模式、鱼眼视野显示模式、或人眼视野显示模式予以显示。

技术领域

本发明关于图像处理的技术领域，尤指一种全景实时图像处理方法。

背景技术

早期，胶卷摄影机或底片相机仅能够拍摄的景象的角度范围大约只有30度至50度，因此胶卷摄影机或底片相机无法将环景影像拍摄在同一张影像之中。近期，随着数字相机的出现以及图像处理技术的进步，现有的摄影技术已经可以利用多个镜头对单一景象进行全方位角度的影像撷取，然后通过图像处理技术将多张影像拼接成一张360度全景影像。

请参阅图1，显示一种现有的360度全景影像生成技术的方法流程图。如图1所示，现有的360度全景影像生成技术包括以下方法步骤：

(S1’)：使用多个摄像元件进行影像撷取；

(S2’)：将所撷取的多帧影像的点坐标转换成落于一半球面之上的多个球面坐标；

(S3’)：利用经纬映射法进一步地将该多帧影像转换成多帧经纬图像；

(S4’)：将该多帧经纬图像进行光学剪裁之后，缝接生成一帧全景影像；

(S5’)：将该全景影像进行边缘平滑化处理；

(S6’)：依据时间轴对每一帧全景图像进行视频编码，进而生成一全景视频并播放输出。

虽然上述的360度全景影像生成技术目前已被广泛地应用，然而，本案的发明人基于实务经验发现，该360度全景影像生成技术仍显示出以下缺陷：

(1)使用该多个摄像元件撷取该多帧影像之时，除了基于同一光学中心(commonoptical center)以外，更必须确保该多帧影像彼此之间具有一个部份重叠影像区域。显然，该360度全景影像生成技术于实施上包含了许多限制条件；

(2)于该360度全景影像生成技术的应用过程中，由于所述摄像元件为广角镜头(例如鱼眼镜头)，因此在缝接生成全景影像之前，必须对所撷取的多帧影像进行镜头扭曲校正处理。然而，如熟悉图像处理技术的工程人员所熟知的，图像处理需耗费大量运算资源及时间，人眼若想观看顺畅的视频，则每秒钟需处理24～30张影像信息，超过一般硬件装置可达到的限制；由此可知，习知的360度全景影像生成技术无法实时性地生成360度全景影像。

因此，有鉴于习知的全景影像生成技术仍具有技术应用上的缺陷与不足，本案的发明人极力加以研究发明，而终于研发完成本发明的一种全景实时图像处理方法。

发明内容

本发明的主要目的，在于提供一种全景实时图像处理方法。不同于习知技术无法实时性地生成360度全景影像，本发明的方法是利用完成镜头参数校正的二个鱼眼摄影机撷取视频信息，并将所撷取的视频信息经过视频编码和串流化处理之后，通过有线传输或无线传输的方式传送至一电子产品，以藉由安装于该电子产品的一图像处理应用程序进行视频译码处理、全景坐标转换处理、影像缝接处理、以及边缘平滑化处理，进而于该电子产品的显示器上显示一视球全景影像。此外，藉由可编程图像处理器或数字信号处理器的协助，该图像处理应用程序亦可对该视球全景影像进行视野参数运算之后，将该二个鱼眼摄影机所撷取的视频信息通过平面全景显示模式、鱼眼视野显示模式、或人眼视野显示模式予以显示。