[发明专利]图像处理系统、图像生成装置和生成图像的方法

说明书

本发明公开了图像处理系统、图像生成装置和生成图像的方法，旨在提供能够在对接多幅输入图像生成一幅图像的图像处理中，缩短图像输出时的图像延迟的模态。图像处理系统包括：模态选择部，用于从至少第一模态和第二模态中选择图像处理系统的操作模态；和对接处理部，用于以模态选择部所选择的第一模态或第二模态来对多幅图像实行对接处理，以生成输出图像，其中，对接处理部以第一模态生成的输出图像是第一输出图像，对接处理部以第二模态生成的输出图像是第二输出图像，并且第一输出图像的对接位置不同于第二输出图像的对接位置。

本申请是发明名称为“图像处理系统和方法、摄像系统、图像生成装置和方法”、申请日为2016年1月20日、申请号为201610036980.X、申请人为株式会社理光的发明专利申请的分案申请。

技术领域

本发明涉及图像处理系统和方法、摄像系统、图像生成装置和方法。

背景技术

目前，例如专利文献1(JP特开2013-187860号公报)揭示了一种用鱼眼镜头或超广角镜头等广角镜头作一次性全方位摄影的全天球摄像系统。该全天球摄像系统将各个镜头的成像投影到传感器面上得到图像，通过对该图像实行图像处理，将各个图像连接起来，生成全天球图象。例如，可以用两个具有超过180度视角的广角镜头生成全天球图像。

在上述专利文献1的图像处理中，根据规定的投影模型或者考虑理想模型发生的变形，对各透镜光学系统拍摄的鱼眼图像实施变形补偿以及投影转换。而后，根据鱼眼图像中包含的重复部分，实行图像对接处理，将鱼眼图像对接起来，形成一幅全天球图象。在图像对接处理中，用图案匹配等能够检测到鱼眼图像之间的重复部分中被摄体重复的对接位置。

如果能够高速实行上述图像处理，则能够对全天球图像实行实时监视。但是实际上，由于图像处理量非常之大，难以在可能的成本范围内实时生成图像。即便能够高速处理，也会因高速处理耗电，电池消费大，从而发生耗电量增大引起的发热问题。

发明内容

鉴于上述问题，本发明的目的在于提供一种图像处理系统，其中具备能够在对接多幅输入图像生成一幅图像的图像处理中，缩短图像输出时的图像延迟的模态。

为了达到上述目的，本发明提供一种图像处理系统，其中包括：检测处理部，用于检测多幅输入图像之间的对接位置；对接处理部，用于对所述多幅输入图像实行对接处理，生成输出图像；以及，切换部，用来切换模态，所述模态包含第一模态和第二模态，该第一模态输出反映了所述检测处理部的检测结果、并经过所述对接处理部实行所述对接处理而生成的所述输出图像，所述第二模态输出未经过所述检测处理部的处理、直接由所述对接处理部实行所述对接处理而生成的所述输出图像。

本发明的效果在于，提供能够在对接多幅输入图像生成一幅图像的图像处理中，缩短图像输出时的图像延迟的模态。

附图说明

图1是本实施方式的全天球摄像系统所具有的全天球相机的截面图。

图2A是本实施方式的全天球摄像系统所具有的全天球相机的硬件结构模块图。

图2B是本实施方式的全天球摄像系统中的用户终端装置的硬件结构示意图。

图3是用来描述本实施方式的全天球摄像系统的多个模态的图像处理途径的示意图。

图4是关于本实施方式的全天球摄像系统的全天球图像监视功能的主要功能模块图。

图5是表示本实施方式的全天球摄像系统中的投影关系示意图。

图6是本实施方式采用的全天球图像格式的图像数据结构示意图。

图7是本实施方式的位置检测用变形补偿部参考的转换数据示意图。

图8是本实施方式的位置检测处理时将用鱼眼镜头拍摄的部分图像映射到球面坐标系上的示意图。