[发明专利]图像处理装置、移动装置、方法和程序

说明书

提供了一种图像处理设备，其实现了这样的配置：其中根据诸如驾驶员头部的移动之类的驾驶员的行为来切换并显示在显示单元上的输出图像。输入指示移动装置的驾驶员的行为的驾驶员信息和从不同视点捕获对移动装置的周围情况的多个相机的捕获图像，并且根据驾驶员信息切换在显示单元上的输出图像。多个相机是例如安装在移动装置后部的多个后相机，并且检测例如驾驶员的面部或视线方向。选择与检测到的驾驶员的面部或视线方向对应的方向上的图像作为输出图像以显示在显示单元上，或者选择驾驶员的手势所指示的方向上的图像以显示在显示单元上。

技术领域

本公开涉及图像处理装置、移动装置、方法和程序。更具体而言，本公开涉及基于由安装在诸如汽车之类的移动装置中的相机捕获的图像来控制显示图像输出到驾驶员座位处的显示单元(监视器)的图像处理装置、移动装置、方法和程序。

背景技术

如今，可以安装相机监视系统(CMS)，并且CMS已开始实际引入到汽车中。在CMS中，由安装在汽车上的相机捕获的图像被显示在驾驶员座位处的监视器上，并且可以检查汽车周围的状况，例如，汽车后方(向后方向)的状况。

例如，专利文献1(WO 2018/012299)公开了本车辆中的相机监视系统(CMS)。在CMS中，由安装在车辆后部的后相机捕获的车辆的后面图像、由安装在车辆右侧和左侧的后视镜(rearviewmirror)位置处的侧相机捕获的右后图像和左后图像或其合成图像被显示在显示单元上。

引用列表

专利文献

专利文献1：WO 2018/012299

发明内容

本发明要解决的问题

相机监视系统(CMS)使得能够通过使用相机捕获的图像来检查已经用后照镜(backviewmirror)(诸如，所谓传统的汽车的后视镜和侧视镜)检查过的周围状态。

例如，后方捕获图像、左后捕获图像和右后捕获图像的三个图像被单独显示在能够由驾驶员观察到的显示单元(监视器)上。后方捕获图像由对车辆后方成像的后相机捕获。左后捕获图像和右后捕获图像分别由安装在车辆的左侧视镜和右侧视镜位置附近的左侧相机和右侧相机捕获。可替代地，通过适当地合成这三个图像而生成的单个合成图像被显示在监视器上。

但是，在这样的图像显示系统中，在从由后相机和左右侧相机捕获的三个图像生成并显示一个连续的合成图像的情况下，在这三个图像中的任何图像中捕获的被摄体有时会消失，而不是被显示。这是因为由后相机、L侧相机和R侧相机的三个相机捕获的图像具有不同的视点，并且这是由例如在生成合成图像时从一个视点(例如，后相机的视点)转换为图像的处理引起的。

如果在生成合成图像时相对于后相机的视点生成合成图像，那么由左侧相机和右侧相机捕获的被摄体(诸如例如在大型车辆后面紧随其后的摩托车以及从远处高速接近的车辆)从合成图像中消失。这是因为，例如，摩托车位于大型车辆后面的区域中，即，从后相机的视点来看是遮挡区域。

本公开鉴于例如上述问题而做出，并且本公开的目的是提供一种图像处理装置、移动装置、方法和程序，其中通过根据驾驶员的行为(例如头部的移动)顺序地切换和显示由具有不同成像视点的多个相机捕获的图像，类似于检查传统的后视镜和侧视镜的情况，驾驶员几乎可以连续地(无缝地)检查从各种视点观察到的后侧图像。

问题的解决方案

本公开的第一方面在于一种包括数据处理单元的图像处理装置，该数据处理单元执行以下内容的图像显示控制：

输入

示出移动装置的驾驶员的行为的驾驶员信息；以及

由多个相机捕获的图像，该多个相机从不同的视点对移动装置周围的状况进行成像；以及