[发明专利]图像处理设备、图像处理系统、图像处理方法和存储介质

说明书

图像处理设备1基于多个相机从各个不同的方向对被摄体的拍摄和基于根据虚拟视点的指定的信息的虚拟视点图像，接受图像的生成指令。图像处理设备1然后以根据基于拍摄的图像和与虚拟视点的指定对应的信息生成输出到第一显示设备的第一虚拟视点图像和输出到第二显示设备的第二虚拟视点图像的方式，与生成指令的接受对应地执行控制。第二虚拟视点图像是具有比第一虚拟视点图像高的图像质量的虚拟视点图像。

技术领域

本发明涉及用于生成虚拟视点图像的技术。

背景技术

近来，用于通过在不同位置安装多个相机从多个视点拍摄被摄体并通过使用通过拍摄获得的多个视点图像生成虚拟视点图像或三维模型的技术引起了关注。根据如上所述的用于从多个视点图像生成虚拟视点图像的技术，例如，由于可以从各种角度观察足球或篮球中的突出场景，因此，与正常图像相比，能够向用户提供高度逼真的感觉。

根据PTL 1，描述了在通过相互组合从多个视点拍摄的图像生成虚拟视点图像的情况下，通过减少在图像中的物体的边界区域中呈现的单元来改善虚拟视点图像的图像质量。

引文列表

专利文献

PTL 1：日本专利公开No.2013-223008

发明内容

技术问题

但是，根据现有技术，可以想到在某些情况下不能生成与关于图像质量的多个不同要求对应的虚拟视点图像。例如，在仅生成具有高图像质量的虚拟视点图像的情况下，可以想到与生成有关的处理时间被延长，并且担心变得难以响应于即使图像质量低也愿意实时观察虚拟视点图像的用户的期望。另一方面，在仅生成具有低图像质量的虚拟视点图像的情况下，担心变得难以响应于虚拟视点图像的高图像质量优先于实时性能的用户的期望。

本发明是鉴于上述问题而完成的，并且其目的在于生成与关于图像质量的多个不同要求对应的虚拟视点图像。

问题的解决方案

为了解决上述的问题，根据本发明的图像处理设备包括例如以下的配置。即，图像处理设备包括：用于基于多个相机从各个不同的方向拍摄的拍摄图像和与虚拟视点的指定对应的视点信息接受虚拟视点图像的生成指令的接受装置；和用于以基于拍摄图像和虚拟视点信息通过生成装置生成供用户指定虚拟视点的第一虚拟视点图像和基于用户对虚拟视点的指定生成的第二虚拟视点图像的方式、根据接受装置对生成指令的接受来控制生成装置的控制装置，第二虚拟视点图像与第一虚拟视点图像相比具有高的图像质量。

本发明的有利效果

根据本发明，能够生成与关于图像质量的多个不同的要求对应的虚拟视点图像。

附图说明

图1是用于描述图像处理系统10的配置的说明图。

图2是用于描述图像处理设备1的硬件配置的说明图。

图3是用于描述图像处理设备1的操作的一种模式的流程图。

图4是用于描述显示设备3的显示画面的配置的说明图。

图5是用于描述图像处理设备1的操作的一种模式的流程图。

图6是用于描述图像处理设备1的操作的一种模式的流程图。

具体实施方式

[系统配置]

以下，将参考附图来描述本发明的实施例。首先，将通过使用图1来描述生成并输出虚拟视点图像的图像处理系统10的配置。根据本实施例的图像处理系统10包括图像处理设备1、相机组2、显示设备3和显示设备4。