[发明专利]数据提供装置、数据提供装置的控制方法和存储介质

说明书

本发明涉及数据提供装置、数据提供装置的控制方法和存储介质。数据提供装置包括：决定部，其用于基于要在显示装置上显示的内容，决定根据通过多个成像装置获取的多个拍摄图像而生成的且用来生成所述内容的三维几何数据的类型；以及提供部，用于将与所述决定部决定的类型对应的三维几何数据提供给所述显示装置。

本申请是2018年09月14日提交的申请号为201811074027.X、发明名称为“提供装置、提供方法和计算机可读存储介质”的发明专利申请的分案申请。

技术领域

本发明涉及用于进行与虚拟视点图像有关的处理的数据提供装置、数据提供装置的控制方法和存储介质。

背景技术

自由视点图像(虚拟视点图像)技术是使用多个真实相机图像从布置在三维空间中的任意位置处的虚拟相机再现图像的技术的示例。利用虚拟视点图像技术，通过估计被摄体的三维形状来生成从任意虚拟相机位置拍摄的图像。通过将被摄体的模型数据(三维形状和纹理图像)发送到用户的终端，可以生成与用户进行的交互操作对应的虚拟视点图像。然而，由于被摄体的模型数据的数据量大，所以模型数据的发送对通信频带造成压力。作为减少要发送的数据量的方法，日本特许5563545号公报提出了一种构造，其中三维形状的构造密度根据形状的变化量而改变。

然而，日本特许5563545号公报仅关注形状的构造密度，因此存在用户所需的信息被省略的风险。因此，日本特许5563545号公报中公开的用于减少数据量的方法不适合于生成用于生成虚拟视点图像的模型数据。

发明内容

本发明的实施例公开了用于提供三维几何数据的数据提供装置、数据提供装置的控制方法，根据该数据提供装置和控制方法，能够高效地减少用于再生成虚拟视点图像的模型数据的数据量。

根据本发明的一个方面，提供了一种数据提供装置，包括：决定部，其用于基于要在显示装置上显示的内容，决定根据通过多个成像装置获取的多个拍摄图像而生成的且用来生成所述内容的三维几何数据的类型；以及提供部，用于将与所述决定部决定的类型对应的三维几何数据提供给所述显示装置。

根据本发明的另一方面，提供了一种数据提供装置的控制方法，所述方法包括：决定步骤，其用于基于要在显示装置上显示的内容，决定根据通过多个成像装置获取的多个拍摄图像而生成的且用来生成所述内容的三维几何数据的类型；以及提供步骤，用于将与所述决定步骤决定的类型对应的三维几何数据提供给所述显示装置。

根据本发明的另一方面，提供了一种数据提供装置，包括：生成部，其用于生成包括第一三维几何数据和与所述第一三维几何数据的类型不同的第二三维几何数据的多项三维几何数据，所述三维几何数据是基于由多个成像装置获得的多个拍摄图像而生成且用于生成虚拟视点图像；以及提供部，其用于向所述显示装置提供在所述生成部生成的多项三维几何数据中基于显示虚拟视点图像的显示装置的用户所获取的信息而决定的三维几何数据。

通过下面(参照附图)对示例性实施例的描述，本发明的其他特征将变得清楚。

附图说明

图1A是示出图像显示系统的构造和图像处理装置的构造的框图。

图1B是示出显示装置的构造的框图。

图2是示出图像显示系统中的照相机的布置的示意图。

图3是示出用于发送虚拟视点图像的处理的流程图。

图4是示出用于生成层级模型数据的处理的流程图。

图5A至图5C是示出层级模型数据的概览的图。

图6A至图6D是示出属性数据的概览的图。

图7是示出用于生成属性数据的处理的流程图。

图8A和图8B是示出模型数据发送处理的流程图。