[发明专利]信息处理设备、视频传输设备及其控制方法

说明书

本发明涉及一种信息处理设备、视频传输设备及其控制方法。该信息处理设备使用从多个方向拍摄到的视频数据来生成虚拟视点可以改变的自由视点视频。该信息处理设备从视频传输设备接收用于生成预定视点处的自由视点视频的视频数据，根据从视频传输设备接收到的视频数据来生成预定视点处的自由视点视频，并且执行控制，使得在存在用于生成从预定视点起的预定范围内所包括的视点处的自由视点视频的其它信息处理设备的情况下，与该其它信息处理设备执行通信，并且使用从该其它信息处理设备接收到的视频数据来生成预定视点处的自由视点视频。

技术领域

本发明涉及信息处理设备、视频传输设备及其控制方法，特别涉及自由视点视频生成系统。

背景技术

通过网络的视频传输当前基于简单的客户端-服务器模型。通常使用点播系统(on-demand system)，在这些点播系统中，网络上的许多客户端向服务器发出请求，并且响应于这些请求而传输视频。在客户端-服务器模型中传输诸如视频等的具有大的文件大小的内容的情况下，存在如下的问题：如果客户端的数量增加并且请求相应地集中，则将对服务器施加更大的处理负荷并且服务器附近的线路将变得拥塞。

作为解决该服务器负荷问题的一个传输方法，已知有使用对等(P2P)通信的数据传输方法。在P2P通信中，网络上的具有等效关系的终端彼此连接，这使得可以在无需使用服务器的情况下发送和接收数据并由此传输内容。

关于用于传输实时视频等的P2P网络服务，日本特开2013-258657公开了在网格型P2P网络服务中使用的终端和程序。如日本特开2010-121945所例示的，用于使用多个照相机所拍摄到的视频数据来生成从期望视点看到的视频的技术也是已知的。

作为用于生成视频数据的技术，还已知有使用多个照相机所拍摄到的视频数据来生成从期望视点看到的视频的自由视点视频生成系统。通过使用安装在例如足球场等中的多个照相机，系统可以通过计算选手和球等的三维位置来生成3D空间数据。然后，服务器将生成来自期望视点的视频所需的数据传输至用户终端，然后该用户终端生成自由视点视频。这使得用户能够从多种不同的视点观看体育馆的比赛。

日本特开2013-258657的前提条件是数据通信中的上游侧终端保持下游侧终端所需的数据。然而，在上述的自由视点视频生成系统中，针对各用户终端，需要来自不同视点和角度的视频。如果如这种自由视点视频的情况那样、使用日本特开2013-258657中所述的技术来传输针对各用户有所不同的数据，则存在上游侧终端不具有生成用户的期望视频所需的数据的情形。

发明内容

本发明是考虑到上述问题而作出的，并且实现能够减少向各个终端传输视频时所涉及的处理负荷的系统。

为了解决上述问题，本发明提供一种信息处理设备，用于使用从多个方向所拍摄到的视频数据来生成虚拟视点能够改变的自由视点视频，所述信息处理设备包括：通信单元，其被配置为从视频传输设备接收用于生成预定视点处的自由视点视频的视频数据；生成单元，其被配置为根据从所述视频传输设备所接收到的视频数据来生成所述预定视点处的自由视点视频；显示单元，其被配置为显示所述自由视点视频；以及控制单元，其被配置为执行控制，使得在存在用于生成从所述预定视点起的预定范围内所包括的视点处的自由视点视频的其它信息处理设备的情况下，与所述其它信息处理设备执行通信，并且使用从所述其它信息处理设备所接收到的视频数据来生成所述预定视点处的自由视点视频。