[发明专利]实时播放由多个摄像头输入的虚拟现实影像的装置及方法

说明书

本发明提供用于实时播放由多个摄像头输入的虚拟现实影像的虚拟现实影像实时播放装置，其特征在于，包括：多个拍摄部，用于在同一时间拍摄同一位置的不同方向；影像选择部，对多个拍摄部分别覆盖的视角与用户终端的视线方向进行比较，选择多个拍摄部中的拍摄与用户终端的视线方向对应的影像的拍摄部的影像；影像传输部，向用户终端实时传输由影像选择部所选择的拍摄部拍摄的虚拟现实影像；以及视线方向接收部，接收对收看虚拟现实影像的用户终端的视线方向的反馈来向影像选择部传递，本发明并不拼接(stitching)由多个拍摄部拍摄的多个虚拟现实影像，而是向用户终端仅传输包含用户终端的视线方向的拍摄部的影像来实现虚拟现实内容的实时播放。

技术领域

本发明涉及虚拟现实再生装置及方法。

背景技术

虚拟现实(Virtual Reality)为通过使用计算机等人工智能技术来提供与实际类似的环境的技术。

360VR影像为利用多个摄像头来覆盖360度全方位的影像，欣赏影像的用户可以感受到犹如置身于该影像的拍摄现场的高度沉浸感。

360VR影像通过如下方式制作，以拍摄不同方向的方式配置多个摄像头之后，连接各个摄像头拍摄的影像来形成犹如同时拍摄360度全方位的原始影像。在此情况下，将以自然地显示多个摄像头拍摄的不同方向的影像的方式进行连接的编辑过程称为拼接(stitching)。

拼接技术是一种根据预定的视野角度和画面大小的标准来修改由多个摄像头拍摄的影像的焦距和失真率之后将其进行连接的技术。为了准确的拼接，需要在相邻的多个影像的边缘匹配所拍摄的图像的颜色信息、位置、角度，需要修改因摄像头的性能差异而发生的图像清晰度或拍摄物的垂直、水平线等。

但是，如上所述，为了校正拼接多个影像，修改及编辑将消耗相当长的时间。

因此，为了将实况直播的内容作为360VR影像进行流式传输，无法实时播放内容，且发生至少延迟拼接所需时间的问题。

对此，本发明的发明人为了解决上述问题，经过长时间的研究且反复进行试验和开发，最终完成了本发明。

发明内容

技术问题

本发明为了解决上述问题而提供如下装置，即，并不对利用在同一位置中向不同的方向配置的多个摄像头来拍摄的虚拟现实影像进行拼接，而是实时播放所拍摄的虚拟现实影像。

另一方面，本发明并未明示的其他目的在可从以下的详细说明及其效果中轻松推论的范围内追加考虑。

解决问题的方案

本发明的第一实施方式提供用于实时播放由多个摄像头输入的虚拟现实影像的虚拟现实影像实时播放装置，其特征在于，包括：多个拍摄部，用于在同一时间拍摄同一位置的不同方向；影像选择部，对多个拍摄部分别覆盖的视角与用户终端的视线方向进行比较，选择多个拍摄部中的拍摄与用户终端的视线方向对应的影像的拍摄部的影像；影像传输部，向用户终端实时传输由影像选择部所选择的拍摄部拍摄的虚拟现实影像；以及视线方向接收部，接收对收看虚拟现实影像的用户终端的视线方向的反馈来向影像选择部传递，上述实时播放装置并不拼接(stitching)由多个拍摄部拍摄的多个虚拟现实影像，而是向用户终端仅传输包含用户终端的视线方向的拍摄部的影像来实现虚拟现实内容的实时播放。

在优选实施例中，多个拍摄部包括用于在同一时间拍摄同一位置的不同方向的N个摄像头部，N个摄像头部用于对拍摄视角进行拍摄，上述拍摄视角是通过在将N个摄像头部所覆盖的总视角分为N个来得到的临时视角的两侧分别加上规定的保护视角来得到的值，从而被设定为一个摄像头部拍摄的视角与在两侧相邻的其他摄像头部所覆盖的视角重叠规定视角。