[发明专利]混合现实系统、程序、方法和便携式终端装置

权利要求书

1.一种混合现实系统，包括服务器和便携式终端装置，所述便携式终端装置具有用于向存在于预定现实空间中的用户显示虚拟对象的显示器，并且还具有用于拍摄所述现实空间的拍摄装置，所述混合现实系统用于将所述虚拟对象叠加在所述现实空间的拍摄图像上的混合现实图像显示在所述显示器上，

其中，在存在于所述预定现实空间中的现实对象上的一个或多个预定义位置中的各位置处布置有MR标记，所述MR标记由包含与该位置相对应的位置信息的标识码和具有多边形形状的对准标记构成，

其中，所述服务器包括：

虚拟空间数据存储单元，用于存储虚拟空间数据，所述虚拟空间数据包括存在于所述预定现实空间中的所述现实对象的三维空间数据、并且还包括布置在虚拟空间中的虚拟对象数据，所述三维空间数据是预先获得的并且由各自具有所述虚拟空间中的三维位置信息的三维形状元素构成；以及

应用存储单元，用于存储基于所述标识码中所包括的标识符而标识的Web应用，所述Web应用提供混合现实图像显示网页，所述混合现实图像显示网页在被所述便携式终端装置加载时使得启动所述拍摄装置、并且包括基于所述拍摄装置所拍摄到的所述现实空间的拍摄图像的混合现实图像的显示区域，以及

其中，所述便携式终端装置包括：

浏览器单元，用于访问所述标识码中所包括的标识符，以显示所述Web应用所提供的所述混合现实图像显示网页；

标记识别单元，用于在启动所述Web应用、利用所述拍摄装置拍摄所述MR标记、并且识别所述标识码的情况下，识别构成所述MR标记的所述对准标记；

位置确定单元，用于基于所述浏览器单元所访问的标识符中所包含的位置信息、以及所述便携式终端装置与所述标记识别单元所识别的所述对准标记之间的位置关系，来确定与所述现实空间中的所述拍摄装置的位置和拍摄方向相对应的、所述虚拟空间中的虚拟照相机的视点位置，所述位置关系是根据所述对准标记的形状和大小而确定的；以及

图像生成单元，用于基于所述虚拟空间数据和所述虚拟照相机的视点位置，来生成要显示在所述混合现实图像显示网页的所述显示区域中的、所述虚拟对象叠加在所述现实空间的拍摄图像上的混合现实图像。

2.根据权利要求1所述的混合现实系统，

其中，所述便携式终端装置还包括：

标识码识别单元，用于在利用所述拍摄装置拍摄所述MR标记的情况下，识别所述标识码，以及

其中，所述浏览器单元访问所述标识码识别单元所识别的所述标识码中所包括的标识符，以显示所述Web应用所提供的所述混合现实图像显示网页。

3.根据权利要求1或2所述的混合现实系统，

其中，所述虚拟空间数据存储单元存储与所述标识码中所包括的各个标识符相对应的虚拟空间数据，

其中，所述浏览器单元从所述虚拟空间数据存储单元获得与所访问的标识符相对应的虚拟空间数据，以及

其中，所述图像生成单元通过使用从所述虚拟空间数据存储单元获得的虚拟空间数据，来生成从所述虚拟照相机的视点位置看到的混合现实图像。

4.根据权利要求3所述的混合现实系统，

其中，所述便携式终端装置还包括：

标识符判断单元，用于判断作为启动所述Web应用的结果而识别的标识码中所包括的标识符与所述浏览器单元所访问的标识符是否相同，以及

其中，在所述标识符判断单元判断为这两个标识符相同的情况下，所述标记识别单元识别所述对准标记。

5.根据权利要求4所述的混合现实系统，

其中，在所述标识符判断单元判断为这两个标识符不相同的情况下，所述浏览器单元访问作为启动所述Web应用的结果而识别的标识码中所包括的另一标识符，从所述虚拟空间数据存储单元获得与所述另一标识符相对应的虚拟空间数据，并且代替进行重新加载而是显示所述混合现实图像显示网页，以及

其中，所述标记识别单元对连同包括所述另一标识符的标识码一起构成所述MR标记的所述对准标记进行识别。

6.根据权利要求1至5中任一项所述的混合现实系统，其中，所述标识符是URL。