[发明专利]图像处理方法和设备

说明书

技术领域

本发明涉及一种将附加信息叠加在拍摄的图像上的图像处理方法及其设备。

背景技术

用于拍摄运动图像的摄像机和数码相机已得到广泛普及并例如用于拍摄游乐园内的小孩等。这些摄像机和数码相机设置有成像部、用于记录所获取的图像数据的记录部和用于显示当前正拍摄的图像或已记录在其中的图像的显示装置（诸如，LCD）。摄像机和数码相机大多数配备有拍摄静止图像以及运动图像的功能。

近年来，已知这样的摄像机或数码相机：其配备有增强现实表示功能，由此各种附加信息或增强现实（AR）信息可叠加到由相机拍摄并显示的物理空间的图像（例如，风景的图像）上。在专利文献1中所描述的系统预测CG生成部完成生成要叠加到物理空间图像上的虚拟空间图像的完成时间，接着预测在所预测的生成完成时间处的视点位置和方位。CG生成部在从所预测的视点的位置和方位可见的条件下生成虚拟空间图像，并且将其叠加到物理空间图像上。因此，虚拟空间图像可合成在物理空间图像上而没有任何不自然的印象，但是生成虚拟空间图像很费时。

在专利文献1中所描述的系统中，基于关于所检测到的位置和方位的信息从数据库检索虚拟物体。如果关于所检测到的位置和方位的信息的精确度低或者所检测到的位置和方位偏离正确的位置和方位，则将基于不正确的位置和方位而不是正确的位置和方位来检索虚拟物体。结果，有时会发生所叠加的虚拟空间图像与物理空间图像不匹配。

在对比文件2中所描述的终端装置读取数字码（诸如QR码（商标））作为拍摄的图像上所表现的码，并且基于所读取的数字码获取附加信息。然后，所获取的附加信息重叠在显示装置上所显示的拍摄的图像上。因此，仅仅是与在拍摄的图像上所表现的数字码对应的这样的附加信息重叠在拍摄的图像上，而不适合于拍摄的图像的这样的附加信息不会重叠在拍摄的图像上。

现有技术文献

专利文献

专利文献1：第2010-039556号日本专利早期公开申请公布

专利文献2：第2008-193640号日本专利早期公开申请公布

发明内容

本发明要解决的问题

为了确保从拍摄的图像获取附加信息，要求拍摄的图像几乎不模糊地表现数字码。相反，为了连续运动图像的流畅或流动表示，除了数字码外的对象在拍摄的图像中应当适中地模糊。即，适于可靠获取附加信息的图像与适于流畅表示运动图像的图像不一致。因此，在从被拍摄以显示在显示装置上的那些图像当中获取附加信息的装置中，如专利文献2中所描述的那样，难以同时实现附加信息的可靠获取和运动图像的流畅表示。

本发明的目的在于提供一种如下的图像处理方法及其设备：通过该图像处理方法及其设备必定可以获取附加信息，同时可以连续不断地流畅显示运动图像。

用于解决问题的手段

为了实现上述目的，本发明的图像处理设备包括成像部、显示图像产生部、附加信息参考图像产生部、读取部、附加信息记录部、附加信息获取部、附加信息重叠图像产生部和显示装置。成像部通过对对象连同标记一起成像来连续不断地拍摄图像，所拍摄的图像构成运动图像。显示图像产生部在每次拍摄图像时基于所拍摄的图像产生显示图像，该显示图像用于使对象的运动在显示运动图像时连续。附加信息参考图像产生部每当拍摄图像时基于所拍摄的图像产生附加信息参考图像，附加信息参考图像以较小的模糊表现对象并用于获取要重叠在显示图像上的附加信息。读取部读取附加信息参考图像上的标记。在附加信息记录部中，与各个标记相关联地记录附加信息。附加信息获取部从记录在附加信息记录部中的多个附加信息当中检索并获取与读取部读取的标记相关联的附加信息。附加信息重叠图像产生部在标记的区域内产生附加信息重叠图像，在附加信息重叠图像中，由附加信息获取部获取的附加信息重叠在显示图像上。显示装置显示附加信息重叠图像。应注意，该标记可以具有条形码、QR码（注册商标）等。

成像部优选地以适合于产生附加信息参考图像的快门速度拍摄图像，并且显示图像产生部还产生要显示在显示图像当中的连续的显示图像之间的多个内插显示图像。附加信息重叠图像产生部在标记的区域内将附加信息获取部已获取的附加信息重叠在内插显示图像上，以产生附加信息重叠图像。

成像部可以优选地以适合于产生显示图像的第一快门速度以及比第一快门速度高且适合于产生附加信息参考图像的第二快门速度交替地进行成像。显示图像产生部基于通过第一快门速度成像所取得的图像来产生显示图像。附加信息参考图像产生部基于通过第二快门速度成像所取得的图像来产生附加信息参考图像。