[发明专利]一种基于桌面真三维的文物交互方法

权利要求书

1.一种基于桌面真三维的文物交互方法，其特征在于，包括如下步骤：

a.利用多视点光场采集系统采集目标文物多幅视角图像；

b.处理多幅视角图像进行目标文物点云模型的重建；

c.对实际场景中的光照信息进行估计，将虚拟文物模型与实际场景进行融合；

d.采用深度成像及机器视觉构建手势集和解释手势语义；

e.采用Kinect体感跟踪设备实现文物展示场景的实时手势交互。

2.根据权利要求1所述的基于桌面真三维的文物交互方法，其特征在于，步骤a所述多视点光场采集系统是由多摄像机采集阵列与光场环境组成，多摄像机采集阵列采用环形摆放方式，尽可能采集到目标文物不同角度的信息，采集的CCD摄像机要求能够达到60帧/秒，1200万像素采集，图像分辨率达到1920×1080以上，光场环境由环形均匀分布的发光二极管LED构成。

3.根据权利要求1所述的基于桌面真三维的文物交互方法，其特征在于，步骤c具体为实际场景中可能存在漫反射或者镜面反射，通过检测镜面高光点来判断场景中是否存在镜面反射；使用维纳熵的非标准化形式来检测图像中镜面现象，通过检测多幅视角图像的镜面高光点，将场景区分为只存在漫反射的场景或者是同时存在漫反射与镜面反射的场景；使用估计出的光照结果进行虚实融合后场景渲染，在渲染过程中考虑虚拟文物与实际场景的遮挡问题，完成虚实融合中的光照一致性。

4.根据权利要求1所述的基于桌面真三维的文物交互方法，其特征在于，步骤d具体为采用深度成像及机器视觉获取手部三维坐标，获得交互手势的语义识别方法，构建桌面应用的手势交互专用手势集，对交互手势的性能进行评价与优化，通过人体跟踪与手势相结合分析获取用户的精确交互语义。

5.根据权利要求1所述的基于桌面真三维的文物交互方法，其特征在于，步骤e具体为通过手部位置与手势和真三维场景的空间匹配，以及手部运动轨迹及手势语义对桌面真三维显示系统进行精确的实时交互驱动。