[发明专利]一种混合现实显示方法、装置及系统

说明书

本发明公开一种混合现实显示方法、装置及系统，包括：检测到主识别体，将主识别体所在范围记录为主识别区域；检测到具有唯一识别标识的从识别体，将从识别体所在范围记录为与识别标识关联的从识别区域；当检测到从识别区域与主识别区域接触重叠且接触重叠部分超过预设主重叠阈值时，获取与主识别区域接触重叠且接触重叠部分超过预设主重叠阈值的从识别区域的识别标识作为接触识别标识，在显示实景画面的同时播放关于接触识别标识的从识别体和主识别体接触的虚拟交互景象，或执行关于接触识别标识的从识别体和主识别体接触的相应操作。本发明能够实现识别体之间的精确互动，使虚拟景象产生交互表现，增加互动性以及沉浸感。

技术领域

本发明涉及混合现实相关技术领域，特别是一种混合现实显示方法、装置及系统。

背景技术

混合现实技术，例如Mixed reality(MR)或者Augmented Reality(AR)等，是虚拟现实技术的进一步发展，该技术通过在虚拟环境中引入现实场景信息，在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。

在混合现实技术中，需要通过一个识别体，例如一个特定图案或者一个特定的实体进行标识，检测装置检测到该识别体，则能在该识别体中形成虚拟画面。

然而，现有的混合现实技术，识别体仅仅是作为一个标识使用，在检测装置检测到识别体生成虚拟画面后，用户通过按键、手指或其他设备对虚拟画面进行操作实现互动。然而，现有技术对与虚拟画面进行交互的实体或者没有进行虚拟化，或者进行虚拟化时也没有对不同的识别体的交互实现不同的交互效果。例如用户如果通过手指对虚拟画面中的虚拟物体进行操作，该手指仍然采用实体显示。或者用户通过识别体对虚拟物体进行操作时，系统虽然将识别体显示为虚拟物体，然而其并不能根据不同的识别体产生不同的交互效果。因此，现有技术的这种操作方式缺少精确的互动性，用户的沉浸感不强。

发明内容

基于此，有必要针对现有技术缺乏识别体间精确的互动，导致用户沉浸度不高的技术问题，提供一种混合现实显示方法、装置及系统。

本发明提供一种混合现实显示方法，包括：

主识别体检测步骤，包括：检测到主识别体，将所述主识别体所在范围记录为主识别区域；

从识别体检测步骤，包括：检测到具有唯一识别标识的从识别体，将所述从识别体所在范围记录为与所述识别标识关联的从识别区域；

主从识别体接触检测步骤，包括：当检测到所述从识别区域与所述主识别区域接触重叠且接触重叠部分超过预设主重叠阈值时，获取与所述主识别区域接触重叠且接触重叠部分超过预设主重叠阈值的所述从识别区域的识别标识作为接触识别标识，在显示实景画面的同时播放关于所述接触识别标识的所述从识别体和所述主识别体接触的虚拟交互景象，或执行关于所述接触识别标识的所述从识别体和所述主识别体接触的相应操作。

进一步的，所述主识别体检测步骤，还包括：从所述识别体中检测出至少一个识别区域；

所述接触检测步骤，还包括：当检测到所述从识别区域与一个识别区域接触重叠且接触重叠部分超过预设识别重叠阈值时，将与所述从识别区域接触重叠的识别区域作为被选中区域，在显示实景画面的同时播放关于所述接触识别标识的所述从识别体和所述被选中区域接触的虚拟交互景象，或执行关于所述接触识别标识的所述从识别体和所述被选中区域接触的相应操作。

更进一步的，所述主识别区域为背景区域，所述主识别体检测步骤还包括：显示与所述主识别体相关的虚拟背景画面。

更进一步的，还包括：从识别体间接触检测步骤，包括：当检测到具有第一识别标识的从识别体的第一从识别区域与具有第二识别标识的从识别体的第二从识别区域接触重叠且接触重叠部分超过预设从识别体重叠阈值时，在显示实景画面的同时播放关于所述第一从识别体和所述第二从识别体接触的虚拟交互景象。