[发明专利]扩增实境的远程互动系统、方法、装置及存储介质

说明书

本发明公开了一种扩增实境的远程互动系统、方法、装置及存储介质，其包含扩增实境眼镜、管理服务器与远程装置，扩增实境眼镜用以接收影音讯息并传输至管理服务器，经由管理服务器传输命令至远程装置，于远程装置同意作业后，远程装置撷取影音讯息中的影像，并在影像上叠加批注数据，经由管理服务器回传修改后之影像到扩增实境眼镜的显示器进行显示。本发明能克服现场作业人员因能力不足而无法处理现场的问题，及时由专业人员直观地提供指导，确保施作的准确性。

技术领域

本发明涉及混合现实技术领域，更具体地涉及一种扩增实境的远程互动系统、方法、装置及存储介质。

背景技术

面临复杂的机械维修、紧急医疗手术时，留守的现场人员可能经验不足，而当设备或机具异常事件发生时，基于现场人员的经验不足或能力有限的原因，即便实时抵达异常事件现场，也无法立即排除异常事件。同样地，紧急医疗手术事件也会因现场医师或护理师经验不足，而无法立即排除而延宕治疗，造成后续其他并发症的问题。

随着科技发达与材料科学的演进，智能型装置已成为必备随身物品，即使如此，当发生以上突发异常事件时，经验不足的现场人员仅能透过智能型装置拨号给远程负责之专业人员，采用简易语音或视讯画面与专业人员沟通，而专业人员仅能提供语音或讯息的初步建议，但由于沟通时除了会增加问题排除的时间，专业人员也无法以更直接且有效地指导现场人员正确施作。因此，如何有效辅导现场作业人员及时处理现场的问题乃是一个重要的课题。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述缺陷，提出一种扩增实境的远程互动系统、方法、装置及存储介质，通过远程专业人员加注扩增实境眼镜呈现的影像，能直观地指导现场人员正确施作。

本发明解决其技术问题所采用的技术方案是：一种扩增实境的远程互动系统，其包括扩增实境眼镜、管理服务器与远程装置。所述扩增实境眼镜具有影音采集模块、呼叫模块与第一数据传输模块，所述影音采集模块用以采集影音讯息，所述呼叫模块用以采集呼叫讯息，所述第一数据传输模块用以传输影音讯息及呼叫讯息。所述管理服务器用以接收所述呼叫讯息与所述影音讯息，并根据所述呼叫讯息发出数据传输请求。所述远程装置具有第二数据传输模块，用以接收所述数据传输请求，并于输入确认指令后，所述第二数据传输模块接收所述影音讯息，且所述远程装置还具有影像修改模块，适于撷取所述影音讯息中的实时影像，并在所述实时影像上叠加批注数据，得到加注影像，经由所述管理服务器回传所述加注影像到所述第一数据传输模块，以于所述扩增实境眼镜之显示器显示出所述加注影像。

在本发明所述的系统中，所述批注数据包括文字、符号、几何图形或模型图中的一种或几种。

在本发明所述的系统中，所述影像修改模块适于从所述加注影像中再次更改所述批注数据，得到第二加注影像。

在本发明所述的系统中，所述远程装置为智能型装置，所述智能型装置为手机、计算机或PDA。

在本发明所述的系统中，所述远程装置具有音源接收模块，用以接收所述远程装置周围的音源讯息，并将音源讯息透过所述管理服务器传输至第一数据传输模块，而所述扩增实境眼镜还具有音源输出模块，用以播放音源讯息。

在本发明所述的系统中，所述远程装置之显示画面包括具有批注数据之影像。

在本发明所述的系统中，所述远程装置之显示画面包括第一窗口及第二窗口，所述第一窗口用以显示所述实时影像，所述第二窗口用以显示所述加注影像。

在本发明所述的系统中，所述扩增实境眼镜更具有地图建构处理模块，所述地图建构处理模块根据所述影音讯息中的动态影像变化，建立扩增实境眼镜本体周围的环境模型数据，并用于空间定位。

在本发明所述的系统中，所述影像修改模块执行影像加注动作时，地图建构处理模块建立环境模型数据，而于影像修改模块完成影像加注动作后，加注数据被加入环境模型数据。