[发明专利]交互方法、装置和计算机可读存储介质

说明书

本发明公开了一种交互方法，包括：通过麦克风获取音频信息，并通过摄像头获取视频信息；与VR设备建立连接；将获取的所述音频信息和/或视频信息发送给所述VR设备，以使得VR设备根据所述视频信息和/或音频信息进行展示；接收所述VR设备发送的使用者的头部动作信息、肢体动作信息和表情信息；根据所述头部动作信息、肢体动作信息和表情信息进行对应的同步操作。本发明还公开了一种交互装置、计算机可读存储介质。本发明能够实现利用机器人和VR设备使远程双方具有更立体和沉浸感的互动，加强远程双方的交流。

技术领域

本发明涉及智能交互技术领域，尤其涉及一种交互方法、装置及计算机可读存储介质。

背景技术

随着经济的发展，生活节奏的提高，人们的生活越来越富裕，生活也越来越忙碌，但照顾家庭的时间越来越少。因此，对老人和小孩的照顾问题已越来越成为人们急需解决的棘手问题。现在，越来越多的智能产品和智能服务应用于远程陪护方面，帮助人们解决照顾家庭的问题。

目前，基于固定摄像头模式的远程看护交流模式即用固定高清摄像头静态地进行室内的拍摄来实现远程陪护的模式，虽然能够满足人们对家庭的监控需求来应对意外情况的发生，但无法解决老人感觉无人陪伴的困扰，和远程监视端对视频中场景缺少沉浸感的问题。

发明内容

本申请的主要目的在于提供了一种交互方法、装置和计算机可读存储介质，旨在提供一种更加有沉浸感、互动性更强的远场交互方式。

为实现上述目的，本发明提供一种交互方法，所述交互方法包括：

通过麦克风获取音频信息，并通过摄像头获取视频信息；

与VR设备建立连接；

将获取的所述音频信息和/或视频信息发送给所述VR设备，以使得VR设备根据所述视频信息和/或音频信息进行展示；

接收所述VR设备发送的使用者的头部动作信息、肢体动作信息和表情信息；

根据所述头部动作信息、肢体动作信息和表情信息进行对应的同步操作。

可选地，所述通过麦克风获取音频信息的步骤包括：

通过环形或者线形麦克风阵列收集声音信息；

利用预设的空域滤波算法对所述声音信息进行降噪处理，得到无噪音的声音信息；

确定所述无噪音的声音信息起始点和结束点，并对所述无噪音的声音信息进行检测过滤，得到音频信息。

可选地，所述通过摄像头获取视频信息的步骤包括：

利用预设的声源定位算法确定所述声音信息对应的声源在预设坐标系中所处的方位；

控制摄像头转动到所述声源所处的方位，并用左目和右目摄像头同时拍摄，得到左目视频帧和右目视频帧；

根据所述左目视频帧和右目视频帧获得所述视频信息。

可选地，所述将获取的所述音频信息和/或视频信息发送给所述VR设备，以使得VR设备根据视频信息和/或音频信息进行展示的步骤包括：

将获取的所述音频信息和/或视频信息发送给所述VR设备，以使得VR设备对视频信息进行解码，并将所述左目视频信息投射到用户的左眼睛，将所述右目视频信息投射到用户的右眼睛。

可选地，所述接收所述VR设备发送的使用者的头部动作信息、肢体动作信息和表情信息的步骤包括：

接收所述VR设备根据所述VR设备中眼动跟踪器、重力加速计和陀螺仪分别获得的眼部动作、头部动作幅度和转动方向转化的头部动作信息。

可选地，所述接收所述VR设备发送的使用者的头部动作信息、肢体动作信息和表情信息的步骤包括：