[实用新型]一种基于视频及语音交互服务设备

说明书

本实用新型涉及智能终端服务机领域，更具体的涉及一种基于视频及语音交互服务设备，一种基于视频及语音交互服务设备，包括数据采集装置、数据识别装置、数据输出装置，所述数据采集装置、数据识别装置、数据输出装置通过无线连接并安装在服务器上。在进行交互服务时，能够准确识别用户语音及视频信息，计算用户所需意图服务，从而实现为用户提供交互式服务的完整解决方案。

技术领域

本实用新型涉及智能终端服务机领域，尤其涉及一种基于视频及语音交互服务设备。

背景技术

随着科技的进步，服务机器人、智能广告牌、公共智能自助柜台机等设备在公共领域提供的服务越来越广泛，为人们提供了越来越多的服务，使人们的生活更加的便捷。机场、车站、景区、医院等公共场所一般都会设有问询台，有工作人员在问询台实时的提供问询帮助，当突发高峰导致问询的人数增多时，由于问询服务人员不足，导致大量排队、秩序混乱、用户体验不良等现象；当处于问询人员少时，又导致问询服务人员的人力浪费。当前虽然存在自助问询的机器人，但是由于在嘈杂的公共场所语音识别不准确、并且在进行语音及视频信息转化时信息转化错误导致无法理解客户意图等原因产生了大量答非所问的现象，当前并未被良好的解决，也没有合理的工业化方案，因此，当前普遍无法为用户在公共场所提供语音式交互服务。

实用新型内容

为了解决上述技术问题，本实用新型的目的在于提供一种基于视频及语音交互服务设备，解决了在语音与视频识别过程中出现的用户周围噪声大导致信息识别不准确、意图计算错误、意图服务输出慢等问题。

为了实现上述目的，本实用新型所采用的技术方案为一种基于视频及语音交互服务设备，一种基于视频及语音交互服务设备，其特征在于：包括数据采集装置(1)、数据识别装置(2)、数据输出装置(3)；所述数据采集装置(1)设置有摄像头(11)、麦克风(13)，所述麦克风(13)具有降噪功能；所述数据识别装置(2)设置有语音及视频识别系统(21)、意图识别系统(22)，所述语音及视频识别系统(21)连接在服务器上；所述数据采集装置(1)、数据识别装置(2)、数据输出装置(3)通过无线连接并安装在服务器上。通过采用上述技术方案，能够使用户与设备实现一套完整的自助服务，解决了在语音与视频识别过程中出现的用户周围噪声大导致信息识别不准确、意图计算错误、意图服务输出慢等问题

进一步的，所述数据采集装置设置有分类器，所述摄像头与所述麦克风连接在显示器上，所述分类器与所述摄像头、麦克风通过总数据线相连接。通过采用上述技术方案，方便对用户信息的采集，降低用户周围噪声，保证语音信息收集的准确性。

进一步的，所述对话管理及服务管理系统与显示器相连接。通过上述技术方案，可以根据当前服务内容、当前对话语境、用户意图相结合计算用户所需的服务类型进行匹配并将匹配结果输入到显示器上，实现数据的快速准确传播。

进一步的，所述数据输出装置设置有推荐系统，所述推荐系统与显示器相连接。通过采用上述技术方案，当数据识别装置未能通过用户语音及图像信息识别到相关信息时，推荐系统则将最接近的服务推送供用户选择

进一步的，所述数据输出装置设置有人机交互显示装置，所述人机交互显示装置上设置有显示器、喇叭，所述喇叭连接在所述显示器上。通过采用上述技术方案，方便用户与设备进行语音交互或者点选自助服务。

进一步的，所述意图识别系统为Embedding运算系统。通过采用上述技术方案，能够快速运算出与用户意图相似的意图服务。

进一步的，所述语音及视频识别系统包括识别器、音频转化系统、视频图像编码系统、视频编码及语音和视频信息融合系统、融合信息识别系统、解码器，所述识别器与分类器相连接，所述音频转化系统、视频图像编码系统、视频编码及语音和视频信息融合系统、融合信息识别系统、解码器均通过无线连接。通过采取上述技术方案，能够方便数据的分类、剪辑、处理，进一步提高数据传播速度。