[发明专利]一种视听交互智能机器人

说明书

本发明涉及一种视听交互智能机器人，包括智能呈现终端和智能机器人，其特征在于：所述智能呈现终端包含视听交互平台和通讯模块，所述智能机器人包括图像采集模块、声音采集模块、电源模块、动作模块、中央处理模块、伺服驱动电机和定位模块；能够让使用者通过所述智能机器人实现对周围环境的3D立体感知，具有广阔的市场前景和应用价值。

技术领域

一种视听交互智能机器人，属于智能机器人技术领域。

背景技术

目前，现有的普通遥控类机器人，都是通过遥控器控制前进方向，同时只做到通过增加普通摄像头实现普通的二维呈现。一是无法进行3D视觉捕捉，真实世界是一个三维的世界，物体是有景深的，包含更多的信息如声音信息。而现有的机器人，还没有一款可以实现周围环境的3D视觉捕捉和3D视觉呈现，无法呈现立体的效果；二是无法增加格外的AR虚拟信息，通过机器人捕捉的3D视觉，仅仅是对现实世界的一个视觉呈现，在万物互联的云时代，我们其实还需要更多的辅助AR信息。

发明内容

有鉴于此，本发明提供了一种视听交互智能机器人，包括智能呈现终端和智能机器人，其特征在于：智能呈现终端包含视听交互平台和通讯模块，智能机器人包括图像采集模块、声音采集模块、电源模块、动作模块、中央处理模块、伺服驱动电机和定位模块；

图像采集模块包括镜头、图像传感器、图像信号转化单元和3D处理单元；镜头有4个，分别布置在智能机器人的前、后、左、右侧；镜头选择单元，选取一个镜头作为当前处理镜头；图像传感器，将所在位置的当前处理光路的光信号转换为当前处理镜头的数字图像信号，获得当前处理镜头的数字图像；3D处理单元，对镜头的数字图像进行三维图像的处理操作，获得三维数字图像；

声音采集模块包括声音信号传输单元、声音信号处理单元和声音信号储存单元；声音信号传输单元将接收到的声音信号传递到声音信号处理单元；声音信号处理单元将声音信号进行不同级别的放大处理，并对其进行模数转换，声音信号储存单元接收并储存经过模数转换的声音信号；

电源模块分别与图像采集模块、动作模块、中央处理模块、伺服驱动电机和定位模块连接，对其进行电力供应；

中央处理模块分别与图像采集模块、动作模块、定位模块连接，中央处理模块通过通讯模块与视听交互平台连接；

视听交互平台通过通讯模块与智能呈现终端连接，智能呈现终端储存辅助AR信息，图像采集模块安装有图像捕捉算法，视听交互平台安装有呈现算法；

呈现算法将图像向量化，将第i张图像视作由b个色块组成的向量，每个色块对应一个特征项，第j个色块对应特征项t_j；d_ij通过公式一计算：

公式一：

其中，d_ij为向量d_i在第j个维度的分量，s_ij为特征项t_j在第i张图像中出现的次数；s_i为第i张图像中总色块数：Z表示图像集合中图像的总数，Z_j表示包含特征项t_j的图像的数目；i和j均为正整数，i≤Z，j≤b；

每个特征项t_j对应一个表征值w_ij，表示特征项t_j在该图像中的重要程度，表征值w_ij通过公式二计算：

公式二：

其中，w_ij的值为第i张图像的特征项t_j的表征值，s_ij为特征项t_j在第i张图像中出现的次数；Z表示图像集合中图像的总数，Z_j为图像集合中，包含特征项t_j的图像的数目；i和j均为正整数，i≤Z，j≤b；