[发明专利]一种基于视觉识别的阅读方法及装置

说明书

本发明公开了一种基于视觉识别的阅读方法及装置。其中，所述方法包括：获取书籍内容的图像，进而根据该获取的书籍内容的图像，匹配该图像中间圈特征点，进而根据该匹配得到的该图像中间圈特征点，集合该匹配得到的特征点，存储该集合的该匹配得到的特征点，进而对该存储的特征点进行图像识别匹配包括位置矫正、几何矫正、坐标重新排列等，识别匹配出书籍内容，进而根据该识别匹配出的书籍内容，播放对应该识别匹配出的书籍内容的语音包括从坐标文件库中调取坐标进行对比、点读判断和播放多媒体文件等。通过上述方式，能够实现自动识别书籍内容和播放书籍的语音内容，使得书籍阅读的时间成本得到有效降低。

技术领域

本发明涉及书籍阅读技术领域，尤其涉及一种基于视觉识别的阅读方法及装置。

背景技术

现有的书籍阅读方案，一般是指读或认读，但是在遇上不认识的书籍内容中的字体时，往往需要借助于字典等查阅工具来查阅该不认识的字体的读音，这样导致书籍阅读的时间成本较高。

但是，发明人发现现有技术中至少存在如下问题：

现有的书籍阅读方案，一般是指读或认读，无法实现自动识别书籍内容和播放书籍的语音内容，导致书籍阅读的时间成本较高。

发明内容

有鉴于此，本发明的目的在于提出一种基于视觉识别的阅读方法及装置，能够实现自动识别书籍内容和播放书籍的语音内容，使得书籍阅读的时间成本得到有效降低。

根据本发明的一个方面，提供一种基于视觉识别的阅读方法，包括：

获取书籍内容的图像；

根据所述获取的书籍内容的图像，匹配所述图像中间圈特征点；

根据所述匹配得到的所述图像中间圈特征点，集合所述匹配得到的特征点，存储所述集合的所述匹配得到的特征点；

对所述存储的特征点进行图像识别匹配包括位置矫正、几何矫正、坐标重新排列等，识别匹配出书籍内容；

根据所述识别匹配出的书籍内容，播放对应所述识别匹配出的书籍内容的语音包括从坐标文件库中调取坐标进行对比、点读判断和播放多媒体文件等。

其中，所述根据所述获取的书籍内容的图像，对所述获取的书籍内容的图像的图像特征点进行检测，检测得到图像特征点描述符，根据所述检测得到的图像特征点描述符，匹配所述图像中间圈特征点，包括：

根据所述获取的书籍内容的图像，采用稳定特征加速算法，对所述获取的书籍内容的图像的图像特征点进行检测，检测得到图像特征点描述符，根据所述检测得到的图像特征点描述符，匹配所述图像中间圈特征点。

其中，所述根据所述匹配得到的所述图像中间圈特征点，集合所述匹配得到的特征点，存储所述集合的所述匹配得到的特征点，包括：

根据所述匹配得到的所述图像中间圈特征点，集合所述匹配得到的特征点，采用分割k维数据空间的数据结构方式，存储所述集合的所述匹配得到的特征点。

其中，所述对所述存储的特征点进行图像识别匹配包括位置矫正、几何矫正、坐标重新排列等，识别匹配出书籍内容，包括：

采用K-邻近算法方式，对所述存储的特征点进行图像识别匹配包括位置矫正、几何矫正、坐标重新排列等，识别匹配出书籍内容。

其中，所述根据所述识别匹配出的书籍内容，播放对应所述识别匹配出的书籍内容的语音包括从坐标文件库中调取坐标进行对比、点读判断和播放多媒体文件等，包括：

根据所述识别匹配出的书籍内容，采用随机抽样一致算法方式，为所述识别匹配出的书籍内容配置语音，并播放所述配置的书籍内容的语音，播放对应所述识别匹配出的书籍内容的语音包括从坐标文件库中调取坐标进行对比、点读判断和播放多媒体文件等。