[发明专利]一种指读方法、装置、机器人、终端及计算机存储介质

说明书

本发明提供一种指读方法、装置、机器人、终端及计算机存储介质，通过获取指读图像，指读图像包括内容正文、边框花边、章节节点和位置指示工具，根据指读图像确定当前页面信息、当前指读章节，获取当前指读章节对应的当前指读章节语音并播放，本发明还提供一种指读装置、机器人、终端及计算机存储介质，达到了基于现有的部分书籍通过预先处理即可实现指读，不需要重新制作书籍和点读笔，降低了成本，更加便利，提升了用户体验度。

技术领域

本发明涉及通信领域，特别是涉及一种指读方法、装置、机器人、终端及计算机存储介质。

背景技术

书籍阅读是人们工作生活中非常重要的一部分，随着技术的发展，人们对于阅读辅助产品的需求日益增长，当前一种常见的阅读辅助技术包括OID点读技术，针对OID点读印刷物，一般配合点读笔使用。在进行点读时，可以通过点读笔，识别隐藏在印刷物中的OID编码，播放与OID编码对应的点读数据。

但该OID点读技术需要配套制作其配套的书籍，对于消费者来说成本较高，且必须配合点读笔使用，不够便利，用户体验度不高。

发明内容

鉴于以上所述现有技术的缺点，本发明的目的在于提供一种指读方法、装置、机器人、终端及计算机存储介质，用于解决阅读辅助需要配套制作其配套的书籍，对于消费者来说成本较高，且必须配合点读笔使用，不够便利，用户体验度不高的问题。

为实现上述目的及其他相关目的，本发明的目的在于提供一种指读方法，包括：

获取指读图像，所述指读图像包括内容正文、边框花边、章节节点和位置指示工具；

根据所述指读图像确定当前页面信息、当前指读章节；

获取所述当前指读章节对应的当前指读章节语音并播放。

可选的，所述根据所述指读图像确定当前页面信息包括：

对所述指读图像进行掩码处理，分别确定目标边框花边轮廓和目标章节节点轮廓；

根据所述目标边框花边轮廓确定透视后指读图像；

根据所述目标章节节点轮廓确定可疑图片；

将所述透视后指读图像与所述可疑图片进行SIFT特征比对，确定所述当前页面信息。

可选的，所述对所述指读图像进行掩码处理，确定目标边框花边轮廓包括：

对所述指读图像进行掩码处理，获取多个初始轮廓掩码；

对所述初始轮廓掩码进行逼近处理，确定多个疑似边框花边轮廓；

将多个所述疑似边框花边轮廓进行聚类处理，确定目标边框花边轮廓。

可选的，所述章节节点轮廓包括圆轮廓，所述对所述指读图像进行掩码处理，确定目标章节节点轮廓包括：

确定所述目标边框花边轮廓的各顶点信息；

根据所述顶点信息对所述指读图像进行透视变换，生成透视后指读图像；

对所述透视后指读图像进行掩码处理，生成透视图像掩码集合，并对所述透视图像掩码集合进行轮廓检测，生成霍夫变换掩码；

对所述霍夫变换掩码进行霍夫圆检测，获取多个疑似章节节点轮廓；

对所述章节节点轮廓进行分类聚类，确定目标章节节点轮廓。

可选的，所述根据所述目标边框花边轮廓确定透视后指读图像包括：

获取包括所述目标边框花边轮廓的定位范围，根据位于所述定位范围之内的所述指读图像生成定位图像；

根据所述顶点信息对所述定位图像进行透视变换，生成透视后指读图像。