[发明专利]一种智能阅读学习方法

说明书

本发明公开了一种智能阅读学习方法，包括以下步骤：预先获取印刷品的原始页面图像并进行特征点提取，从而获得页面特征库；预先在印刷品的原始页面形成多媒体内容库；获得待学习页面图像并进行特征点提取，通过页面特征库进行检索及页面特征匹配，获得其在页面特征库中的原始页面信息；获得包含选取参照物的参照页面图像，从参照页面图像上进行选取参照物识别及点触动作识别；通过坐标映射获得选取参照物在原始印刷品中的位置信息；基于获得的位置信息，获取对应位置预置的多媒体文件并进行播放。本发明无需在书本上预制编码，摆脱了因编码局限性对点读内容的限制，同时能够确保内容播报的准确性。

技术领域

本发明涉及多媒体教育技术领域，特别涉及一种智能阅读学习方法。

背景技术

点读是利用光学图像识别技术和数码语音技术实现的智能阅读和学习方式，它体现了电子多媒体技术与教育行业的完美融合，实现了科技以人为本的理念。就现有的点读设备而言，通常需要置需要对书本做预先处理，在书本上印制或黏贴特定的编码，否则将无法识别书本内容。另外，市场上也出现了直接采用OCR文字识别技术进行识别然后读出内容的阅读设备，但由于印刷品种类复杂，OCR识别方式容易出现误读情况，并且OCR识别方式的数据处理计算量也比较大。

发明内容

本发明的目的在于提供一种智能阅读学习方法，其无需在书本上预制编码，摆脱了因编码局限性对点读内容的限制，同时能够确保内容播报的准确性。

为实现上述目的，本发明采用以下技术方案：

一种智能阅读学习方法，其基于硬件学习棒实现，所述学习棒上设有摄像头，该方法包括以下步骤：

S1、预先获取印刷品的原始页面图像并进行特征点提取，从而获得页面特征库；

S2、预先在印刷品的原始页面以某些特定区域对应某些多媒体文件的方式形成对应区域播放多媒体内容库；

S3、利用学习棒的摄像头连续拍摄待学习的印刷品页面，获得待学习页面图像并进行特征点提取，基于提取到的特征点将待学习页面在S1所获得的页面特征库进行检索及页面特征匹配，获得待学习页面在页面特征库中的原始页面信息；

S4、利用选取参照物点触待学习的印刷品页面上的感兴趣区域，学习棒的摄像头通过连续拍摄获得包含选取参照物的参照页面图像，从参照页面图像上进行选取参照物识别及点触动作识别；

S5、基于步骤S4中识别出的选取参照物、S4中包含选取参照物的参照页面图像及S3中获得的原始页面信息，进行坐标映射，获得选取参照物在原始印刷品中的位置信息；

S6、基于S5的位置信息、S4中获取的点触动作，获取S2中对应位置预置的多媒体文件，并对多媒体文件进行播放。

优选地，所述选取参照物采用人手手指、笔、笔型物体或尖端有发光装置的物体。

优选地，所述步骤S1、S3中的特征点提取通过特征提取SIFT、SURF算法实现。

优选地，所述步骤S1、S3中的特征点提取通过以下方法实现：

图像灰度化处理；

利用关键点检测算法提取特征点；

基于直方图统计进行特征点方向识别；

对特征点进行描述，获得特征描述子。

优选地，所述步骤S3中的页面特征匹配通过特征值欧式距离、特征向量的余弦相似度和相关系数算法实现。

优选地，所述步骤S3中的页面特征匹配通过以下方法实现：