[发明专利]一种扫描搜题的方法、智能扫描笔及存储介质

说明书

本发明公开了一种扫描搜题的方法、智能扫描笔及存储介质，所述扫描搜题的方法包括：获取扫描试题过程中的扫描图片；提取用于描述扫描图片的图像特征的特征向量；根据提取的特征向量在试题数据库中进行检索匹配，反馈搜题结果。本发明通过提取用于描述扫描图片的图像特征的特征向量，根据提取的特征向量在试题数据库中进行检索匹配实现扫描搜题，特征向量包括多个分别描述图片的不同图像特征，将各个特征向量分别在试题数据库中进行检索匹配，综合各个特征向量的检索匹配结果反馈搜题结果，实现了从多个维度对扫描图片进行全方位检索，提升了试题检索的效率和准确率；而且对于试题扫描的连续性要求也有所降低，提升了用户的扫描搜题体验。

技术领域

本发明涉及在线教育技术领域，具体的涉及一种扫描搜题的方法、智能扫描笔及存储介质。

背景技术

在线教育，通过互联网平台可以将优质教育资源进行共享，极大的方便用户使用，降低教育成本。拍照搜题—一种应用较为普遍的在线教育方式，用户可以通过智能设备(如手机)进行试题拍照上传，云服务器会根据上传的试题照片进行解析、提取以及试题数据库检索等流程获取相关的试题搜索结果，返回给用户，可极大的方便用户对于疑难试题的理解跟掌握。

相对于拍照搜题而言，借助于智能扫描笔实现的扫描搜题，由于无法将整个试题通过拍照的方式获取试题图片，只能通过智能扫描笔的扫描摄像头逐行扫描完成后获取整个试题，再进行试题的上传与搜索。这使得用户在扫描试题的操作过程中需要保持连贯性，且如果出现漏扫、重扫的情况，对于试题的搜索结果都会产生影响，导致试题搜索结果差距较大。这主要是因为现有的扫描搜题主要依靠针对扫描图片进行OCR处理识别得到图片字符，根据字符进行试题检索，因此，扫描图片的完整性以及准确性对于试题搜索的结果产生较大的影响。

因此，如何降低用户扫描搜题的操作难度，提升扫描搜题的准确率，从而提升用户的使用体验是本发明所要解决的技术问题。

有鉴于此，特提出本发明。

发明内容

本发明为了解决如何降低用户扫描搜题的操作难度，提升扫描搜题的准确率，提升用户的使用体验的技术问题，提供一种扫描搜题的方法、智能扫描笔及存储介质，具体技术方案如下：

本发明提出了一种扫描搜题的方法，包括：

获取扫描试题过程中的扫描图片；

提取用于描述扫描图片的图像特征的特征向量；

根据提取的特征向量在试题数据库中进行检索匹配，反馈搜题结果。

作为本发明的可选实施方式，所述提取用于描述扫描图片的图像特征的特征向量包括：

通过深度学习模型提取出扫描图片的一组特征向量；

所述的特征向量用于描述扫描图片的文字、图像、符号的结构化信息。

作为本发明的可选实施方式，所述根据提取的特征向量在试题数据库中进行检索匹配，反馈搜题结果包括：

根据提取的各特征向量的文字、图像、符号的结构化信息的分别与试题数据库中存储的试题的文字、图像、符号的结构化信息分别进行检索匹配；

针对检索匹配结果进行文字、图像、符号的结构化信息进行排序加权得到试题搜索结果。

作为本发明的可选实施方式，针对理科试题，符号的结构化信息加权值大于文字、图像的结构化信息加权值；

针对文科试题，文字的结构化信息加权值大于图像、符号的结构化信息加权值；

针对图形试题，图像的结构化信息加权值大于文字、符号的结构化信息加权值；

可选地，通过扫描过程中提取扫描图片的图像特征判断试题所属科目，或者通过扫描开始前接收用户的试题科目设置指令判断试题所属科目。