[发明专利]一种AR虚拟说明书的滑动展示方法

说明书

本发明一种AR虚拟说明书的滑动展示方法，属于AR虚拟说明书应用技术领域；所要解决的技术问题为：提供一种AR虚拟说明书的滑动展示方法的改进；解决该技术问题采用的技术方案为：将产品周边划分为若干视角区域，在每个视角区域内采集产品照片并上传，在AR说明图片内定义边界框，使边界框与该产品视角区域建立映射关系；使用移动终端摄像头采集到的产品识别码，从服务器端下载该产品对应的目标分类模型和一张AR说明图片，使用移动终端摄像头采集产品的视频图像，通过目标分类模型对视频图像中出现的产品视角区域进行实时分类；根据映射关系将AR说明图片上与实时分类结果对应的边界框部分滑动到展示窗口；本发明应用于AR虚拟说明书展示场所。

技术领域

本发明一种AR虚拟说明书的滑动展示方法，属于AR虚拟说明书应用技术领域。

背景技术

目前商户向客户推销产品主要采用传统的线下销售方式，需要由促销员全程跟随客户挑选产品，并针对产品的功能、优点、价格等信息进行讲解，传统销售过程较为枯燥，容易使客户产生厌倦，无法激发购买欲望；随着时代科技的发展，依靠AR视听觉增强技术，出现了新的销售与展示方法。

新的销售展示方法要求在服务器端预存储产品互动内容，对产品某一视角下的图片进行图像处理以获得该图片中的某一种特征描述符，用于目标检测，另外在移动终端下载并保存该产品的特征描述符，然后通过移动终端摄像头预览获得视频流，并对视频流中的一帧图片或者照片进行图像处理以获得该特征描述符，与已保存的特征描述符进行比较，通过匹配特征描述符进行目标检测和目标跟踪，定位该产品出现在视频流或者照片中的平面位置，并在该平面位置上同步展示相应的产品信息给用户。

基于上述检测方式，现有的AR虚拟说明书展示方式主要通过目标检测模型和目标跟踪模型定位产品的位置和姿态，但训练目标检测模型后生成的结果文件较大，移动终端下载时间长，占用存储空间大；

另外实时目标检测和目标跟踪对移动终端设备性能的要求较高，这导致已有的AR虚拟说明书展示方案依赖在移动终端安装额外的指定应用软件，以及对移动终端设备性能有较高的要求。若通过移动终端设备的浏览器打开摄像头提供AR虚拟说明书服务，则无法保证目标检测和目标跟踪的实时性。

发明内容

本发明为了克服现有技术中存在的不足，所要解决的技术问题为：提供一种AR虚拟说明书的滑动展示方法的改进。

为了解决上述技术问题，本发明采用的技术方案为：一种AR虚拟说明书的滑动展示方法，包括如下步骤：

步骤一：在服务器端，商家上传一张AR说明图片作为产品的说明书，用以展示说明；

步骤二：在服务器端，商家将产品周边划分为若干视角区域，在每个视角区域内采集一张或多张产品照片并上传；

步骤三：在服务器端，商家根据说明需求，在AR说明图片内定义一个边界框，同时根据步骤二划分的视角区域指定一个对应的产品视角区域，使该定义的边界框与该产品视角区域建立映射关系；

步骤四：在服务器端，由步骤三建立多个映射关系，商家在每个映射关系中的产品视角区域内为产品拍多张照片，照片将作为该产品视角区域类别的图片样本并上传；

步骤五：在服务器端，由步骤四为各个产品视角区域收集图片样本构成训练数据集，所述训练数据集中的图片样本根据所属的产品视角区域进行分组，用于训练新的目标分类模型，所述目标分类模型将用于对图片中的产品视角区域进行分类；

步骤六：在移动终端，使用移动终端摄像头采集到的产品识别码，从服务器端下载该产品对应的目标分类模型和一张AR说明图片，此时移动终端的展示窗口显示AR说明图片的默认位置；

步骤七：在移动终端，使用移动终端摄像头采集产品的视频图像，并通过目标分类模型对视频图像中出现的产品视角区域进行实时分类；