[发明专利]基于目标检测和空间投影的移动端增强现实方法和系统

摘要

本申请公开了一种基于目标检测和空间投影的移动端增强现实方法和系统，系统包括移动端和服务器，该系统利用机器学习来识别需要增强显示的目标地物，然后使用空间计算匹配目标地物和其三维模型，最后根据三维模型检索出目标地物的其他信息，从而准确地把虚拟信息叠加到拍摄的画面中，实现增强现实的效果，且三维模型使用简化的模型，以降低模型制作、存储、处理成本低。本申请使用单一的移动端设备即可完成，无需使用额外的辅助设备，降低使用难度。

主权项

1.一种基于目标检测和空间投影的移动端增强现实方法，实施在移动端，其特征在于，所述的基于目标检测和空间投影的移动端增强现实方法，包括：向服务器发送获取三维模型的第一请求，所述第一请求包括移动端地理位置、检索半径和空间参考；所述移动端地理位置和检索半径用于供服务器检索得到指定空间范围内的三维模型，所述空间参考用于供服务器将检索到的三维模型转换到指定坐标系；接收服务器响应的转换到指定坐标系的三维模型并缓存；利用AI识别模型识别移动端预览画面中目标物的类型和像素位置；将三维模型投影到预览画面所在的屏幕坐标系中，得到三维模型在预览画面中的像素位置；将目标物在预览画面中的像素位置和三维模型在预览画面中的像素位置进行一对一比较，同时比较目标物和三维模型的类型，得到与目标物匹配的三维模型，根据匹配到的三维模型得到目标物的识别属性；所述三维模型的类型为三维模型的固有属性；向服务器发送获取目标物详细信息的第二请求，所述第二请求包括目标物的识别属性，所述识别属性用于供服务器得到目标物的详细信息；接收来自服务器的目标物的详细信息，并在预览画面中叠加显示所述详细信息。