[发明专利]一种基于增强现实的智能装配与运维指导方法、系统、装置及存储介质在审
申请号: | 202211142638.X | 申请日: | 2022-09-20 |
公开(公告)号: | CN115494942A | 公开(公告)日: | 2022-12-20 |
发明(设计)人: | 吴晨韬;周天;顾正玮;杨海根 | 申请(专利权)人: | 南京邮电大学 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06F16/25 |
代理公司: | 南京纵横知识产权代理有限公司 32224 | 代理人: | 董建林 |
地址: | 210023 *** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 增强 现实 智能 装配 指导 方法 系统 装置 存储 介质 | ||
1.一种基于增强现实的智能装配与运维指导方法,其特征在于,包括:
采集装配与运维图片和对应的装配与运维引导信息,输入到构建好的装配与运维模型中,生成数据库,采集真实场景;
通过计算机视觉对数据库中的装配与运维场景进行视觉处理,识别出装配与运维目标;
根据装配与运维目标求解虚拟引导工具的注册位姿后与真实场景进行虚实融合,得到增强现实装配与运维场景;
将增强现实装配与运维场景展示给作业人员进行装配与运维指导。
2.根据权利要求1所述的一种基于增强现实的智能装配与运维指导方法,其特征在于,所述数据库包含整个装配流程与运维场景信息。
3.根据权利要求1所述的一种基于增强现实的智能装配与运维指导方法,其特征在于,所述装配与运维引导信息包括装配与运维过程的操作步骤、工具信息和设备名称。
4. 根据权利要求1所述的一种基于增强现实的智能装配与运维指导方法,其特征在于,所述视觉处理是通过微软HoloLens 增强眼镜中的RGB-D相机对装配与运维场景提取典型特征,包括装配与运维目标的识别跟踪、三维场景重建和计算机位姿解算。
5.根据权利要求1所述的一种基于增强现实的智能装配与运维指导方法,其特征在于,通过头戴式显示器将增强现实装配与运维场景展示给作业人员进行指导。
6.根据权利要求1所述的一种基于增强现实的智能装配与运维指导方法,其特征在于,还包括作业人员通过语音或人体动作的方式对虚拟引导工具进行操控的步骤。
7.一种基于增强现实的智能装配与运维指导系统,其特征在于,包括:
数据获取模块,用于采集装配与运维图片和对应的装配与运维引导信息,输入到构建好的装配与运维模型中,生成数据库,采集真实场景;
装配与运维对象视觉处理模块,用于通过计算机视觉对数据库中的装配与运维场景进行视觉处理,识别出装配与运维目标;
虚拟装配与运维工具注册融合模块,用于根据装配与运维目标求解虚拟引导工具的注册位姿后与真实场景进行虚实融合,得到增强现实装配与运维场景;
人机交互模块,用于将增强现实装配与运维场景展示给作业人员进行装配与运维指导,作业人员基于本模块对虚拟引导工具进行操控。
8.根据权利要求7所述的一种基于增强现实的智能装配与运维指导系统,其特征在于,所述人机交互模块,还用于利用增强现实技术结合AI提供对实物的结构剖析、问题检测和学习培训功能。
9.一种基于增强现实的智能装配与运维指导装置,其特征在于,包括处理器及存储介质;
所述存储介质用于存储指令;
所述处理器用于根据所述指令进行操作以执行根据权利要求1至6任一项所述方法的步骤。
10.计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1至6任一项所述方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京邮电大学,未经南京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211142638.X/1.html,转载请声明来源钻瓜专利网。