[发明专利]一种基于意图理解模型的导航式虚拟显微镜有效
| 申请号： | 201910543153.3 | 申请日： | 2019-06-21 |
| 公开（公告）号： | CN110196642B | 公开（公告）日： | 2022-05-17 |
| 发明（设计）人： | 冯志全;王康;田京兰;冯仕昌 | 申请（专利权）人： | 济南大学 |
| 主分类号： | G06F3/01 | 分类号： | G06F3/01;G06T5/00;G02B21/24 |
| 代理公司： | 济南诚智商标专利事务所有限公司 37105 | 代理人： | 侯德玉 |
| 地址： | 250022 山东*** | 国省代码： | 山东;37 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提出了一种基于意图理解模型的导航式虚拟显微镜，包括多模态输入与感知模块、多模态信息整合模块和交互应用模块；多模态输入与感知模块用于通过传声器获得用户的语音信息，以及获得用户的操作行为；多模态信息整合模块用于将语音信息通过视觉通道信息处理和将操作行为通过触觉通道信息处理，然后将处理后的语音信息和操作行为通过多通道信息整合，完成显微镜和用户之间的交互。本发明通过多模态信息获取和整合，利用简单的传感元件，加入了多种模态的信号输入和智能化感应技术，在保证数字显微镜优点的基础上，让广大普通和贫困中学学生也能有条件进行显微镜的学习，增加对微观世界的认知感受，和体验智能显微镜。 | ||
| 搜索关键词： | 一种 基于 意图 理解 模型 导航 虚拟 显微镜 | ||
【主权项】：
1.一种基于意图理解模型的导航式虚拟显微镜，其特征在于，包括多模态输入与感知模块、多模态信息整合模块和交互应用模块；所述多模态输入与感知模块用于通过传声器获得用户的语音信息，以及获得用户的操作行为；所述操作行为包括通过转动传感器获得用户调节显微镜粗细准焦螺旋的方向和通过图像采集设备识别待观察样本以及检测待观察样本运动的图像信息；所述多模态信息整合模块用于将语音信息通过视觉通道信息处理和将操作行为通过触觉通道信息处理，然后将处理后的语音信息和操作行为通过多通道信息整合，完成显微镜和用户之间的交互；所述交互应用模块通过视觉显示和听觉指引完成对用户意图进行预测以及给出操作引导。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于济南大学，未经济南大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910543153.3/，转载请声明来源钻瓜专利网。
