[发明专利]一种基于视觉的自闭症辅助早筛方法及装置在审
申请号: | 201910053035.4 | 申请日: | 2019-01-21 |
公开(公告)号: | CN109846497A | 公开(公告)日: | 2019-06-07 |
发明(设计)人: | 刘洪海;刘晶晶;张婉绮;王志永;吉斌 | 申请(专利权)人: | 上海交通大学 |
主分类号: | A61B5/16 | 分类号: | A61B5/16 |
代理公司: | 上海旭诚知识产权代理有限公司 31220 | 代理人: | 郑立 |
地址: | 200240 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 测试 自闭症 彩色摄像头 语音指令 手部 语音 视觉 工程技术领域 语音识别模块 测试物体 评价指标 视觉技术 物体识别 医学诊断 早期诊断 自动判断 筛装置 凳子 主机 计时 桌子 追踪 干预 | ||
1.一种基于视觉的自闭症辅助早筛方法,其特征在于,包括以下步骤:
步骤S1测试者对受测试者进行第一轮语言回应测试,若受测试者作出回应,则直接进入步骤S3;
步骤S2测试者对受测试者进行第二轮语言回应测试;
步骤S3测试者对受测试者进行第三轮语言回应测试,若受测试者作出回应,则直接进入步骤S5;
步骤S4测试者对受测试者进行第四轮语言回应测试;
步骤S5测试结束,并根据评估指标给出测试结果;
其中,所述第一轮语言回应测试、所述第二轮语言回应测试、所述第三轮语言回应测试、所述第四轮语言回应测试均包括如下步骤:
步骤a测试者将测试物体交给受测试者把玩,2-3分钟后进入步骤b;
步骤b测试者向受测试者发出语音指令:让受测试者将手中的测试物体递给测试者;
步骤c在所述语音指令发出后,并开始计时;
步骤d利用3D摄像头和彩色摄像头,通过物体识别技术和手部追踪技术,获取测试物体和测试者的手的坐标,然后计算测试物体与测试者的手之间的距离;
步骤e在测试时间内判断所述距离是否符合要求,得出受测试者在本轮测试中是否针对所述语音指令作出回应的结论。
2.如权利要求1所述的自闭症辅助早筛方法,其特征在于,所述测试物体包括至少两个不同的物体。
3.如权利要求2所述的自闭症辅助早筛方法,其特征在于,所述第一轮语言回应测试与所述第二轮语言回应测试中使用相同的测试物体,所述第三轮语言回应测试和所述第四轮语言回应测试中使用相同的测试物体;所述第一轮语言回应测试和所述第二轮语言回应测试中使用的测试物体不用于所述第三轮语言回应测试和所述第四轮语言回应测试中使用的测试物体。
4.如权利要求1所述的自闭症辅助早筛方法,其特征在于,所述步骤d包括以下步骤:
步骤41基于物体识别技术,通过处理所述3D摄像头的视频流,获取所述测试物体在以所述3D摄像头为原点的世界坐标系中的三维坐标;
步骤42基于手部追踪技术,通过处理所述彩色摄像头的视频流,获取所述测试者的手在以所述彩色摄像头为原点的二维坐标系中的二维坐标;
步骤43将所述测试者的手的二维坐标转换为所述世界坐标系的坐标,然后计算所述测试者的手与所述测试物体之间的距离。
5.如权利要求4所述的自闭症辅助早筛方法,其特征在于,所述步骤41包括以下步骤:
物体检测:基于Blob分析的方法,从视频中检测测试中出现的所有物体;
物体识别:对检测到的所有物体进行特征提取,并进行分类;
坐标计算:获得所述测试物体在以3D摄像头为原点的世界坐标系中的三维坐标。
6.如权利要求1所述的自闭症辅助早筛方法,其特征在于,所述测试时间为3s。
7.如权利要求1所述的自闭症辅助早筛方法,其特征在于,所述距离的要求为5cm,当所述距离小于5cm时,认为所述受测试者作出回应;否则,认为所述受测试者未作出回应。
8.如权利要求1-7任一项所述的自闭症辅助早筛方法,其特征在于,所述测试者与所述受测试者相对而坐。
9.一种用于如权利要求8所述的自闭症辅助早筛方法的自闭症辅助早筛装置,其特征在于,包括主机,位于实验场地内的桌子、两张凳子、视频处理模块、语音识别模块和测试物体;所述凳子分别位于所述桌子两侧;所述视频处理模块包括分别与所述主机相连的3D摄像头和彩色摄像头,用于记录测试的整个过程;所述3D摄像头固定在所述桌子的正上方,用于检测与识别所述测试物体;所述彩色摄像头固定在所述受测试者坐的所述凳子一侧,用于识别所述测试者和所述受测试者的手部;所述语音识别模块与所述主机通讯,用于识别所述测试者的语音指令;所述测试物体包括至少两个不同的玩具。
10.如权利要求9所述的自闭症辅助早筛装置,其特征在于,通过明确所述实验场地的尺寸、所述桌子的尺寸、所述凳子的尺寸、所述3D摄像头的安装位置、所述彩色摄像头的安装位置及固定俯角,分别建立以所述3D摄像头为原点的世界坐标系和以所述彩色摄像头为原点的二维坐标系,通过在主机中处理不同坐标系下的数据及坐标转换,用于计算所述玩具与所述测试者的手之间的距离。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海交通大学,未经上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910053035.4/1.html,转载请声明来源钻瓜专利网。