[发明专利]基于指示性语言范式的孤独症早期评估装置及系统在审
| 申请号： | 201910605995.7 | 申请日： | 2019-07-05 |
| 公开（公告）号： | CN110364260A | 公开（公告）日： | 2019-10-22 |
| 发明（设计）人： | 邹小兵;潘悦然;蔡昆京 | 申请（专利权）人： | 昆山杜克大学;中山大学附属第三医院 |
| 主分类号： | G16H50/30 | 分类号： | G16H50/30;G06K9/00;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 佛山帮专知识产权代理事务所(普通合伙) 44387 | 代理人： | 颜春艳 |
| 地址： | 215300 江*** | 国省代码： | 江苏;32 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提出了一种基于指示性语言范式的孤独症早期评估装置和系统，所述装置包括：数据获取模块，用于获取实验环境内试验过程中的多模态音视频数据；预处理模块，用于基于时间戳同步对齐所获取的多模态音视频数据，并通过语音识别获取指示性语言发出后预设时间内的特定多模态音视频数据；特征获取模块，用于根据特定多模态音视频数据，获取指示性语言内容所针对对象的位置信息，并逐帧获取视频帧中被试者的相关特征信息；训练分类器模块，确定相关特征信息是否与指示性语言内容所针对对象相关，并根据分析结果进行训练分类器；预测评估模块，通过孤独症预测模型对被试者进行预测评估，并得出评估结果。 | ||
| 搜索关键词： | 指示性 音视频数据 多模态 孤独症 训练分类器 评估装置 特征信息 语言范式 语言内容 预测评估 数据获取模块 预处理模块 评估结果 实验环境 试验过程 特征获取 语音识别 预测模型 对齐 时间戳 视频帧 预设 逐帧 语言 | ||
【主权项】：
1.一种基于指示性语言范式的孤独症早期评估装置，其特征在于，包括数据获取模块，用于获取实验环境内指示性语言范式试验过程中的被试者、评估者、照顾者及指示道具的多模态音视频数据；预处理模块，用于基于时间戳同步对齐所获取的多模态音视频数据，并通过语音识别获取指示性语言发出后预设时间内的特定多模态音视频数据；特征获取模块，用于根据预处理模块处理后的特定多模态音视频数据，获取指示性语言内容所针对对象的位置信息，并逐帧获取视频帧中被试者的相关特征信息，所述相关特征信息包括面部朝向信息、眼神朝向信息、手势信息、姿势信息中的一种或多种；训练分类器模块，根据所述相关特征信息，并结合指示性语言内容所针对对象的位置信息进行分析，确定相关特征信息是否与指示性语言内容所针对对象相关，并根据分析结果进行训练分类器，得到孤独症预测模型；预测评估模块，用于根据指示性语言内容所针对的人或物的位置信息及被试者的相关特征信息，通过孤独症预测模型进行预测评估，并得出评估结果。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于昆山杜克大学;中山大学附属第三医院，未经昆山杜克大学;中山大学附属第三医院许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910605995.7/，转载请声明来源钻瓜专利网。
