[发明专利]使用无线耳机与智能终端进行交互的人机交互方法在审
申请号: | 201911408792.5 | 申请日: | 2019-12-31 |
公开(公告)号: | CN111158487A | 公开(公告)日: | 2020-05-15 |
发明(设计)人: | 史海天;易鑫;徐栩海;史元春 | 申请(专利权)人: | 清华大学 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06N20/00;H04R1/10;H04M1/725;H04M1/60 |
代理公司: | 北京睿邦知识产权代理事务所(普通合伙) 11481 | 代理人: | 徐丁峰 |
地址: | 10008*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 使用 无线耳机 智能 终端 进行 交互 人机交互 方法 | ||
1.一种使用无线耳机与智能终端进行交互的人机交互方法,包括:
建立耳机与智能终端之间的无线连接;
在用户佩戴上无线耳机的情况下,耳机利用自带传感器检测人手在人体的颈部以上区域做出的接触性手势的声音信号,并传送到智能终端;
智能终端利用已经训练好的、基于机器学习的分类模型对声音信号进行分类和预测,判定所述声音信号是否表示用户做出了预定的手势类型;
响应于判定所述声音信号表示做出了预定的手势类型,智能终端对无线耳机执行预定的控制。
2.根据权利要求1的人机交互方法,所述手势类型包括:
单击太阳穴、单击颧骨、单击下颌角、单击枕骨、单击耳廓上边沿、单击耳廓中部、单击耳廓下边沿、双击太阳穴、双击颧骨、双击下颌角、双击枕骨、双击耳廓上边沿、双击耳廓中部、双击耳廓下边沿、在脸部上到下滑动、在脸部下到上滑动、在脸部后到前滑动、在脸部前到后滑动、在下颌角上到下滑动、在下颌角下到上滑动、在枕骨上到下滑动、在枕骨下到上滑动、沿耳廓上到下滑动、沿耳廓下到上滑动、在脸部画圈、两指在脸部做缩放手势、两指在脸部做展开手势。
3.根据权利要求1的人机交互方法,所述手势类型为单击、双击、滑动如下部位之一,所述部位为脸部、耳朵或耳后。
4.根据权利要求1的人机交互方法,还包括:
使用随机梯度下降SGD用作训练分类模型的优化算法,以及结合线性梯度预热方法和余弦退火技术来更新学习率。
5.根据权利要求4的人机交互方法,其中:
学习动量为0.9以加速收敛,权重衰减为0.0001以防止过度拟合。
6.根据权利要求4的人机交互方法,结合线性梯度预热方法和余弦退火技术来更新学习率包括:学习率从0.01开始,在20个时期内上升到0.1,然后在接下来的400个时期内以余弦曲线衰减。
7.根据权利要求4的人机交互方法,包括:扩充训练模型的数据集,扩充方式包括将办公噪声和街道噪声与原始音频数据混合和将音频信号平移。
8.根据权利要求1的人机交互方法,还包括
以滑动手势的持续时间的99百分位时长,作为手势分类的原始音频输入长度。
9.根据权利要求1的人机交互方法,还包括:
以1.2秒作为手势分类的原始音频输入长度,以及以标注范围的中点为中心的前后共1.2秒长的音频数据窗口来分割每个手势。
10.根据权利要求1的人机交互方法,所述预定的控制包括:
音乐播放、电话接打、通知消息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911408792.5/1.html,转载请声明来源钻瓜专利网。