[发明专利]家电设备的多模态交互方法及系统在审
| 申请号： | 201910616247.9 | 申请日： | 2019-07-09 |
| 公开（公告）号： | CN110335600A | 公开（公告）日： | 2019-10-15 |
| 发明（设计）人： | 刘明华;游忍;张欢欢;展华益;周建波 | 申请（专利权）人： | 四川长虹电器股份有限公司 |
| 主分类号： | G10L15/22 | 分类号： | G10L15/22;G06K9/00 |
| 代理公司： | 成都虹桥专利事务所(普通合伙) 51124 | 代理人： | 郝迎宾 |
| 地址： | 621000 四*** | 国省代码： | 四川;51 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提出一种家电设备的多模态交互方法及系统，属于家用电器语音识别领域。本发明解决了传统单一的语音交互存方式在的误识别、依赖激活词和交互不友好的问题，其技术方案要点为：获取当前环境下的图像及语音信号；根据语音信号，检测是否存在语音活动；如果检测到存在语音活动，根据图像信号，判断是否有人正注视设备且在说话；如果检测到有人正注视设备且在说话，则启动语音交互功能，并存储当前用户语音特征和图像特征；在启动语音交互功能情况下，根据语音特征，识别当前说话人的说话内容；并且，采用意图识别，判断当前说话人的意图并提供相应的服务。能够自动判断是否需要启动语音交互，无需激活词，并能够帮助用户进行服务选择。 | ||
| 搜索关键词： | 语音交互功能 多模态交互 家电设备 语音活动 语音交互 语音信号 说话 检测 注视 激活 技术方案要点 服务选择 图像特征 图像信号 意图识别 用户语音 语音识别 语音特征 自动判断 误识别 家用电器 存储 图像 帮助 服务 | ||
【主权项】：
1.家电设备的多模态交互方法，其特征在于，包括以下步骤：S1.获取当前环境下的图像及语音信号；S2.根据语音信号，检测是否存在语音活动；S3.如果检测到存在语音活动，根据图像信号，判断是否有人正注视设备且在说话；S4.如果检测到有人正注视设备且在说话，则启动语音交互功能，并存储当前用户语音特征和图像特征；S5.在启动语音交互功能情况下，根据语音特征，识别当前说话人的说话内容；S6.在启动语音交互功能情况下，采用意图识别，判断当前说话人的意图并提供相应的服务。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于四川长虹电器股份有限公司，未经四川长虹电器股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910616247.9/，转载请声明来源钻瓜专利网。
