[发明专利]一种学习互动方法及智能音箱有效
申请号: | 201911222628.5 | 申请日: | 2019-12-03 |
公开(公告)号: | CN111182387B | 公开(公告)日: | 2021-08-20 |
发明(设计)人: | 张明云 | 申请(专利权)人: | 广东小天才科技有限公司 |
主分类号: | H04R1/02 | 分类号: | H04R1/02;H04N13/204;H04N13/275;H04N13/293 |
代理公司: | 广州德科知识产权代理有限公司 44381 | 代理人: | 杨中强;陈晓妍 |
地址: | 528850 广东省东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 学习 互动 方法 智能 音箱 | ||
1.一种学习互动方法,其特征在于,所述方法应用于包含可翻转摄像装置的智能音箱,所述方法包括:
控制翻转至第一预设位置的所述摄像装置拍摄与所述智能音箱处于同一放置面的书本页面,得到页面图像;其中,处于所述第一预设位置的所述摄像装置的摄像孔朝向所述放置面;
识别所述页面图像中的学习内容所属的学习项目;
在所述智能音箱的显示屏幕上显示所述页面图像,并且在所述页面图像上叠加显示与所述学习项目对应的增强现实对象;
其中,若所述学习项目为阅读练习,所述在所述页面图像上叠加显示与所述学习项目对应的增强现实对象,包括:
依据所述学习内容构建虚拟场景;
控制所述摄像装置翻转至第二预设位置;其中,处于所述第二预设位置的所述摄像装置的摄像孔朝向所述显示屏幕的前方;
控制所述摄像装置拍摄人脸图像,并依据所述人脸图像生成第一虚拟卡通人物;
将所述第一虚拟卡通人物添加至所述虚拟场景,并将添加所述第一虚拟卡通人物的所述虚拟场景在所述页面图像中叠加显示。
2.根据权利要求1所述的方法,其特征在于,若所述学习项目为立体几何练习,所述在所述页面图像上叠加显示与所述学习项目对应的增强现实对象,包括:
识别所述学习内容中的印刷几何体和手写辅助线;
生成所述印刷几何体的三维虚拟模型,并依据所述手写辅助线和所述印刷几何体的位置关系,在所述三维虚拟模型中添加所述手写辅助线对应的三维虚拟线段,得到目标虚拟模型;
在所述页面图像中叠加显示所述目标虚拟模型。
3.根据权利要求1所述的方法,其特征在于,若所述学习项目为口语练习,所述在所述页面图像上叠加显示与所述学习项目对应的增强现实对象,包括:
获取与用户对话的第二虚拟卡通人物;
依据所述学习内容确定所述第二虚拟卡通人物的回复音频,并综合所述第二虚拟卡通人物和每一所述回复音频,得到每一所述回复音频对应的虚拟动画;
检测是否采集到用户语音,并在采集到所述用户语音时,从所述回复音频中确定出针对所述用户语音的目标回复音频,以及在输出所述目标回复音频的同时,将所述目标回复音频对应的虚拟动画在所述页面图像中叠加显示。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
在采集到用户语音时,依据所述学习内容得到所述用户语音对应的标准音频;
判断所述用户语音与所述标准音频的匹配度是否大于预设匹配度;
若大于所述预设匹配度,执行所述的从所述回复音频中确定出针对所述用户语音的目标回复音频;
若小于或者等于所述预设匹配度,输出所述标准音频。
5.一种包含可翻转摄像装置的智能音箱,其特征在于,包括:
拍摄单元,用于控制翻转至第一预设位置的所述摄像装置拍摄与所述智能音箱处于同一放置面的书本页面,得到页面图像;其中,处于所述第一预设位置的所述摄像装置的摄像孔朝向所述放置面;
识别单元,用于识别所述页面图像中的学习内容所属的学习项目;
显示单元,用于在所述智能音箱的显示屏幕上显示所述页面图像,并且在所述页面图像上叠加显示与所述学习项目对应的增强现实对象;
若所述学习项目为阅读练习,所述显示单元,具体用于在所述页面图像上叠加显示与所述学习项目对应的增强现实对象的方式具体为:
所述显示单元,具体用于依据所述学习内容构建虚拟场景;以及,控制所述摄像装置翻转至第二预设位置;其中,处于所述第二预设位置的所述摄像装置的摄像孔朝向所述显示屏幕的前方;以及,控制所述摄像装置拍摄人脸图像,并依据所述人脸图像生成第一虚拟卡通人物;以及,将所述第一虚拟卡通人物添加至所述虚拟场景,并将添加所述第一虚拟卡通人物的所述虚拟场景在所述页面图像中叠加显示。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东小天才科技有限公司,未经广东小天才科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911222628.5/1.html,转载请声明来源钻瓜专利网。