[发明专利]一种亲子互动方法、机器人、服务器及亲子互动系统有效
申请号: | 201910668358.4 | 申请日: | 2019-07-23 |
公开(公告)号: | CN110363278B | 公开(公告)日: | 2023-01-17 |
发明(设计)人: | 张小杰;邓小兵 | 申请(专利权)人: | 广东小天才科技有限公司 |
主分类号: | G06N3/008 | 分类号: | G06N3/008;G06F3/16;G06V20/10;G06V40/16 |
代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 郭桂峰 |
地址: | 523851 广东省东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 亲子 互动 方法 机器人 服务器 系统 | ||
1.一种亲子互动方法,其特征在于,包括机器人和服务器;
所述机器人每间隔预设时长采集儿童的图像信息,所述图像信息包含所述儿童的面部表情信息和当前环境信息;
所述机器人将所述图像信息发送至所述服务器;
所述服务器根据所述图像信息识别得到所述儿童的当前状态信息;
所述服务器根据所述当前状态信息,判断所述儿童是否需要帮助,若是,则将所述图像信息和所述当前状态信息发送至家长的智能终端,并接收所述智能终端返回的回复信息;
所述机器人接收所述服务器发送的所述回复信息,并开启亲子互动模式;
其中,所述服务器根据所述图像信息识别得到所述儿童的当前状态信息具体包括:
将所述图像信息输入到预设的识别模型中;
若所述识别模型可识别所述图像信息,则输出当前状态信息;
若所述识别模型未识别出所述图像信息,则计算所述图像信息的特征值;
根据所述特征值在预设的特征库中查找到匹配的当前状态信息;
所述机器人接收所述服务器返回的回复信息,并开启亲子互动模式具体包括:
接收所述服务器返回的回复信息,判断所述回复信息是否包含视频聊天请求;
若是,则接受所述视频聊天请求;
若否,则将所述回复信息转换为家长的语音信息并进行播放,然后采集所述儿童的语音信息,将所述儿童的语音信息发送至所述智能终端,并接收所述智能终端再次返回的回复信息,并进行语音转换和播放。
2.根据权利要求1所述的一种亲子互动方法,其特征在于,所述特征库的创建方法为:
收集大量不同的图像信息,所述图像信息包含所述儿童的面部表情信息和当前环境信息;
获取所述图像信息对应的状态信息;
提取出各图像信息中的特征;
计算所述特征的特征值,所述特征值为预设位数的字母和数据组合而成;
建立所述特征值与所述状态信息之间的对应关系;
根据所述特征值、所述状态信息以及所述特征值与所述状态信息之间的对应关系,创建所述特征库。
3.根据权利要求2所述的一种亲子互动方法,其特征在于,所述若所述识别模型未识别出所述图像信息,则计算所述图像信息的特征值具体包括:
若所述识别模型未识别出所述图像信息,则提取出所述图像信息中的目标图像;
计算所述目标图像对应的特征值;
所述根据所述特征值在预设的特征库中查找到对应的当前状态信息具体包括:
在预设的所述特征库中查找到与所述特征值匹配的目标特征值;
根据所述目标特征值对应的状态信息,得到所述图像信息对应的当前状态信息。
4.一种机器人,其特征在于,包括:
图像采集模块,用于每间隔预设时长采集儿童的图像信息,所述图像信息包含所述儿童的面部表情信息和当前环境信息;
图像发送模块,用于将所述图像信息发送至服务器,使所述服务器根据所述图像信息识别得到所述儿童的当前状态信息,并根据所述当前状态信息,判断所述儿童是否需要帮助,若是,则将所述图像信息和所述当前状态信息发送至家长的智能终端,然后接收所述智能终端返回的回复信息;
处理模块,用于接收所述服务器发送的所述回复信息,并开启亲子互动模式;
所述处理模块包括:
信息接收单元,用于接收所述智能终端返回的回复信息;
判断单元,用于判断所述回复信息是否包含视频聊天请求;
处理单元,用于当所述回复信息中包含视频聊天请求时,接受所述视频聊天请求;
所述处理单元,还用于当所述回复信息中不包含视频聊天请求时,将所述回复信息转换为家长的语音信息并进行播放,然后采集所述儿童的语音信息,将所述儿童的语音信息发送至所述智能终端,并接收所述智能终端再次返回的回复信息,并进行语音转换和播放。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东小天才科技有限公司,未经广东小天才科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910668358.4/1.html,转载请声明来源钻瓜专利网。