[发明专利]基于互联网的多平台信息交互系统在审

专利信息
申请号: 201811086585.8 申请日: 2018-09-18
公开(公告)号: CN109241924A 公开(公告)日: 2019-01-18
发明(设计)人: 王友维 申请(专利权)人: 宁波众鑫网络科技股份有限公司
主分类号: G06K9/00 分类号: G06K9/00;G10L25/63;G10L15/22;H04L29/08
代理公司: 暂无信息 代理人: 暂无信息
地址: 315000 浙江省宁波市*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 信息交互系统 多模态 多平台 人脸 语音命令 互联网 自然语言 表情 交互信息 逻辑判断 内容呈现 情绪识别 人机交互 声音信息 属性识别 云平台 多轮 头像 捕捉 反馈 输出 情绪 对话 分析
【权利要求书】:

1.基于互联网的多平台信息交互系统,包括多个设备终端(1)和云平台(2),其特征是:所述云平台(2)用于提供数据存储、大数据分析、视频存储、音频存储及后台服务;通过云平台(2),用户随时控制查看设备终端的状态,并能与设备终端(1)进行语音、视频通话,使用户随时随地利用该系统疏导自己的情绪;所述设备终端(1)包括控制模块(11)、环境传感器模块(12)、情绪模块(13)、电源模块(14)、摄像模块(15)、音响模块(16)、显示操作模块(17)、计算模块(18)及投影模块(19):

所述控制模块(11),用于通过所述环境传感器模块(12)及所述情绪模块(13)采集环境信息和/或用户的情绪信息,对采集到的环境信息和/或用户的情绪信息进行结构化预处理,并将结构化预处理后的信息传送到云平台(2);

所述电源模块,与所述控制模块(11)信号连接,用于为所述控制模块(11)提供能量;

所述摄像模块(15),与所述控制模块(11)信号连接,用于依据人眼成像的原理采集用户的人脸图像信息,并将该头像信息传送到所述控制模块(11);

所述音响模块(16),与所述控制模块(11)信号连接,用于采集用户的声音信息,并将该声音信息传送到所述控制模块(11);

所述显示操作模块(17),与所述控制模块(11)信号连接,用于在该提取的关键字是采集情绪信息的指令时显示与该关键字对应的提示信息;

所述计算模块(18),用于通过实时计算生成相应交互的人脸图像信息,并将所述画面传送到所述投影模块(19)进行展示;

所述投影模块(19),连接所述控制模块(11),用于根据所述控制指令,展现所述人脸图像的三维投影效果。

2.根据权利要求1所述的基于互联网的多平台信息交互系统,其特征是:所述环境传感器模块(12)包括用于采集环境信息的体温传感器、血糖传感器、心跳传感器或血压传感器。

3.根据权利要求1所述的基于互联网的多平台信息交互系统,其特征是:所述情绪模块(13)用于根据所述人脸图像信息、所述声音信息和所述文字信息,对情绪进行判别, 确定情绪向量。

4.根据权利要求3所述的基于互联网的多平台信息交互系统,其特征是:所述人脸图像信息包括笑、忧伤、愤怒、吃惊、无表情。

5.根据权利要求1所述的基于互联网的多平台信息交互系统,其特征是:所述控制模块(11)还用于根据用户的表情信息控制所述显示操作模块(17)和所述音响模块(16)执行对应的操作。

6.根据权利要求1所述的基于互联网的多平台信息交互系统,其特征是:所述设备终端(1)还包括无线通信模块(3),用于实现信息采集和用户情感的设备终端(1)与所述云平台(2)之间的交互。

7.根据权利要求3所述的基于互联网的多平台信息交互系统,其特征是:还包括反馈模块(14),用于根据回话策略,分析所述情绪向量、所述人脸图像信息和所述文字信息,输出回馈文字。

8.根据权利要求1所述的基于互联网的多平台信息交互系统,其特征是:所述音响模块(16)包括:

ASR模块,用于将所述声音信息转换为文字信息;

TTS模块,用于将所述回馈文字转换为语音信息。

9.根据权利要求1所述的基于互联网的多平台信息交互系统,其特征是:所述投影模块(19)包括:

全息投影单元,用于投射图像,并同时输出每一帧图像所对应的同步信号,包括激光光源、投影芯片、镜头组和全空气薄膜生成器;

显示单元,用于对所述全息投影单元投射的图像漫反射,显示每个观察者所需的图像。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于宁波众鑫网络科技股份有限公司,未经宁波众鑫网络科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811086585.8/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top