[发明专利]一种构建情感日记和日常活动识别的系统及装置

权利要求书

1.一种构建情感日记和日常活动识别的系统，包括捕捉系统、识别系统和显示系统，其特征在于：捕捉系统用于抓取人脸图像、人物行为或者视频，并传输给识别系统；识别系统包括情绪识别系统和日常监测系统。

2.根据权利要求1所述的一种构建情感日记和日常活动识别的系统，其特征在于：情绪识别系统包括情绪识别模块、情绪记录模块和情感日记构建模块；情绪识别模块包括基于深度学习框架训练的人脸图像训练情绪检测模型和CNN卷积神经网络；情绪检测模型将人脸图像标注对应的情绪；CNN卷积神经网络可通过识别人脸图像，输出各种情绪的softmax列表，并显示得分最高的情绪状态。

3.根据权利要求2所述的一种构建情感日记和日常活动识别的系统，其特征在于：情绪记录模块持续记录情绪识别模块输出的情绪状态，并传输给情感日记构建模块，构建并输出情感日记。

4.根据权利要求1所述的一种构建情感日记和日常活动识别的系统，其特征在于：日常监测系统包括行为分析模块、行为记录模块、监测与异常反馈模块；行为分析模块包括基于行为数据集预训练和序列化的行为识别模型和基于人类识别参数和图像分类数据集完成深度学习的用于活动识别的时空组件，其识别图像或视频人物行为，并输出行为名称。

5.根据权利要求4所述的一种构建情感日记和日常活动识别的系统，其特征在于：行为记录模块持续记录行为分析模块输出的人物行为，并传输给监测与异常反馈模块。

6.根据权利要求5所述的一种构建情感日记和日常活动识别的系统，其特征在于：监测与异常反馈模块对人物行为与预设行为进行对比，若符合预设行为，系统仅进行记录，若不符合预设行为，行为记录模块进行记录，并反馈异常。

7.根据权利要求1~6中所述的任意一种构建情感日记和日常活动识别的系统，其特征在于：显示系统接收识别系统输出的情绪状态、情感日记、日常行为及异常反馈等信息。

8.一种构建情感日记和日常活动识别的装置，包括捕捉装置、识别装置和显示装置，其特征在于：包括权利要求1~7中所述的任意一种构建情感日记和日常活动识别的系统。

9.根据权利要求8所述的一种构建情感日记和日常活动识别的系统，其特征在于：其中捕捉装置用于捕捉人脸图像、行为动作图像或行为视频，优选摄像头或者摄像机；识别装置包括情绪识别装置和日常监测装置。

10.根据权利要求9所述的一种构建情感日记和日常活动识别的系统，其特征在于：情绪识别装置用于处理捕捉装置抓取的图像，并反馈结果；日常监测装置用于处理捕捉装置抓取的图像或视频，并作出反馈和判断；日常监测装置包括异常反馈装置，优选自动编码器；显示装置用于输出情绪记录、情感日记、人物行为、异常反馈等结果，优选显示屏。