[发明专利]一种基于视频的婴幼儿智能看护系统及方法

权利要求书

1.一种基于视频的婴幼儿智能看护系统，特征在于，该系统中至少设置有摄像头模块、网络传输模块、视频分析处理模块和客户端应用模块；其中：

所述摄像头模块，用以采集婴幼儿脸部视频图像；

所述视频处理模块，用以提取视频图像中婴幼儿脸部特征，分析判断婴幼儿面部表情，从而判断出婴幼儿当前状态或者判断婴幼儿是否处于便溺状态等，所述婴幼儿面部表情识别结果若为哭泣或便秘状态，发送警报到客户端模块；

所述网络传输模块，用以通过Internet实现视频信号或者警告信号的实时传输。

所述客户端应用模块，安装在智能移动设备中的应用程序，用于查看婴幼儿实时动态或者接收相关的提醒推送等；所述提醒推送主要是婴幼儿实时动态信息；

所述视频处理模块还包括关键点分析模块，用于循环检测人脸关键点的位置并对人脸位置进行实时跟踪。

2.一种基于视频的婴幼儿智能看护方法，其特征在于，该方法具体包括以下流程：

步骤1、采用Facenet深度学习模型进行人脸检测，检测目标图像中是否存在人脸；

步骤2、当检测到存在目标人脸时，启动人脸关键点检测进行人脸定位，实现人脸关键点对齐；所述关键点至少包括眼眉、眼睛、鼻子、嘴巴、下巴这些脸部基本轮廓的数据；

步骤3、当检测到人脸位置时，将人脸位置信息发到给人脸关键点检测模块，关键点检测模块将会循环检测人脸关键点的位置并对人脸位置进行实时跟踪，关键点检测采用Facenet模型进行检测，根据关键点的位置计算的面积大小来判定，来识别眼睛、嘴巴的张合程度，具体为：通过对二值化之后婴幼儿眼睛和嘴巴的面积的提取，以面积大小来代表所识别到的眼睛、嘴巴的张合程度；深度模型在训练时，采用跟踪的方式增加视频序列图像的训练数据，增强训练数据在时间位移上的关联性。

3.如权利要求2所述的一种基于视频的婴幼儿智能看护方法，其特征在于，所述步骤2中，所述眼睛、嘴巴的张合程度包括以下识别结果：

眼睛紧闭，嘴巴张大，为哭泣状态；

眼睛睁大，嘴巴张大，为高兴状态；

眼睛睁开，嘴巴闭合，为正常状态；

眼睛闭合，嘴巴闭合，为睡眠状态；

眉头紧锁，面部涨红，为便秘状态，眉头舒展，脸色恢复正常，为便秘过程结束。