[发明专利]一种多尺度人脸恢复的时序集成网络、编码装置及解码装置

摘要

本发明提出了一种多尺度人脸恢复的时序集成网络、编码装置及解码装置，该集成网络集成了多个不同层次的基编解码器，并且进一步的采用时序门来有效的进行多尺度人脸恢复问题。其中，针对多尺度人脸恢复的时序集成网络包括，一个全卷积网络，该全卷积网络包括N个基编码器和N个基解码器，N个基编码器输出N个层次的编码输出，N个基解码器输出N个层次的解码输出；N‑1个时序门单元，在编码端，对于N个层次的编码输出进行顺序地从下到上结合和选择；N‑1个时序门单元，在解码端，对于N个层次的解码输出进行顺序地从上到下的结合和选择。

主权项

1.一种多尺度人脸恢复的时序集成网络，其特征在于：该网络包括，

一个全卷积网络，该全卷积网络包括N个基编码器和N个基解码器，N个基编码器输出N个层次的编码输出，N个基解码器输出N个层次的解码输出；

N‑1个时序门单元，在编码端，对于N个层次的编码输出进行顺序地从下到上结合和选择；N‑1个时序门单元，在解码端，对于N个层次的解码输出进行顺序地从上到下的结合和选择。

2.根据权利要求1所述的一种多尺度人脸恢复的时序集成网络，其特征在于：

所述时序门单元包含由主动输入控制的两个门，一个为主动输入门，一个为被动输入门；

所述在编码端，对于N个层次的编码输出进行顺序地从下到上结合和选择具体为：

在编码端，将高层的基编码器输出的高层编码特征输入到主动输入门，将顺序于该高层的低层的基编码器输出的低层编码特征输入到被动输入门，进行顺序的从下到上的结合和选择；

所述在解码端，对于N个层次的解码输出进行顺序地从上到下的结合和选择具体为：在解码端，将低层的基解码器输出的低层解码特征输入到主动输入门，将顺序于该低层的高层的基解码器输出的高层解码特征输入到被动输入门，进行顺序的从上到下的结合和选择。

3.一种多尺度人脸恢复的时序编码装置，其特征在于：该编码装置位于一个全卷积网络中，包括：

N个基编码器，N个基编码器输出N个层次的编码输出，N个基解码器输出N个层次的解码输出；

N‑1个时序门单元，对于N个层次的编码输出进行顺序地从下到上结合和选择。

4.根据权利要求3所述的一种多尺度人脸恢复的时序编码装置，其特征在于：

所述时序门单元包含由主动输入控制的两个门，一个为主动输入门，一个为被动输入门；

所述对于N个层次的编码输出进行顺序地从下到上结合和选择具体为：

在编码端，将高层的基编码器输出的高层编码特征输入到主动输入门，将顺序于该高层的低层的基编码器输出的低层编码特征输入到被动输入门，进行顺序的从下到上的结合和选择。

5.一种多尺度人脸恢复的时序解码装置，其特征在于：该解码装置位于全卷积网络中，包括：

N个基解码器，N个基解码器输出N个层次的解码输出；

N‑1个时序门单元，对于N个层次的解码输出进行顺序地从上到下的结合和选择。

6.根据权利要求5所述的一种多尺度人脸恢复的时序解码装置，其特征在于：

所述时序门单元包含由主动输入控制的两个门，一个为主动输入门，一个为被动输入门；

所述对于N个层次的解码输出进行顺序地从上到下的结合和选择具体为：

在解码端，将低层的基解码器输出的低层解码特征输入到主动输入门，将顺序于该低层的高层的基解码器输出的高层解码特征输入到被动输入门，进行顺序的从上到下的结合和选择。