[发明专利]一种照片书的照片图像自动填充方法及系统

说明书

本发明提供一种照片书的照片图像自动填充方法及系统，均能够：将待填充照片图像输入到预先训练好的显著特征提取卷积神经网络中计算得到卷积特征图；扫描所得到的卷积特征图，获取卷积特征图上所有显著信息区域的第一外接矩形；获取用于填充待填充图像的照片书模板相框的第二外接矩形；将第一外接矩形与第二外接矩形进行比较，根据比较结果对待填充照片图像进行调整与填充，使待填充照片图像的显著信息区域显示在所述照片书模板相框中。本发明用于增加照片书照片图像自动填充的适用范围、用于在避免照片图像关键信息被遮挡的前提下保留照片书原本的设计美感。

技术领域

本发明涉及照片书领域，具体涉及一种照片书的照片图像自动填充方法及系统。

背景技术

在照片书自动生成过程中，输入的照片图像会自动填充到照片书模板的相框中。在无人工干预的情况下，如果只根据照片图像尺寸与照片书模板相框的尺寸进行匹配，通常会遮挡部分照片图像的关键信息(显著信息)，比如人脸。

照片书是一种个性化影像产品，即使同一风格的照片书往往也会有很多种不同照片书模板。照片书模板中的相框并不仅仅是简单的长方形、正方形等规则相框，也可能是圆形、心形、扇形、星形等形状各异的异形框，这些异形相框更容易引起照片图像关键信息的遮挡。

传统的照片书的照片图像填充方法需要将照片图像一张一张地填充到照片书模板相框中，对于关键信息被遮挡的照片图像，需要手动调节照片图像的大小，这样会花费很多时间。而且，将照片图像一张一张地填充到照片书模板相框中，需要重复进行照片拖拽操作，填充效率低。

随着科技的发展，出现了借助人工智能的方法实现照片书的照片图像自动填充，使得在无需人工干预的情况下，可将一系列待填充的照片图像自动填充到照片书模板的相框中。但现有自动填充方法要么对照片图像的显著信息具有一定的局限性(比如仅针对人脸有效)、要么需要调整照片书模板的相框大小适应所要填充的照片图像以避免照片图像关键信息被遮挡，前者一旦遇到显著信息不同的照片图像则无法适用，而后者调整照片书模板相框尺寸以避免照片图像关键信息被遮挡，则降低了照片书整体设计美感，一定程度上会降低用户的购买欲望。

为此，本发明提供一种照片书的照片图像自动填充方法及系统，用于解决上述技术问题。

发明内容

针对现有技术的上述不足，本发明提供一种照片书的照片图像自动填充方法及系统，用于增加照片书照片图像自动填充的适用范围、以及用于在避免照片图像关键信息被遮挡的前提下保留照片书原本的设计美感。

本发明提供一种照片书的照片图像自动填充方法，包括步骤：

将待填充照片图像输入到预先训练好的显著特征提取卷积神经网络中进行卷积计算，得到包含待填充照片图像显著信息区域的特征图，记为卷积特征图；所述显著特征提取卷积神经网络，是能够提取照片图像的显著信息区域并且能够提取预先设定类型的照片图像的显著信息区域的卷积神经网络；所述预先设定类型的照片图像的类型种类至少为两种；

扫描所得到的卷积特征图，获取卷积特征图上所有显著信息区域的最小外接矩形，记为第一外接矩形；

获取用于填充待填充图像的照片书模板相框的外接矩形，记为第二外接矩形；

将第一外接矩形与第二外接矩形进行比较，根据比较结果对待填充照片图像进行调整与填充，使待填充照片图像的显著信息区域显示在所述照片书模板相框中。

进一步地，所述将第一外接矩形与第二外接矩形进行比较，根据比较结果对待填充照片图像进行调整与填充，使待填充照片图像的显著信息区域显示在所述照片书模板相框中，具体实现方法包括：

判断第一外接矩形是否能够被第二外接矩形完全覆盖：

若是，则将所述待填充照片图像填充在所述照片书模板相框中；