[发明专利]用于提取贴纸图像用的对象的方法和设备

说明书

相关专利申请的交叉引用

本申请要求于2017年8月11日向韩国知识产权局提交的韩国专利申请No.10-2016-0102434的权益，其全部内容通过引用并入本文。

技术领域

本发明涉及一种用于提取贴纸图像(sticker image)用的对象的方法和设备，更具体地，涉及在通过使用由红外相机获得的差异图像(difference image)提取对象之后提取叠加在实时背景图像上的贴纸图像用的对象的方法和设备。另外，本发明涉及一种用于附着贴纸的方法和设备，更具体地，涉及一种在根据对象的形状、地点、角度或位置来确定贴纸之后自动附着贴纸的方法和设备。

背景技术

随着智能手机的发展，通常由专家完成的图像的叠加可以由智能手机的用户实现，用户对各种叠加方法感兴趣。特别地，随着识别技术的发展，可以使用基于识别的有趣的叠加方法。

最近，出现了用于提取除了背景之外的对象图像并将所提取的图像叠加在另一个背景上的技术。在广播屏幕中经常使用这种技术。然而，为了提取对象图像，需要图像分割，并且可能不会自动执行图像分割。通常，手动提取对象，或者使用特定着色的色键布(chromakey cloth)作为背景以提取具有颜色特征的对象。

这里，当手动提取对象时，需要很长时间。另外，需要提前准备色键布，使得需要时间和精力来创建情境，并且创建情境并不是实时可用的。

另外，最近公布了根据脸部位置在特定位置上叠加贴纸的应用。然而，用户自己需要事先离线决定贴纸，这使用户不便。另外，目前没有根据对象的变化替换或改变贴纸的技术。

发明内容

本发明提供在通过红外辐射获得差异图像并且在提取对象中使用该差异图像之后在不使用色键布的情况下自动提取实时对象并且将所提取的对象叠加在背景图像上的方法和设备。

本发明还提供了一种用于根据对象的形状、地点、角度或位置而将各种贴纸附着在所需位置上的方法和设备。

根据本发明的一个方面，提供了一种提取贴纸图像用的对象的方法，所述方法包括：通过使用第一相机获得第一图像和第二图像；通过使用第二相机获得第三图像；通过使用所述第一图像与所述第二图案之间的差异图像来确定对象区域；从所述第三图像提取与所确定的对象区域对应的对象区域图像；以及通过使所提取的对象区域图像与背景图像重叠(overlaying)来叠加(superimposing)。

所述第一相机可以是红外相机，所述第二相机可以是RGB相机，所述第一图像可以是通过使用红外相机经辐射红外光获得的图像，所述第二图像可以是通过使用红外相机在不辐射红外光的情况下获得的图像。

通过使用所述第一图像与所述第二图像之间的差异图像来确定对象区域可以包括将在从所述第一图像减去所述第二图像之后获得的亮度变化(brightchange)低于固定临界值的区域确定为背景区域，将所述亮度变化高于固定临界值的区域确定为对象区域，并且从所述第三图像提取与所确定的对象区域对应的对象区域图像可以包括提取从所述第三图像确定的除了与所述背景区域对应的区域之外的对象区域图像。

可以通过使用半反射镜将所述第一相机的焦点和所述第二相机的焦点置于同一轴线上。

所述方法还可以包括当感测到所述第一相机和所述第二相机中的任何一个的运动时，改变所述背景图像。

所述对象区域图像可以是手图像(hand image)，并且所述背景图像可以是菜单(menu)。

根据本发明的另一方面，提供了一种用于提取贴纸图像用的对象的设备，包括：图像获得单元，包括获得第一图像和第二图像的第一相机以及获得第三图像的第二相机；对象区域确定单元，用于通过使用所述第一图像和所述第二图像之间的差异图像来确定对象区域；对象图像提取单元，用于从所述第三图像提取与所确定的对象区域对应的对象区域图像；存储单元，用于存储背景图像；以及图像叠加单元，通过使所提取的对象区域图像与背景图像重叠来叠加。

附图说明

通过参考附图详细描述其示例性实施例，本发明的上述和其它特征和优点将变得更加明显，其中：

图1是图示了根据本发明的实施例的提取贴纸图像用的对象的方法的流程图；

图2是关于根据图像帧信号开启/关闭红外线的时间图；

图3图示了根据本发明的实施例的通过使用半反射镜的红外相机和RGB相机的布置；

图4和图5图示了根据本发明的实施例的基于作为提取的对象的手的菜单的选择；