[发明专利]一种基于视频通话数据流处理实现趣味贴图的方法

说明书

本发明公开了一种基于视频通话数据流处理实现趣味贴图的方法，当启动第三方应用时，判断此时相机是否打开，相机打开时，弹出贴图按钮，同时搜索已有的贴图资源；点击贴图按钮，展示所有搜索到的贴图资源的子按钮；点击所述子按钮，把所述子按钮参数、对应的贴图资源路径参数下传至系统底层；系统底层获取这些参数，同时根据子按钮的开关状态来决定是否截取视频通话影像数据流；判断视频通话影像数据流中人脸检测是否为连续帧，如果不是，则直接显示。如果是，进行格式转换，然后通过GPU叠加转换格式后的视频通话影像数据流和贴图，再显示。本发明可以在本系统运行的任意视频通话应用及相机应用提供趣味贴图功能，提高资源利用率。

技术领域

本发明涉及移动终端的操作系统，尤其涉及在系统中基于视频通话数据流的处理，对所有有需要的应用程序增加趣味贴图的方法。

背景技术

随着移动终端功能的不断升级，现有的移动终端已经成为了人们日常生活的必备品之一了。例如，人们经常会拿手机或者ipad进行视频聊天，该方式是现代社会远距离的人与人之间沟通交流的重要桥梁。

为了增加视频聊天中的趣味性及装饰性，有部分第三方应用在其视频聊天功能中增加了趣味贴图功能，例如：使用QQ来进行视频聊天时，有一个功能按钮叫特效互动，点击该功能按钮，就可以在视频中对应的人脸上贴图，例如给人脸打上腮红或者戴上兔子耳朵等。但是这种第三方视频聊天功能中的趣味应用开发都有一定局限性，仅支持自家应用的视频聊天，无法提供给其他不具备该功能的应用在视频聊天时使用，譬如，利用苹果自带的FaceTime聊天时，由于FaceTime并没有相应的功能，因此就不可以使用趣味贴图。这样造成了资源应用的局限性。

因此，如何提供一种全系统可用的趣味贴图方法是业界亟待解决的技术问题。

发明内容

本发明为了解决上述现有技术中存在的技术问题，提出一种基于视频通话数据流处理实现趣味贴图的方法，包括如下步骤：

步骤1，当用户启动预先收录在内的第三方应用时，判断此时相机是否打开，若相机未打开，则执行步骤2，若相机打开，则执行步骤3；

步骤2，持续监控相机是否开启直至所述第三方应用关闭，一旦相机打开，则转入步骤3；

步骤3，弹出贴图按钮，同时搜索已有的贴图资源；

步骤4，用户点击贴图按钮，展示所有搜索到的贴图资源的子按钮；

步骤5，用户点击所述子按钮，把所述子按钮状态开关参数、对应的贴图资源路径参数下传至系统底层；

步骤6，系统底层获取所述子按钮状态开关参数、对应的贴图资源路径参数，同时根据子按钮的开关状态来决定是否截取视频通话影像数据流；

步骤7，判断视频通话影像数据流中人脸检测是否为连续帧，如果是，转至下一步；如果不是，则不进行贴图处理，直接系统默认显示。

步骤8，将不同格式的视频通话影像数据流转换为RGBA格式，通过GPU叠加转换格式后的视频通话影像数据流和贴图，然后再把GPU叠加处理后的数据进行格式转换成系统底层所支持格式的影像数据流，再进行显示。

本发明基于系统底层，来实现趣味贴图，可以在系统中实现任何第三方应用的视频通话和第三方应用相机趣味贴图功能，使用范围广且资源复用率高，并且在底层时，通过人脸检测连续帧的方法，使视频通话时用户手机晃动预览更流畅，用户体验效果更佳。

附图说明

图1为本发明贴图子按钮显示流程图。

图2为本发明视频通话底层数据流截取处理图。

图3为本发明贴图加载条件流程图。

具体实施方式