[发明专利]用于处理图像的方法和装置在审
申请号: | 201810734682.7 | 申请日: | 2018-07-06 |
公开(公告)号: | CN108876858A | 公开(公告)日: | 2018-11-23 |
发明(设计)人: | 徐珍琦;王长虎 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | G06T7/73 | 分类号: | G06T7/73 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 关键点信息 拍摄图像 基准图像 基准坐标 目标对象 集合 位置信息集合 方法和装置 关键点检测 处理图像 位置坐标 关键点 目标图像区域 图像几何变换 获取目标 模型实现 申请 | ||
1.一种用于处理图像的方法,包括:
获取目标对象的拍摄图像和显示有目标对象的基准图像;
将所述拍摄图像输入至预先训练的、与所述目标对象对应的关键点检测模型,得到位置信息集合,其中,位置信息包括位置坐标,位置坐标用于表示关键点信息集合中的关键点信息指示的关键点对应在所述拍摄图像中的位置,关键点是预先确定的、所述目标对象上的点;
针对关键点信息集合中的关键点信息,确定该关键点信息指示的关键点对应在所述基准图像中的位置的坐标作为基准坐标,得到基准坐标集合;
根据得到的位置信息集合和基准坐标集合,利用图像几何变换确定所述拍摄图像中的目标图像区域对应在所述基准图像中的位置。
2.根据权利要求1所述的方法,其中,位置信息还包括可见性信息,其中,可见性信息用于表示关键点信息集合中的关键点信息指示的关键点显示在所述拍摄图像中的概率。
3.根据权利要求2所述的方法,其中,所述根据得到的位置信息集合和基准坐标集合,利用图像几何变换确定所述拍摄图像中的目标图像区域对应在所述基准图像中的位置,包括:
从得到的位置信息集合中选取包括的可见性信息大于预设的可见性阈值的位置信息,得到子位置信息集合;
根据得到的子位置信息集合中的位置信息包括的位置坐标和得到的子位置信息集合中的位置信息对应的关键点的基准坐标,利用透视变换确定拍摄图像中的目标图像区域对应在所述基准图像中的位置。
4.根据权利要求1所述的方法,其中,所述方法还包括:
在所述基准图像中的目标位置处进行标注,其中,目标位置为所述拍摄图像中的目标图像区域对应在所述基准图像中的位置。
5.根据权利要求1-4之一所述的方法,其中,关键点检测模型通过如下步骤训练得到:
获取训练样本集合,其中,训练样本包括目标对象的拍摄图像和拍摄图像对应的位置信息集合;
利用机器学习的方法,将所述训练样本集合中的训练样本中的目标对象的拍摄图像作为输入,将与输入的拍摄图像对应的位置信息集合作为期望输出,训练得到关键点检测模型。
6.根据权利要求2所述的方法,其中,可见性信息用零和一之间的数值来表示,包括零和一。
7.一种用于处理图像的装置,包括:
获取单元,被配置成获取目标对象的拍摄图像和显示有目标对象的基准图像;
处理单元,被配置成将所述拍摄图像输入至预先训练的、与所述目标对象对应的关键点检测模型,得到位置信息集合,其中,位置信息包括位置坐标,位置坐标用于表示关键点信息集合中的关键点信息指示的关键点对应在所述拍摄图像中的位置,关键点是预先确定的、所述目标对象上的点;
确定单元,被配置成针对关键点信息集合中的关键点信息,确定该关键点信息指示的关键点对应在所述基准图像中的位置的坐标作为基准坐标,得到基准坐标集合;
所述确定单元,进一步被配置成根据得到的位置信息集合和基准坐标集合,利用图像几何变换确定所述拍摄图像中的目标图像区域对应在所述基准图像中的位置。
8.根据权利要求7所述的装置,其中,位置信息还包括可见性信息,其中,可见性信息用于表示关键点信息集合中的关键点信息指示的关键点显示在所述拍摄图像中的概率。
9.根据权利要求8所述的装置,其中,所述确定单元进一步别配置成:
从得到的位置信息集合中选取包括的可见性信息大于预设的可见性阈值的位置信息,得到子位置信息集合;
根据得到的子位置信息集合中的位置信息包括的位置坐标和得到的子位置信息集合中的位置信息对应的关键点的基准坐标,利用透视变换确定拍摄图像中的目标图像区域对应在所述基准图像中的位置。
10.根据权利要求7所述的装置,其中,所述装置还包括:
标注单元,被配置成在所述基准图像中的目标位置处进行标注,其中,目标位置为所述拍摄图像中的目标图像区域对应在所述基准图像中的位置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810734682.7/1.html,转载请声明来源钻瓜专利网。