[发明专利]基于隐结构学习的图像摘要生成方法有效
申请号: | 201310410623.1 | 申请日: | 2013-09-10 |
公开(公告)号: | CN103530656B | 公开(公告)日: | 2017-01-11 |
发明(设计)人: | 汤斯亮;邵健;方晗吟;吴飞;庄越挺 | 申请(专利权)人: | 浙江大学 |
主分类号: | G06K9/66 | 分类号: | G06K9/66;G06F17/30;G06T11/60 |
代理公司: | 杭州求是专利事务所有限公司33200 | 代理人: | 张法高 |
地址: | 310027 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 结构 学习 图像 摘要 生成 方法 | ||
1.一种基于隐结构学习的图像摘要生成方法,其特征在于包括如下步骤:
1)对图片提取HSV颜色直方图特征、视觉单词特征以及方向直方图特征;
2)对上一步提取的三种特征进行归一化的预处理并在归一化后将三种特征融合为一个特征向量;
3)构造一个带有隐变量的结构支持向量机,从数据库中多次选取训练集合,并利用训练集中不同主题相关的图片集合进行权重系数学习;
4)利用上一步学习得到的权重系数,从数据库中选取不同主题相关的图片集,预测出它们的隐含的特征选择偏好并生成与之对应的摘要图片集合。
2.根据权利要求1所述的一种基于隐结构学习的图像摘要生成方法,其特征在于,所述的步骤1)包括:
1)对数据库内的所有图片在HSV颜色空间中进行颜色特征提取。首先将图片中的每一个像素计算其在HSV颜色空间中的表达,然后将HSV颜色特征空间均匀地划分为450个区域,最后对每个区域统计落在其中的像素个数,形成450维的颜色直方图特征;
2)对数据库内的每张图片的每个像素,计算它与周围像素之间的差异性,得到128维的SIFT特征点;然后在得到的SIFT特征点基础上,利用K-means方法进行聚类,聚类得到的1000个SIFT点类别就形成了1000维的视觉单词特征;
3)对数据库内的每张图片进行8×8的块划分;对每个划分好的块,计算它与周围块之间的方向梯度;将方向梯度特征的取值范围均匀划分为1000个区域,统计落在这1000个区域中的方向梯度特征数量,就得到了1000维的方向梯度直方图特征。
3.根据权利要求1所述的一种基于隐结构学习的图像摘要生成方法,其特征在于,所述的步骤2)包括:
1)将前一步得到的HSV颜色直方图特征、视觉单词特征以及方向梯度直方图特征三种特征向量按照上述顺序,依次连接融合,得到2450维特征;
2)对上面得到的2450维的融合特征,利用如下公式,将原特征值进行归一化。归一化后,特征的取值范围统一变为0.1到0.9。
x=0.1+(0.9-0.1)(x-min)(max-min)
4.根据权利要求1所述的一种基于隐结构学习的图像摘要生成方法,其特征在于,所述的步骤3)包括:
1)为实现交叉验证,多次从数据库中设计训练集,并取出其中的主题图片集合;
2)将权重系数参数w初始化为零向量,将隐藏特征选择变量h初始化为全1向量,通过以下的次梯度下降算法同时对w和h进行优化求解,最终输出训练好的权重系数w。
5.根据权利要求1所述的一种基于隐结构学习的图像摘要生成方法,其特征在于,所述的步骤4)包括:
1)多次从数据库中取出不同的需要进行摘要生成的图片集合,将与这个集合相关的隐变量h初始化为全1的向量;
2)将步骤3中学习得到的特征权重系数w带入下述贪心算法选择出符合给定长度的摘要图像集合,并在贪心算法每一次选择的同时优化得到最终的隐变量h。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310410623.1/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序