[发明专利]一种立体图像生成方法及装置有效
申请号: | 202010084752.6 | 申请日: | 2020-02-10 |
公开(公告)号: | CN111343444B | 公开(公告)日: | 2021-09-17 |
发明(设计)人: | 邢树军 | 申请(专利权)人: | 清华大学 |
主分类号: | H04N13/122 | 分类号: | H04N13/122;H04N13/204;H04N13/275;H04N13/282;H04N13/363 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 杨明月 |
地址: | 100084 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 立体 图像 生成 方法 装置 | ||
本发明实施例公开了一种立体图像生成方法及装置,方法包括:根据虚拟三维场景和虚拟相机阵列,确定稀疏视点的图像;根据稀疏视点的图像,确定稠密视点的图像;将稠密视点的图像转化为稠密视点的彩色图像;重排稠密视点的彩色图像,得到立体图像。本发明实施例采用混合渲染的方式,即首先利用基于几何的渲染方法,将虚拟三维场景和虚拟相机阵列输入几何渲染管线中,得到稀疏视点的图像;再利用基于图像的渲染方法将所述稀疏视点的图像输入运行在显卡中的多线程程序中,得到稠密视点的图像,克服了传统超多视点立体图像的渲染算法存在可视角度小,渲染时间长,显示质量差,只考虑理想散射介质,故渲染出来的图像存在光照效果失真的现象等问题。
技术领域
本发明涉及计算机技术领域,具体涉及一种立体图像生成方法及装置。
背景技术
随着三维显示技术的蓬勃发展,显示效果越来越好,可视化角度越来越大,视点数目越来越密集。
传统的渲染方法主要分为两大类:基于几何的渲染方法和基于图像渲染的方法。基于几何的渲染方法其输入数据为模型数据,纹理数据,法线数据等。最简单的基于几何的渲染方法为摄像机阵列生成法,即在虚拟空间中建立一系列的虚拟相机,然后逐个渲染得到单个的视点图像。随着视点数目的增多,渲染效率会严重下降。与摄像机阵列生成法相反的方法是逆向光线跟踪生成法,根据自由立体显示器的视点排布规律,生成光线与虚拟空间中的几何体进行碰撞检测,最佳得到无冗余的自由立体图像。虽然近些年来,实时光线跟踪技术快速发展,但是根据英伟达公司出版的图灵架构白皮书,在未来十年内在超大分辨率,超多视角的自由立体显示器上实现实时的光线跟踪方案是不可能的。除此之外,还有哈佛大学提出的MVR(Multiview Rendering,多视点渲染)技术,首先生成EPI(EpipolarPlane Image,极限平面图像)图像然后再转化多视点。这个算法虽然有效的利用了多视点的相关性,提高了渲染效率,但它并不被现代渲染管线所支持,所以很难生成高质量图像。基于图像的渲染方法其输入数据为一系列的图像。最常见的渲染方法包括体渲染和光场渲染。体数据的自由立体实时渲染是光线投射法,其缺点也很明显,即碰撞检测消耗大量计算资源,无法处理大规模数据。光场渲染将消耗大量的存储资源,无法浏览大规模场景。然而,基于深度图像的立体图像生成方法是近年来的研究热点。单DIBR(Depth Image BasedRendering,基于深度图的图像绘制)可实现可视角度在10度以内的自由立体显示器实时渲染。多DIBR图像可以扩展可视角度,并提升渲染效率。但它们只有深度图像和彩色图像,并没有考虑光照问题。所以输出的渲染质量有时会很差。
发明内容
由于现有方法存在上述问题,本发明实施例提出一种立体图像生成方法及装置。
第一方面,本发明实施例提出一种立体图像生成方法,包括:
根据虚拟三维场景和虚拟相机阵列,确定稀疏视点的图像;
根据所述稀疏视点的图像,确定稠密视点的图像;
将所述稠密视点的图像转化为所述稠密视点的彩色图像;
重排所述稠密视点的彩色图像,得到立体图像。
可选地,所述虚拟相机阵列采用错切的排列方式。
可选地,所述虚拟相机阵列中的虚拟相机的排列公式如下:
其中,Mvn,Mpn分别是虚拟相机n的模型视图矩阵和投影矩阵,Mvc,MPC为中心相机的模型视图矩阵和投影矩阵,d代表相邻两个相机之间的距离,dh代表相机到零视差平面的距离,n代表相机的序号,N代表相机的数目。
可选地,所述根据所述稀疏视点的图像,确定稠密视点的图像,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010084752.6/2.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序