[发明专利]基于输入地理位置的解码图块与显示位置同步方法及相关视频解码装置在审
申请号: | 201810959428.7 | 申请日: | 2018-08-22 |
公开(公告)号: | CN110858902A | 公开(公告)日: | 2020-03-03 |
发明(设计)人: | 王颂文 | 申请(专利权)人: | 晨星半导体股份有限公司 |
主分类号: | H04N19/176 | 分类号: | H04N19/176;H04N19/184;H04N19/44;H04N19/167;H04N19/70;H04N19/42 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 汤在彦 |
地址: | 中国台湾新竹县*** | 国省代码: | 台湾;71 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 输入 地理位置 解码 显示 位置 同步 方法 相关 视频 装置 | ||
一种解码图块与显示位置同步方法,用于一视频比特流解码装置。该方法包含根据一地理位置,判断一输入比特流的一原始图像的一兴趣区,以撷取该兴趣区的兴趣图块数据,其中该兴趣区对应一兴趣图像;根据该兴趣图块数据,重建该输入比特流,以产生一重建比特流;解码该重建比特流,以产生一重建解码图像;以及根据该兴趣图块数据,将该重建解码图像转换为该兴趣图像。
技术领域
本发明是指一种解码图块与显示位置同步方法及相关视频解码装置,尤指一种基于输入地理位置的解码图块与显示位置同步的方法及相关视频解码装置。
背景技术
在全景虚拟现实(360-Degree Virtual Reality,简称VR360)应用中,当使用世界地图模式时,视频解码装置(例如,虚拟现实装置)会依照使用者选取的地理位置(例如,经度、纬度及对应视角)来决定其屏幕的显示内容。一般而言,虚拟现实装置可透过网络从世界地图数据库下载图像档案(例如,视频比特流(Video bit-stream)),将图像档案暂存于内建存储器(例如,帧缓存器(frame buffer))中,再对图像档案进行解码来取得欲显示的图像,以将之显示于屏幕。
图1绘示根据一地理位置L1,从一世界地图E_MAP载入一视野区FOV1的示意图。图2绘示根据一地理位置L2,从世界地图E_MAP载入一视野区FOV2的示意图。如第1、2图所示,世界地图E_MAP可依据多个经度及多个纬度而分割为多个图块(tile)编号0~509(例如,30经度*17纬度=510图块)。由于世界地图E_MAP是由球体表面转换而来的平面地图,因此需显示的分区图像大小或形状会随着不同的经纬度而有所不同。
举例来说,于图1中,当地理位置L1落在纬度0度(赤道)时,视野区(Field ofView)FOV1包含图块编号98~111、128~141、158~171、188~201、218~231、248~261、278~291、308~321、338~351、368~381、398~411,共154个图块;其中屏幕的显示内容为一兴趣区(Regionof Interest)ROI1,兴趣区ROI1包含图块编号132~137、160~169、189~200、219~230、249~260、279~290、309~320、340~349、372~307,共80个图块。
于图2中,当地理位置L2落在纬度56度时,视野区FOV2包含图块编号0~29、30~59、60~171、90~201、120~231、150~261、180~291、210~321、240~351、270~381,共300个图块;其中屏幕的显示内容为一兴趣区ROI2,兴趣区ROI2包含图块编号0~29、36~53、67~82、97~112、127~142、157~172、188~201、219~230、250~252、257~259,共144个图块。
比较第1、2图可发现视野区FOV1及FOV2的长度与宽度皆不同,因此在进行分区图像解码时需要的存储器尺寸(例如,帧缓存器的尺寸)也不同。
目前全景虚拟现实技术采用高效率视频编解码(High Efficiency VideoCoding,简称HEVC)标准来进行图像编码及解码,然而现有硬件设计可支持的最大像素宽度为4096以及最大像素高度为2560。由于视野区FOV2的像素宽度7860超过最大像素宽度4096,造成现有HEVC的硬件设计无法支持视野区FOV2的图像解码工作,导致虚拟现实装置无法正常显示。
此外,HEVC标准定义了运动约束图块集合(motion-constrained tile set,简称MCTS),允许MCTS里的图块可独立解码而不需参考其他数据。然而,申请人注意到在进行MCTS解码时,若使用者将视角从地理位置L1移动到地理位置L2,现有视频解码装置却未同步变更需解码的目标图块(因为MCTS里的图块可独立解码而不需参考其他数据),使得视频解码装置把兴趣区ROI1的解码图像映射到兴趣区ROI2的显示位置,导致虚拟现实装置显示错误图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于晨星半导体股份有限公司,未经晨星半导体股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810959428.7/2.html,转载请声明来源钻瓜专利网。