[发明专利]一种基于移动端虚拟视点合成的云卸载方法及系统

摘要

本发明公开了一种基于移动端虚拟视点合成的云卸载方法及系统，该方法包括如下步骤：A1.将输入帧，包括左右视点的纹理图和深度图，等分成n块；A2.参考上一帧分割块空洞数目，预测当前帧每一分割块进行视点合成的负载；A3.将每个图像块的负载代入云卸载模型，通过最小化移动端的功耗，得到分配结果；A4.根据A3分配结果，在云端或者在移动端分别对不同的图像块进行视点合成；A5.将云端和移动端合成的虚拟视点图像进行拼接，输出一个完整的虚拟视点。使用本发明的云卸载方法或系统，不仅能够提高虚拟视点合成的算法效率、降低移动端的功耗，而且还能高效地获取较高质量的合成的虚拟视点图像或者视频。

主权项

1.一种基于移动端的虚拟视点合成的云卸载方法，其特征在于，所述方法包括以下步骤：A1.将输入帧，包括左右视点的纹理图和深度图，平均分成n块；其中n为用户自行设定的将每帧视频分割的块数，n为大于1的整数；A2.参考上一帧分割块空洞数目，预测当前帧每一分割块进行视点合成的负载；A3.将每个图像块的负载代入云卸载模型，通过最小化移动端的功耗，得到分配结果，实现资源的动态分配；A4.根据A3的分配结果，在云端或者在移动端分别对不同的图像块进行视点合成；A5.将云端和移动端合成的虚拟视点图像进行拼接，生成一个完整的虚拟视点；所述步骤A3中云卸载模型的表达式为：其中，为向量，如果I_i(i＝1,2...n)为1，则第i块分配到云端进行虚拟视点合成，若I_i(i＝1,2...n)为0，则在移动端进行视点合成；P_c为移动端在计算时的功耗，P_i为移动端闲置时的功耗，P_tr为移动端在数据传送时的功耗；C_m为分配到移动端的算法复杂度，C_c为分配到云端的算法复杂度；f为移动端的每秒处理速度，S为每秒云端的计算速度，D是云端和移动端传输的数据的大小，B为带宽；其中为第i块进行视点合成的负载，f_t为当前设备的每秒处理速度；D＝Dm+Dc，其中Dm和Dc分别为在移动端上和在云端进行视点合成时需要传输到移动端的数据。