[发明专利]用于处理360度图像的方法和装置

权利要求书

1.一种处理360度图像的方法，所述方法包括：

获得关于所述360度图像的多个运动矢量；

通过滤波确定所述多个运动矢量中指示所述360度图像的全局旋转的至少一个运动矢量；

通过对所确定的至少一个运动矢量进行三维转换，获得所述360度图像的三维3D旋转信息；以及

基于所获得的3D旋转信息，校正由抖动引起的所述360度图像的失真。

2.根据权利要求1所述的方法，其中，获得所述3D旋转信息包括：

将所确定的至少一个运动矢量分类为与预定方向和预定大小范围相对应的多个箱；

从分类后的所述多个箱中选择包括最大数量的运动矢量的箱；以及

通过对所选择的箱的方向和距离进行转换来获得所述3D旋转信息。

3.根据权利要求1所述的方法，其中，获得所述3D旋转信息包括：通过使用先前生成的学习网络模型，基于所述多个运动矢量来获得所述3D旋转信息。

4.根据权利要求1所述的方法，还包括：获得当捕获所述360度图像时由于感测捕获设备的抖动而生成的传感器数据，

其中，校正所述360度图像包括：通过将所获得的传感器数据与所述3D旋转信息进行组合来校正所述360度图像的失真。

5.一种用于处理360度图像的装置，包括：

存储器，存储一个或多个指令；以及

处理器，被配置为执行所述存储器中存储的所述一个或多个指令，

其中，所述处理器被配置为：

获得关于360度图像的多个运动矢量；

通过滤波确定所述多个运动矢量中指示所述360度图像的全局旋转的至少一个运动矢量；

通过对所确定的至少一个运动矢量进行三维转换，获得关于所述360度图像的三维3D旋转信息；以及

基于所获得的3D旋转信息，校正由抖动引起的所述360度图像的失真。

6.根据权利要求5所述的装置，其中，所述处理器被配置为：根据投影类型，从所述多个运动矢量中去除包括在预定区域中的运动矢量。

7.根据权利要求5所述的装置，其中，所述处理器被配置为：

基于从所述360度图像中检测到的边缘生成掩模；

通过将所生成的掩模应用于所述360度图像，确定所述360度图像中不存在纹理的区域；以及

从所述多个运动矢量中去除包括在不存在纹理的所述区域中的运动矢量。

8.根据权利要求5所述的装置，其中，所述处理器被配置为：

通过预设的对象检测过程从所述360度图像中检测至少一个移动对象，以及

从所述多个运动矢量去除与检测到的对象相关的运动矢量。

9.根据权利要求5所述的装置，其中，所述处理器被配置为：将在所述360度图像被投影到的单位球面的相对侧上彼此平行、具有不同标记并且具有预定阈值范围内的大小的运动矢量确定为指示所述全局旋转的运动矢量。

10.根据权利要求5所述的装置，其中，所述处理器被配置为：

将确定的至少一个运动矢量分类为与预定方向和预定大小范围相对应的多个箱；

从所述多个箱中选择包括最大数量的运动矢量的箱；以及

通过对选择的箱的方向和距离进行转换来获得所述3D旋转信息。

11.根据权利要求10所述的装置，其中，所述处理器被配置为：通过对所述选择的箱和多个相邻箱的方向和距离应用加权平均来获得所述3D旋转信息。

12.根据权利要求5所述的装置，其中，所述处理器被配置为：获得使所述确定的至少一个运动矢量之和最小化的旋转值作为所述3D旋转信息。