[发明专利]房间布局估计方法和技术

摘要

公开了用于估计房间布局的系统和方法。房间布局可包括地板、一个或多个墙壁和天花板的位置。在一个方面，神经网络可以分析房间的一部分的图像以确定房间布局。神经网络可以包括具有编码器子网络、解码器子网络和侧子网络的卷积神经网络。神经网络可以使用与房间类型相关联的二维有序关键点来确定三维房间布局。房间布局可用于诸如增强或混合现实、机器人、自主室内导航等的应用。

主权项

1.一种系统，包括：非暂态存储器，其被配置为存储：用于房间布局估计的房间图像；以及用于估计房间布局的神经网络，所述神经网络包括：编码器‑解码器子网络；以及分类器子网络，其连接到所述编码器‑解码器子网络；硬件处理器，其与所述非暂态存储器通信，所述硬件处理器被编程为：访问所述房间图像；使用所述编码器‑解码器子网络和所述房间图像确定与多个房间类型对应的多个预测的二维(2D)关键点图；使用所述编码器‑解码器子网络、所述分类器子网络和所述房间图像从所述多个房间类型确定预测房间类型；使用所述多个预测的2D关键点图和所述预测的房间类型确定与所述预测的房间类型相关联的多个有序关键点；以及使用所述多个有序关键点确定所述房间图像中所述房间的预测布局。