[发明专利]一种基于神经网络三体模型的三维点云语义分析方法

权利要求书

1.一种基于神经网络三体模型的三维点云语义分析方法，其特征在于，该方法包括：

步骤1：局部空间编码：编码3D点云的空间几何形状信息，从而使得网络能够从各个点的相对位置以及距离信息中更好地学习到空间的几何结构；

步骤2：引入注意力机制：输出各个点的相对位置以及距离信息的邻域点特征集，通过注意力机制来自动学习和聚合，考虑到输入的点云会被持续大幅度的降采样，在解码器中的上采样阶段，采用更加高效的最近邻插值，进一步提升算法执行效率；

步骤3：通过不断学习与迭代，促使介观体系不断增大每个点的感受野以及促进邻域点之间的特征传播，进而完成从低级介观体系向高级介观体系演变过程，完成学习体的构建；

步骤4：构建记忆体与解释体：找到介观体系中的张量单元，然后通过介观体系提取实体参数，随着这些介观体系在模型里逐层上升，把介观体系中的其他粒子信息作为背景环境，不断更新这个张量单元描述，最终分别为每个介观体系预测整体介观体系群和单个介观体系之间的空间关系；

步骤5：如此迭代，高层次的介观体系中应当具备一定的解释能力，因此，使用解释体有一个隐含的假设是，其中有一个是正确的解释，为找出正确的解释，需要选择一个目标函数，确保高层次介观体系通过混合模型产生的、已经在低层次介观体系上观察到的姿态的对数似然最大化；

步骤6：当通过解释体做反向传播时，学习如何让高层次的介观体系实例化，这并不能很好地解释数据的元素，因此，需要建立解析树，使最好解释的元素得到最大导数，即可以学习和优化。

2.如权利要求1所述的一种基于神经网络三体模型的三维点云语义分析方法，其特征在于，所述步骤2中通过注意力机制来自动学习和聚合，是通过设计共享函数来为每个点学习单独能够自动选择重要特征的注意力权值，最终得到的特征是这些邻域特征点集的加权求和。

3.如权利要求1所述的一种基于神经网络三体模型的三维点云语义分析方法，其特征在于，所述步骤4中为每个介观体系预测整体介观体系群和单个介观体系之间的空间关系，是每一个已经实例化的高层次介观体系都会为每个已经从图像中提取到的低层次的介观体系预测姿态，在预测姿态的过程中，选择一个目标函数，确保高层次介观体系通过混合模型产生的、已经在低层次介观体系上观察到的姿态的对数似然最大化。

4.如权利要求1所述的一种基于神经网络三体模型的三维点云语义分析方法，其特征在于，所述介观体系的粒子是指神经网络中一种神经元结构体，它主要包含逻辑单元、矩阵单元、向量单元三部分，所述逻辑单元主要用来表示当前的图像中是否存在这个实体，无论实体在这个集合覆盖的图像范围的任何地方，所述矩阵单元用来表示实体和观察者之间的空间关系，或者实体内嵌的固有坐标系和观察者之间的空间关系；所述向量单元用来表示除了逻辑单元、矩阵单元之外的信息。