[发明专利]一种食物识别方法及装置、存储介质、计算机设备

权利要求书

1.一种食物识别方法，其特征在于，所述方法包括：

确定食物的拍摄路径；

指示终端按照所述拍摄路径进行移动；

在所述终端移动的过程中，对所述食物进行拍摄，得到视频数据；所述视频数据中包括从不同的视角对所述食物进行拍摄得到的图像数据；

基于所述视频数据对所述食物进行识别；

所述方法还包括：对所述食物进行拍摄的过程中，采集传感器数据，所述传感器数据用于表示所述终端的位姿信息；记录所述视频数据中的每帧图像数据对应的传感器数据；在所述终端移动的过程中，根据所述视频数据中与当前时刻对应的图像数据以及当前时刻对应的传感器数据，计算所述终端当前时刻对应的运动参数和位姿参数；基于所述终端当前时刻对应的运动参数和位姿参数，更新所述拍摄路径。

2.根据权利要求1所述的食物识别方法，其特征在于，所述确定食物的拍摄路径之前，所述方法还包括：

检测食物的位置；

基于所述食物的位置以及所述拍摄路径的初始位置，生成预调整路径；

指示所述终端按照所述预调整路径进行移动，以使得所述终端位于所述拍摄路径的初始位置。

3.根据权利要求2所述的食物识别方法，其特征在于，所述检测食物的位置，包括：

对取景区域进行拍摄，得到所述取景区域对应的图像数据，其中，所述食物位于所述取景区域；

基于所述图像数据，确定所述食物的位置。

4.根据权利要求1所述的食物识别方法，其特征在于，所述基于所述视频数据对所述食物进行识别，包括：

将所述视频数据中的每帧图像数据与对应的传感器数据按照时间顺序进行加权融合，得到融合时序数据；

将所述融合时序数据输入视频识别模型中，以对所述食物进行识别。

5.根据权利要求4所述的食物识别方法，其特征在于，所述视频识别模型至少包括：长短期记忆LSTM模型。

6.一种食物识别装置，其特征在于，所述装置包括：

第一确定单元，用于确定食物的拍摄路径；其中，所述第一确定单元具体用于：初步检测所述食物的信息，根据初步检测到的所述食物的信息确定所述拍摄路径；

第一指示单元，用于指示终端按照所述拍摄路径进行移动；

拍摄单元，用于在所述终端移动的过程中，对所述食物进行拍摄，得到视频数据；所述视频数据中包括从不同的视角对所述食物进行拍摄得到的图像数据；

识别单元，用于基于所述视频数据对所述食物进行识别；

采集单元，用于对所述食物进行拍摄的过程中，采集传感器数据，所述传感器数据用于表示所述终端的位姿信息；

存储单元，用于记录所述视频数据中的每帧图像数据对应的传感器数据；

更新单元，用于在所述终端移动的过程中，根据所述视频数据中与当前时刻对应的图像数据以及当前时刻对应的传感器数据，计算所述终端当前时刻对应的运动参数和位姿参数；基于所述终端当前时刻对应的运动参数和位姿参数，更新所述拍摄路径。

7.根据权利要求6所述的食物识别装置，其特征在于，所述装置还包括：

检测单元，用于检测食物的位置；

生成单元，用于基于所述食物的位置以及所述拍摄路径的初始位置，生成预调整路径；

第二指示单元，用于指示所述终端按照所述预调整路径进行移动，以使得所述终端位于所述拍摄路径的初始位置。

8.根据权利要求7所述的食物识别装置，其特征在于，所述检测单元包括：

所述拍摄单元，用于对取景区域进行拍摄，得到所述取景区域对应的图像数据，其中，所述食物位于所述取景区域；

第二确定单元，用于基于所述图像数据，确定所述食物的位置。

9.根据权利要求6所述的食物识别装置，其特征在于，所述识别单元，用于将所述视频数据中的每帧图像数据与对应的传感器数据按照时间顺序进行加权融合，得到融合时序数据；将所述融合时序数据输入视频识别模型中，以对所述食物进行识别。