[发明专利]一种基于人类演示视频的机器人控制方法、装置和设备

摘要

本发明公开了一种基于人类演示视频的机器人控制方法、装置、设备及计算机可读存储介质，包括：输入待还原的演示视频，确定演示视频内各个行为操作对应的视频片段；在各个视频片段内分别采集多幅采样图像，并将多幅采样图像输入预设卷积神经网络中，识别各个行为操作的目标动作；将多幅采样图像输入至预设目标检测模型中，根据输出结果，确定各个行为操作的物体特征，从而确定各个行为操作对应的主体和受体；将各个行为操作对应的目标动作、主体和受体发送至目标机器人，以便目标机器人还原演示视频的内容。本发明所提供的方法、装置、设备及计算机可读存储介质，机器人在没有强烈约束条件、用户不需要培训和佩戴额外设备的情况下可还原演示视频。

主权项

1.一种基于人类演示视频的机器人控制方法，其特征在于，包括：输入待还原的演示视频和所述演示视频内各个行为操作的起始时间和结束时间；根据所述各个行为操作的起始时间和结束时间，确定所述各个行为操作对应的视频片段；在所述各个行为操作对应的视频片段中分别采集多幅采样图像，将所述多幅采样图像输入预先完成训练的预设卷积神经网络中，识别所述各个行为操作对应的目标动作；将所述多幅采样图像输入至预先完成训练的预设目标检测模型中进行处理，根据所述预设算法模型的输出结果，确定所述各个行为操作对应的物体特征；根据所述各个行为操作对应的物体特征，确定所述各个行为操作对应的主体和受体；将所述各个行为操作对应的所述目标动作、所述主体和所述受体发送至目标机器人，以便所述目标机器人还原所述演示视频内的所述各个行为操作。