[发明专利]交互界面测试方法、装置、电子设备及存储介质

权利要求书

1.一种交互界面测试方法，其特征在于，包括：

确定待测试的目标交互界面和参考影音数据；

根据所述参考影音数据获取所述目标交互界面的待测影音数据；

根据所述待测影音数据的待测影音特征和所述参考影音数据的参考影音特征，确定所述参考影音数据出现在所述待测影音数据中的起始影音帧；

根据所述参考影音数据出现在所述待测影音数据中的起始影音帧，确定所述待测交互界面的测试结果。

2.根据权利要求1所述的方法，其特征在于，所述参考影音数据包括参考图像；

其中，所述根据所述参考影音数据获取所述目标交互界面的待测影音数据，包括：

根据所述参考图像，获取所述目标交互界面的待测视频；

其中，根据所述待测影音数据的待测影音特征和所述参考影音数据的参考影音特征，确定所述参考影音数据出现在所述待测影音数据中的起始影音帧，包括：

获取所述待测视频的多个待测图像帧；

根据所述参考图像的参考图像特征、所述多个待测图像帧的图像帧时间和待测图像特征，确定所述参考图像首次出现在所述待测视频中的起始视频帧以及所述参考图像在所述起始视频帧中的参考位置；

其中，所述根据所述参考影音数据出现在所述待测影音数据中的起始影音帧，确定所述待测交互界面的测试结果，包括：

根据所述起始视频帧以及所述参考位置，确定所述目标交互界面的测试结果。

3.根据权利要求2所述的方法，其特征在于，所述根据所述参考图像的参考图像特征、所述多个待测图像帧的图像帧时间和待测图像特征，确定所述参考图像首次出现在所述待测视频中的起始视频帧以及所述参考图像在所述起始视频帧中的参考位置，包括：

基于图像特征提取算法，对所述参考图像和所述多个待测图像帧进行特征提取，得到所述参考图像的特征点数据、各待测图像帧各自的待测特征点数据；

对所述特征点数据和各待测图像帧各自的待测特征点数据进行比对，确定各待测图像帧各自的有效特征点数据；

根据各待测图像帧各自的有效特征点数据和特征点数量阈值，确定各待测图像帧中包含所述参考图像的多个候选图像帧；

根据所述多个候选图像帧各自的图像帧时间，将所述多个候选图像帧中时间最早的一个候选图像帧确定为所述起始视频帧；

检测所述参考图像在所述起始视频帧中的位置，确定所述参考位置。

4.根据权利要求1所述的方法，其特征在于，所述参考影音数据包括参考音频；

其中，所述根据所述参考影音数据获取所述目标交互界面的待测影音数据，包括：

根据所述参考音频，获取所述目标交互界面的待测音频；

其中，根据所述待测影音数据的待测影音特征和所述参考影音数据的参考影音特征，确定所述参考影音数据出现在所述待测影音数据中的起始影音帧，包括：

根据所述参考音频的参考时长，将所述待测音频切分为至少一个待测音频段；

根据所述参考音频的参考音频特征、所述至少一个待测音频段的待测音频特征，确定所述至少一个待测音频段中包含所述参考音频的目标音频段；

根据所述目标音频段中的各音频帧时间，确定所述参考音频出现在所述待测音频中的起始音频帧；

其中，所述根据所述参考影音数据出现在所述待测影音数据中的起始影音帧，确定所述目标交互界面的测试结果，包括：

根据所述起始音频帧，确定所述待测交互界面的测试结果。

5.根据权利要求4所述的方法，其特征在于，所述根据所述参考音频的参考音频特征、所述至少一个待测音频段的待测音频特征，确定所述至少一个待测音频段中包含所述参考音频的目标音频段，包括：

根据预设采样率，对所述参考音频中的各参考音频帧进行特征提取，得到参考音频特征数组，并对所述待测音频段中的各待测音频帧进行特征提取，得到待测音频特征数组；

根据所述参考音频特征数组的参考波形图和所述待测音频特征数组的待测波形图执行比对，确定所述待测音频段中的所述目标音频段。