[发明专利]一种软件bug报告分类系统及分类方法

说明书

本发明公开了一种软件bug报告分类系统及分类方法，所述系统包括训练部分和测试部分，所述训练部分包括：数据集获取模块、数据约简模块和不平衡数据集处理模块；所述测试部分包括：bug报告输入模块和结果分类输出模块。所述分类方法的主要步骤包括：使用数据约简算法来处理数据，用RSMOTE方法处理不平衡数据集，用获得的平衡数据集训练分类器，以及用Choquet模糊积分来集成多个已经训练过的分类器对bug报告的结果进行分类。本发明通过特征选择和实例选择结合使用的办法，减少了样本维度和单词维度上的数据规模，通过使用基于Choquet模糊积分的集成训练方法，提高了对bug报告严重性的识别程度，同时避免了随机采样的不确定性。

技术领域

本发明涉及一种计算机软件测试方法，尤其是一种软件bug报告的分类系统及方法。

背景技术

在对软件bug报告严重性自动识别分类技术的研究中，目前主要有两个挑战：一是噪音问题(数据的样本维度和单词维度都很高)；二是数据不平衡问题。一些研究者试图解决bug报告分类问题时，对于高维问题提出了六种基于过滤器的特征排序技术，以减少可用软件评估标准的数量，比如有将特征选择算法与实例选择算法相结合以减少bug数据集的规模并提高数据的质量。而对于数据不平衡问题，现有技术有采用为每个类在训练集和测试集中选择相同数量bug 报告的方法。然而，从原始数据集手工选择的错误报告可能是有遗漏的，这将导致训练出的分类器的泛化能力较弱。针对训练集问题的不均衡分布，也有在先技术提出了四种使用广泛的不平衡学习策略(ILS)来解决来自四个不同开源项目的bug报告的不平衡分布。这个方法结合使用了常见的4种文本属性降噪的方法(IG,CH,SU,RF)和样本降噪的方法(ICF,LVQ,DROP,POP)，来从双重维度(属性维度和样本维度)降低bug报告的噪音。该方法首先使用4种文本属性降噪方法来去除噪音属性，然后根据约减之后的数据进行训练分类，选择出最好的属性降噪方法；然后再使用4种样本降噪的方法去除噪音样本，选择出最好的样本去噪方法。最后组合最好的属性去噪方法和样本去噪方法来达到双重去噪的效果。但是该方法并没有考虑到数据样本不平衡问题，导致分类性能低。

发明内容

针对在先技术存在的缺陷，本发明要解决的技术问题是提出了一种基于去除文本噪音和数据不平衡的软件bug报告分类系统及方法，不仅解决去除文本噪音问题，并且进一步解决去除文本噪音之后的数据不平衡问题。

本发明的技术方案是这样实现的：

一种软件bug报告分类系统，包括训练部分和测试部分，

所述训练部分包括：

数据集获取模块，用于获取数据集，并对获取的数据集进行数据“清洗”，通过词干化、去停用词把无意义的单词删除；

数据约简模块，用于将特征选择和实例选择相结合的方式来处理初始数据集；

不平衡数据集处理模块，用于通过用RSMOTE方法处理不平衡数据集；

所述测试部分包括：

bug报告输入模块，用于输入要进行分类的bug报告；

结果分类输出模块，用于bug报告的结果分类和输出，其中包括用Choquet 模糊积分集成的多个已训练过的分类器。

一种上述软件bug报告分类系统的分类方法，包括以下步骤：

S1，分类系统获取要处理的初始bug数据集，并对该数据集进行数据“清洗”，使用词干化，去停词，把无意义的单词删除；

S2，使用数据约简算法来处理数据，所述数据约简过程采用特征选择与实例选择相结合的方式处理初始数据集，特征选择旨在减少单词维度，获得相关单词的子集，实例选择旨在减少样本维度，获得相关bug报告的子集；

S3，获得约简后的数据集，通过约简得到的高质量数据集作为初始数据集的代表性数据集；