[发明专利]一种面向中文人名识别系统的评测方法及评测系统

权利要求书

1.一种面向中文人名识别系统的评测方法，其特征在于，包括以下步 骤：

评测文件生成步骤：从句子库抽取指定数目的句子，并对句子中的每个 人名利用人名库中的人名进行替换产生评测文件；

记录数据步骤：在生成评测文件的过程中，记录句子在评测文件中的行 号、句子中的每个人名及人名在句子中的起始位置；

识别步骤：利用待评测的中文人名识别系统对评测文件进行人名识别， 得到识别结果，识别结果包括句子在评测文件中的行号、识别出的人名及人 名在句子中的起始位置；

判断步骤：根据预先设定的判断标准对识别结果和记录数据进行比较， 判断人名识别系统是否正确识别出句子中的人名；所述预先设定的判断标准 如下：当且仅当识别结果中句子在评测文件中的行号、识别出的人名及人名 在句子中的起始位置和记录数据中句子的行号、句子中的人名、人名在句子 中的起始位置对应相等时，为一个正确识别出的人名；

评测指标计算步骤：根据判断步骤的判断结果形成评价中文人名识别系 统的评测指标；

在所述评测指标计算步骤中的一次评测指标包括：

指标一：

指标二：

对识别系统的评测指标包括：

指标一：平均召回率，n次评测召回率的平均值；

指标二：平均准确率，n次评测准确率的平均值；

指标三：稳定性，通过n次评测准确率的方差来表示，方差小于等于一设 定阈值0.01时，n取值范围为10≤n≤50，表明中文人名识别系统具有较高稳 定性。

2.根据权利要求1所述的中文人名识别系统的评测方法，其特征在于， 在所述评测文件生成步骤中所述句子库其特征如下：

特征一：句子库要涉及多个领域；

特征二：句子库中句子的个数要大于1万条，每个句子要包含一个或多 个人名，对句子中的每个人名采用计算机能够准确识别的标识来标示；

特征三：句子库包括10％-50％不包含人名的干扰句子。

3.根据权利要求1所述的中文人名识别系统的评测方法，其特征在于， 在所述评测文件生成步骤中所述人名库其特征在于：

特征一：人名库的姓氏个数要大于600个；

特征二：人名库包含的人名数要大于10万个。