命名实体识别的评价指标

正确率、精确率、召回率、F1值

命名实体识别的评判标准:实体的边界是否正确;实体的类型是否标注正确。主要错误类型包括文本正确,类型可能错误;反之,文本边界错误,而其包含的主要实体词和词类标记可能正确。

 准确率(正确率)=所有预测正确的样本/总的样本  (TP+TN)/总

 精确率=  将正类预测为正类 / 所有预测为正类 TP/(TP+FP)

 召回率 = 将正类预测为正类 / 所有真正的正类 TP/(TP+FN)

 F1值 = (精确率 * 召回率 * 2) / ( 精确率 + 召回率) (F 值即为精确率和召回率的调和平均值)
 

精确率:识别出正确的实体数 / 识别出的实体数

召回率:识别出正确的实体数 / 样本的实体数

两者的取值都在 0 和 1 之间ye,数值越接近1,精确率或召回率就越高。精确率和召回率有时会出现矛盾的情况,这是需要综合考虑它们的加权调和平均值,也就是* F 值*,其中最常用的 F1 值,当 F1 值较高时说明试验方法比较有效。F1 值定义如下:

F1值 = (2 * 精确率 * 召回率)/(精确率 + 召回率)

你可能感兴趣的:(命名实体识别的评价指标)