Kappa系数计算

内容整理自百度百科

kappa系数是一种衡量分类精度的指标。

公式：
$$k=\frac{p_o-p_e}{1-p_e}$$
其中，$p_o$是每一类正确分类的样本数量之和除以总样本数，也就是总体分类精度 。C是类别总数，$T_i$​是每个类别被正确分类的样本数.假设每一类的真实样本个数分别为a1,a2,…,aC，而预测出来的每一类的样本个数分别为b1,b2,…,bC

总样本个数为n，
$$p_o=\frac{{\sum }_{i=1}^C{T}_i}{n}$$

$$p_e=\frac{{\sum }_{i=1}^C{a}_i\ast b_i}{n^2}$$

实例

百度百科中提供了一个例子