CohensKappa系数是用于评估两个评价者在二分类任务中的一致性程度的统计学指标。当需要人类评估作为实验结果的金标准时，该系数越高表示评价者间的一致性越好。例如，在博物馆展品展出决策中，两个管理员的分类结果可以通过CohensKappa系数来度量其一致性。系数值0.3表示了从无到轻度的一致性。
统计学指标
Cohen’s Kappa coefficient
用途：Cohen’s Kappa coefficient用于度量两个rators对于同一事物二分类的一致性程度。
科研中，有些二分类任务的结果需要human evaluation作为groundtruth。这时候，两个author会对实验结果进行采样并判断是否分类正确，Cohen’s Kappa coefficient越高，代表他们对于结果一致认可的程度越高。
Cohen’s kappa coefficient计算公式
k=(p0−pe)/(1−pe)k = (p_0 - p_e) / (1 - p_e)k=(p0−pe)/(1−pe
最低0.47元/天 解锁文章
扫一扫
1万+
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
