小编Roh*_*han的帖子

fleiss kappa 是衡量注释者间一致性的可靠指标吗?下面的结果让我很困惑,使用它时是否涉及任何假设?

我有带有以下描述的注释矩阵:3 个注释者,3 个类别,206 个主题

数据存储在 numpy.ndarray 变量 z 中:

array([[ 0.,  2.,  1.],
   [ 0.,  2.,  1.],
   [ 0.,  2.,  1.],
   [ 0.,  2.,  1.],
   [ 1.,  1.,  1.],
   [ 0.,  2.,  1.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3.,  0.],
   [ 0.,  3., …
Run Code Online (Sandbox Code Playgroud)

python annotations kappa

10
推荐指数
2
解决办法
8889
查看次数

标签 统计

annotations ×1

kappa ×1

python ×1