Каппа Коэна – коэффициент, предложенный Коэном в 1960 году для оценки согласованности между наблюдениями с учетом того, что часть этой согласованности может быть случайной. Используется только для категориальных данных. Для категориальных наблюдений номинального типа используется стандартная каппа Коэна, для порядковых – взвешенная каппа Коэна.
Формула для расчета стандартной каппы Коэна (2):
, (2)
где ро – наблюдаемое согласие между оценщиками, ре – вероятность случайного согласия, использующая для вычисления вероятности наблюдаемые данные.
Формула для расчета взвешенной каппы Коэна (3):
, (3)
где wij – значения веса для каждой разницы между вариантами, poij и peij – наблюдаемые и ожидаемые согласия между оценщиками.
Функции для расчета коэффициента каппа Коэна доступны в составе статистических пакетов языков программирования R (пакеты DescTools 0.99.51, psych 2.3.6) и Python (библиотека scikit-learn 1.3.6), а также в составе программного обеспечения Stata и SPSS [13].