Каппа Флейсса — это способ измерения степени согласия между тремя или более оценщиками, когда оценщики присваивают категориальные оценки набору элементов.
Каппа Флейсса находится в диапазоне от 0 до 1, где:
- 0 указывает на отсутствие согласия среди оценщиков.
- 1 указывает на идеальное согласие между экспертами.
В этом учебном пособии приведен пример расчета каппа Флейсса в Excel.
Пример: Каппа Флейсса в Excel
Предположим, 14 человек оценивают 10 различных продуктов по шкале от «плохо» до «отлично».
На следующем снимке экрана показаны общие оценки, полученные каждым продуктом:
На следующем снимке экрана показано, как рассчитать каппа Флейсса для этих данных в Excel:
Самые сложные расчеты на этом снимке экрана находятся в столбце J. Формула, используемая для этих расчетов, показана в текстовом поле в верхней части экрана.
Обратите внимание, что каппа Флейсса в этом примере оказывается равной 0,2099.Фактическая формула, используемая для вычисления этого значения в ячейке C18:
Каппа Флейсса = (0,37802 – 0,2128) / (1 – 0,2128) = 0,2099.
Хотя формального способа интерпретации каппы Флейсса не существует, следующие значения показывают, как интерпретировать каппу Коэна, которая используется для оценки уровня согласия между оценщиками только между двумя оценщиками:
- < 0,20 | Бедный
- .21 – .40 | Справедливый
- .41 – .60 | Умеренный
- .61 – .80 | Хороший
- 0,81 – 1 | Отлично
Основываясь на этих значениях, каппа Флейсса , равная 0,2099, в нашем примере будет интерпретироваться как «удовлетворительный» уровень согласия между экспертами.