Альфа Криппендорфа — онлайн-калькулятор
Альфа Криппендорфа снимает ограничения, из-за которых каппа часто не подходит. Экспертов может быть сколько угодно, шкала любая — от категорий до чисел, — и, главное, допускаются пропуски: не каждый эксперт обязан оценить каждый объект. Именно поэтому её берут в контент-анализе, где часть материала кодирует один специалист, часть другой. Введите таблицу, где строка это эксперт, а столбцы объекты, и обозначьте пропуски.
Согласие любого числа экспертов по любой шкале — и, главное, с пропусками: не каждый эксперт обязан оценить каждый объект. Пустые места не нужно ничем заполнять и не нужно выбрасывать строки — альфа считает по тем оценкам, которые есть.
Строка — эксперт.Тот, чьи оценки вы собирали: преподаватель, тренер, врач, проверяющий. Имя можно вписать своё — оно попадёт в таблицу для диплома.
Столбец — объект оценки.То, что оценивали: работа студента, испытуемый, видеозапись попытки, ответ анкеты.
В клетке — оценка числом.Категории пронумеруйте: 1 — годен, 2 — не годен. Дробные оценки пишите через запятую.
Пустая клетка — пропуск.Означает «этот эксперт этот объект не оценивал». Ничего дописывать не нужно: ради пропусков альфу и считают. Объект, который оценил только один эксперт, из расчёта выпадет — сравнивать его не с чем.
| Эксперт \ Объект | |||||||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
Названия можно переписать — они попадут в результат и в таблицу для диплома. Если столбцов много, таблица прокручивается вбок. Данные из Excel вставляются целиком: скопируйте диапазон и вставьте в первую ячейку.
Это главный параметр расчёта: на одних и тех же данных разные шкалы дают разную альфу. Выбирайте ту, в которой оценки измерены на самом деле, и назовите её в работе рядом с величиной α.
Ничего не понятно или не хотите разбираться?
Закажите расчёт у эксперта: он подберёт метод под вашу тему, посчитает, напишет готовый вывод и оформит таблицы по ГОСТ. Останется вставить в работу.
Заказать расчёт у экспертаКогда нужна альфа Криппендорфа
- В данных есть пропуски: кто-то из экспертов оценил не все объекты.
- Экспертов больше двух, а шкала не категориальная — каппа Флейса тут не подойдёт.
- Нужен один показатель для шкал разного типа, чтобы результаты были сопоставимы.
- Если данные полные и категориальные, а экспертов двое — проще каппа Коэна.
Выбор метрики расхождения
Метрика определяет, насколько сильно наказывается расхождение. Номинальная считает любое несовпадение одинаковым — для категорий без порядка. Порядковая учитывает расстояние между рангами. Интервальная работает с числами напрямую, а метрика отношений — когда важна не абсолютная разница, а относительная.
Метрику надо выбирать по типу шкалы, а не по величине результата. На одних и тех же данных разные метрики дают заметно разные значения, и подбор метрики ради красивого числа — подтасовка.
Трактовка альфы по Криппендорфу
| Значение α | Вывод |
|---|---|
| 0,80 и выше | данные надёжны |
| 0,667 — 0,80 | допустимы только предварительные выводы |
| ниже 0,667 | данные ненадёжны |
Пороги строже, чем у каппы: Криппендорф исходит из того, что на ненадёжных данных выводы строить нельзя.
Как обозначать пропуски
Пропуск — это объект, который конкретный эксперт не оценивал. Его можно обозначить дефисом, точкой или оставить пустую ячейку при вставке из Excel.
Объекты, у которых осталась всего одна оценка, в расчёт не идут: согласие определяется по паре, а пары там нет. Калькулятор показывает, сколько объектов выпало, — это не ошибка.