Внутриклассовая корреляция (ICC) — онлайн-калькулятор
Внутриклассовая корреляция (ICC) измеряет согласованность экспертов, когда оценки — числа: баллы, секунды, миллиметры. Каппа здесь не подходит, она работает с категориями; конкордация — с рангами. ICC отвечает на вопрос, какая доля разброса объясняется реальными различиями между объектами, а какая — расхождением самих экспертов. Заполните таблицу, где строка это объект, а столбцы эксперты, и калькулятор посчитает все формы ICC с доверительным интервалом.
Согласованность экспертов, когда оценки — числа (баллы, миллиметры, секунды, градусы). Показывает, какая доля разброса объясняется реальными различиями между объектами, а какая — расхождением экспертов. Для категорий берут каппу Коэна, для мест-рангов — конкордацию Кендалла.
Обратите внимание на порядок: здесь строка — объект оценки (испытуемый, работа, попытка), а столбец — эксперт. Это обратный порядок по сравнению с конкордацией Кендалла. Если таблицу развернуть, коэффициент выйдет неверным.
Эксперт — тот, кто оцениваетТот, кто выставляет оценку: судья, преподаватель, врач, измеряющий. Каждому эксперту — свой столбец.
Объект — то, что оцениваютТот, кого оценивают: испытуемый, спортсмен, работа, попытка, снимок. Каждому объекту — своя строка, и оценить его должны все эксперты.
| Объект \ Эксперт | ||||
|---|---|---|---|---|
Названия можно переписать — они попадут в результат и в таблицу для диплома. Если столбцов много, таблица прокручивается вбок. Данные из Excel вставляются целиком: скопируйте диапазон и вставьте в первую ячейку.
Выбор меняет сам коэффициент, поэтому модель обязательно указывают в работе: «ICC(2,1) = …».
Ничего не понятно или не хотите разбираться?
Закажите расчёт у эксперта: он подберёт метод и модель под вашу тему, посчитает, напишет готовый вывод и оформит таблицы по ГОСТ. Останется вставить в работу.
Заказать расчёт у экспертаКогда применять ICC
- Эксперты ставят числовые оценки, и важна не только их близость, но и абсолютное совпадение.
- Нужно доказать надёжность измерения: два специалиста, измеряя одно и то же, получают одинаковый результат.
- Проверяется воспроизводимость: один и тот же человек измеряет дважды.
- Если оценки категориальные — берите каппу. Если это ранги — коэффициент конкордации.
Какую форму ICC выбрать
Форм шесть, и выбор определяется схемой исследования. Односторонняя модель — когда каждого объекта оценивали разные эксперты. Двусторонняя случайная — когда эксперты одни и те же, но вывод обобщается на других специалистов. Двусторонняя смешанная — когда важны именно эти эксперты и обобщать не нужно.
Второе деление: надёжность оценки одного эксперта или среднего по нескольким. Среднее всегда надёжнее, поэтому формы «,k» дают более высокие значения. Указывать в работе нужно ту форму, которая соответствует вашей схеме, а не самую красивую.
Трактовка ICC по Koo и Li
| Значение ICC | Надёжность |
|---|---|
| меньше 0,50 | низкая |
| 0,50 — 0,75 | средняя |
| 0,75 — 0,90 | хорошая |
| больше 0,90 | отличная |
Для ответственных измерений обычно требуют ICC не ниже 0,75.
Систематическое расхождение экспертов
Бывает, что эксперты идеально согласованы по порядку, но один стабильно ставит выше остальных. Такое смещение видно по отдельному F-критерию для экспертов, и калькулятор о нём предупреждает.
Это важное различие: односторонняя и двусторонняя случайная модели считают такое смещение частью ошибки и снижают ICC, а смешанная — нет. Поэтому на одних и тех же данных формы дают разные числа.