ICC, или внутриклассовый коэффициент корреляции, используют для оценки надёжности измерений. Но запись «ICC высокий» ещё не отвечает на вопрос, можно ли повторить процедуру одному тренеру. В руководстве Koo и Li форма коэффициента определяется моделью, типом измерения и тем, оценивают ли согласованность или абсолютное согласие.
Что искать рядом с числом ICC
Single measurement относится к отдельному измерению; mean of k measurements — к среднему нескольких. Consistency допускает систематическую разницу оценок, а absolute agreement учитывает совпадение самих значений. Модель также задаёт, к каким оценщикам относится вывод. Эти характеристики нельзя заменить одним ярлыком «хорошая надёжность».
Марина сокращает три измерения до одного
Представим вымышленную Марину. Она нашла публикацию с высоким ICC для среднего трёх измерений. В зале на каждого клиента мало времени, поэтому Марина хочет делать только одну попытку. Ей кажется, что название прибора и теста совпадают, значит, можно оставить прежний коэффициент в описании своей процедуры.
Однако результат mean of three описывает усреднённую оценку, а не одиночную. Марина сохраняет пометку «среднее трёх» рядом с выписанным ICC и ищет в статье отдельный результат для single measurement. Если его нет, она не приписывает своей сокращённой процедуре опубликованную надёжность.
Она может пересмотреть вывод, если авторы предоставят приложение с результатом для одного измерения и описанием той же процедуры. Само сокращение времени работы таких данных не создаёт. Этот пример не позволяет назвать конкретную ошибку прибора в сантиметрах или секундах: для неё нужны соответствующие сведения, а не только ICC.
Порядок клиентов одинаковый, цифры разные
Другой вымышленный пример: Денис и коллега оценивают трёх людей в условных единицах. У Дениса получились 20, 35 и 50, у коллеги 24, 39 и 54. Порядок людей совпал, но каждая вторая оценка больше на 4. Денис переживает, что после передачи клиентов чужие записи будут выглядеть как внезапное изменение результата.
Именно здесь различие consistency и absolute agreement имеет практический смысл. Сохранённая согласованность оценок не равна совпадению чисел. Денис проверяет, какое определение использовано в исследовании, и сопоставляет инструкции двух оценщиков. Он не вычитает 4 из будущих записей: постоянный сдвиг придуман для этого примера, а не установлен для его реального измерения.
Если отдельная проверка позже покажет воспроизводимое смещение и обоснованный способ коррекции, вопрос сопоставимости можно рассмотреть заново. Пока Денис указывает, кто и по какой процедуре получил значение. Совпавший порядок трёх людей сам по себе не разрешает объединить их числа в один ряд наблюдений.
В статье оставили только коэффициент
Когда модель, тип и определение ICC не указаны, смысл результата остаётся неполным. Ищите их в разделе методов, подписи к таблице или приложении; учитывайте также доверительный интервал. Уточнённая форма помогает понять результат исследования, но не подтверждает автоматически другой прибор, других оценщиков или изменённый протокол.
После формы ICC стоит прочитать, кого измеряли и как организовали повторные попытки. Эти вопросы разобраны в материале «Как тренеру читать научную статью». Так опубликованный коэффициент остаётся связан с конкретным исследованием, а не превращается в универсальную характеристику любого теста с похожим названием.