Кейсы
Профессия и обучение

Forest plot в метаанализе: как тренеру читать квадраты и ромб

На forest plot, или лесном графике, каждая строка обычно показывает результат отдельного исследования, а ниже может быть сводная оценка. Одна из ошибок - сразу посмотреть, с какой стороны находится ромб, и объявить метод победителем. Без названия исхода и шкалы такое чтение может перевернуть смысл результата.

Легенда графика: четыре ориентира

Квадрат обозначает оценку эффекта исследования; его площадь обычно отражает вес в расчёте. Горизонтальная линия показывает доверительный интервал. Ромб представляет сводную оценку и её интервал. Вертикальная линия соответствует отсутствию различия: для разности это обычно 0, для отношений - 1.
Принцип построения описан в главе 10 руководства Cochrane. Размер квадрата не является наградой за качество исследования, а узкий ромб сам по себе не устраняет ошибки вошедших работ. Сначала прочитайте обозначения именно этого рисунка: оформление может отличаться.

Слева не всегда плохо, справа не всегда хорошо

Учебная ситуация: тренер видит положительную разность и пишет клиенту, что программа увеличивает результат. Но на графике измерено время прохождения дистанции, где меньшее значение может быть желательным. Кроме того, разность вычислена как результат программы А минус результат Б.
Если А требует больше секунд, положительное число не означает преимущество А. Тренер возвращается к определению исхода и порядку сравнения. В кратком выводе указывает не просто «эффект положительный», а конкретно: какая группа и по какому показателю отличается.
Все обстоятельства здесь условные. Сценарий показывает, почему подписи оси важнее привычки читать правую сторону как успех. Для силы, времени, боли и числа нежелательных событий направление желательного изменения может быть разным.

Ромб не пересёк линию - но насколько полезна разница?

Во втором вымышленном разборе метаанализ даёт разность средних 1,5 кг с интервалом от 0,5 до 2,5 кг в силовом тесте. Тренер хочет обещать клиенту ровно 1,5 кг дополнительного прогресса после замены программы.
Даже в этой условной картине сводное число не является прогнозом для отдельного человека. Нужно выяснить, кто участвовал, сколько длилась работа и что было в группе сравнения. Затем оценить, имеет ли такая величина практический смысл для поставленной задачи и насколько она соотносится с точностью теста.
Если результат выражен не в килограммах, а стандартизированной разностью, приписывать ему килограммы нельзя. Различие между статистическим сигналом и практической пользой сохраняется и в метаанализе. Числа в этом эпизоде придуманы для объяснения, а не взяты из исследования EVOTREN.

Не считайте исследования простым голосованием

Фраза «семь квадратов справа, три слева» не заменяет анализ. Строки могут иметь разную точность и вес; часть интервалов может быть широкой. Посмотрите на размер и направление оценок, а затем прочитайте, почему авторы сочли их объединение оправданным.
Если исследования заметно различаются по участникам или программам, один средний результат может скрывать важные различия. График служит входом в чтение обзора, а не заменой разделов методов и ограничений. Непонятные интервалы стоит разобрать отдельно: что показывает доверительный интервал.

Как сформулировать вывод без лишнего обещания

Вместо «ромб доказал лучший метод» запишите: что сравнивали, какой исход измеряли, в каких единицах выражен эффект и какие ограничения мешают переносу на клиента. Например: «В этих работах оценивали такой-то показатель у такой-то группы; величина различия небольшая, применимость к нашему случаю нужно проверить». Это форма аккуратной заметки, а не готовый вывод о конкретной статье.
Перед изменением программы вернитесь к полному тексту. Материал о чтении исследования тренером поможет связать рисунок с дизайном работы. Если доступны только скриншот и эмоциональный комментарий, оснований для уверенного назначения ещё недостаточно.