Илья в вымышленном редакционном примере готовит для коллег карточку «метод работает». В основном расчёте обзора он видит благоприятный итог. Но в приложении авторы повторили расчёт без двух исследований, чьё соответствие критериям включения осталось неясным. После исключения вывод стал менее определённым. Илья решает, что один из расчётов обязательно неправильный, и хочет оставить только тот, который подтверждает его прежнее мнение.
Два расчёта могут проверять одно спорное решение
Анализ чувствительности повторяет основной расчёт при альтернативных решениях или предположениях. Его вопрос — насколько итог зависит от того, как был выполнен обзор. В главе 10 Cochrane Handbook, разделе 10.14, среди примеров есть включение и исключение работ с неясной пригодностью.
Такой анализ не предназначен для выбора самой привлекательной цифры. Если вывод сильно зависит от спорного решения, это основание осторожнее его интерпретировать и, по возможности, прояснить недостающие сведения. Если результат устойчив, это укрепляет уверенность именно относительно проверенных альтернатив, но не отменяет всех остальных ограничений обзора.
Что Илья меняет в своей карточке
Вместо спора «какой расчёт настоящий» Илья сначала выясняет, почему две работы исключили. В его примере причина связана с критериями обзора, а не с тем, что исследователям не понравился результат. Затем он записывает оба итога рядом и смотрит, изменились ли направление эффекта, его величина и неопределённость.
В карточке появляется конкретное ограничение: заключение зависит от включения двух работ, по которым не хватает сведений. Илья не пишет ни «метод окончательно доказан», ни «авторов поймали на подделке». Если авторы позже уточнят пригодность этих исследований и обновят анализ, он вернётся к карточке и пересмотрит формулировку. Это учебная история о чтении обзора, а не описание реального исследования или рекомендация определённой тренировочной методики.
Три вопроса к приложению обзора
Что именно авторы изменили по сравнению с основным анализом? Почему эта альтернатива заслуживает проверки? Как изменился содержательный вывод, а не только обозначение статистической значимости? Если в тексте сказано лишь «результаты устойчивы», ищите таблицу или приложение с самим сравнением: короткая фраза не показывает, какие варианты действительно проверяли.
До оценки устойчивости нужно понимать, для каких участников и какого результата получен итог. Разбор основного вопроса научной статьи помогает не перенести даже устойчивый результат на другую аудиторию. А самостоятельный пересчёт метаанализа требует статистической подготовки; чтение этого раздела её не заменяет.