Человек обычно понимает, поднимает ли он штангу или занимается на велотренажёре. Поэтому требование скрыть от него сам вид занятия может оказаться невыполнимым. Но из этого не следует, что проверять защиту от предвзятости бессмысленно. Вопрос нужно уточнить: кто знает назначенную группу и может ли это знание повлиять на исследуемый результат?
Сначала разделите роли
В Cochrane Handbook, разделах 8.4.3 и 8.6, ослепление участников и сотрудников, проводящих вмешательство, рассматривается отдельно от ослепления оценщиков. Обозначение «двойное слепое» само по себе недостаточно: нужно выяснить конкретные роли.
Скрытие будущего назначения до распределения — другая процедура. Она относится к организации рандомизации. Ослепление во время исследования касается знания уже назначенного условия. Эти меры не заменяют друг друга.
Сценарий: студент отбрасывает сравнение двух видов занятий
В вымышленном учебном разборе Денис ищет исследование силовых и велосипедных тренировок. Он обнаруживает, что участники знали свою программу, и пишет в конспекте: «Работа бесполезна, нет двойного ослепления». Его опасение понятно: люди могут ожидать от понравившегося занятия большего эффекта.
Но Денис пока не прочитал, как измеряли результат. Он возвращается к методам и отдельно выписывает, кто проводил итоговый тест, видел ли этот сотрудник распределение и были ли одинаковыми инструкции. Если сведения отсутствуют, так и отмечает. Вместо безусловного отказа получается конкретный вопрос к достоверности результата.
Например, при оценке субъективного удовольствия участник сам сообщает исход и знает свой формат. При оценке видеозаписи движения может быть возможна работа другого оценщика без подписи группы. Это разные ситуации, а не повод назначить всем результатам одинаковую оценку. История Дениса вымышлена и не описывает опубликованный эксперимент.
Группа известна оценщику: что именно могло измениться
Другой авторский пример: инструктор сравнивает два учебных способа объяснения приседа. Он сам обучал участников и затем считает по видео число повторений, отвечающих критериям. На спорном повторе трудно отделить решение по движению от ожидания, что любимый способ объяснения сработал лучше.
В таком разборе полезнее описать спорную процедуру, чем обвинять инструктора в нечестности. Можно заранее задать критерии повторения, убрать из файлов явные обозначения способа обучения и поручить оценку человеку, который не проводил занятия. При этом одежда, звук или комментарии в ролике могут раскрыть условие: переименование файла ещё не доказывает успешное ослепление.
Если независимая оценка не организована, это ограничение сохраняют в выводе. Слово «объективно» рядом с числом повторений не устраняет решения, которые человек принимал при подсчёте.
Отсутствие ослепления не равно доказанному искажению
Cochrane связывает риск с тем, могло ли знание назначения привести к значимым отклонениям от вмешательства или повлиять на измерение. Возможность такого влияния зависит от исхода и процедуры. Нельзя автоматически вычислить поправку к результату только по наличию или отсутствию слова blinded.
В заметке о конкретной статье различайте описанный факт и предположение: «оценщик знал группу» — информация о методе; «из-за этого разница завышена на треть» — отдельное утверждение, которому нужны данные. Нераскрытая методика также не даёт права дописать за авторов, что оценщик наверняка был независимым.
Как записать вывод без ярлыка «хорошая» или «плохая» статья
Для рассматриваемого исхода назовите людей, имевших доступ к назначению, и способ измерения. Затем укажите конкретную уязвимость: например, оценка спорных повторений тем же инструктором. Если авторы описали защиту, запишите её, не превращая в гарантию отсутствия всех ошибок.
Такой комментарий дополняет разбор научной статьи. Он не подменяет проверку размера выборки, выбывания и того, соответствует ли изученная группа вашим клиентам. Здесь оценивается один механизм возможного искажения, а не вся работа одним словом.