Кейсы
Профессия и обучение

Рандомизация в исследовании тренировок: зачем она нужна

Рандомизация распределяет участников между исследуемыми условиями с использованием случайного механизма. Её задача - не дать предпочтениям исследователя или прогнозу результата определять, кто получит какую программу. Это не то же самое, что случайно набрать людей из населения: набор участников и распределение уже набранных людей - разные этапы.

Добровольный выбор программы незаметно меняет вопрос

Вымышленная ситуация: в зале сравнили утренние самостоятельные занятия и вечерние занятия с тренером. Каждый выбрал удобный вариант. Через несколько недель вечерняя группа показала больший прирост в тесте, и управляющий хочет рекламировать сопровождение как причину разницы. Тренер опасается, что от него теперь будут ждать такую же прибавку у любого посетителя.
Но вместе с форматом люди выбрали расписание и условия участия. Группы могут различаться исходным опытом, доступным временем и мотивацией. Из одного итогового сравнения нельзя отделить вклад сопровождения от этих различий. Проверка исходной таблицы полезна, но совпадение нескольких измеренных характеристик ещё не исключает всех других различий.
Тренер описывает результат ограниченно: «В наблюдавшихся группах получились разные изменения; участники выбирали формат сами». Если его вопрос именно о влиянии сопровождения, при поиске следующей работы он обращает внимание на способ распределения. Это уточнение научного вопроса, а не предложение лишать реальных клиентов права выбрать услугу.

Случайная последовательность и её скрытие решают разные задачи

В разделах 8.3–8.3.2 Cochrane Handbook отдельно рассматриваются создание случайной последовательности и скрытие будущих назначений до включения участника. Если сотрудник заранее знает следующую группу, он может сознательно или невольно изменить порядок включения людей. Само наличие компьютерного списка тогда не обеспечивает защиту распределения.
Поэтому в методах ищут не только слово random, но и объяснение, кто создавал последовательность, кто включал людей и когда становилось известно назначение. Чередование «первый в А, второй в Б» предсказуемо и не равнозначно случайному распределению. Скрытие назначений до распределения также не равно ослеплению при последующей оценке результатов.

Студент принял порядок записи за рандомизацию

Другой учебный эпизод: студент готовит обзор сравнения двух разминок. В описании написано, что записавшихся распределяли по очереди: нечётные номера в первую группу, чётные во вторую. Он называет работу рандомизированной, потому что участники не выбирали разминку сами.
Ошибка в том, что отсутствие самостоятельного выбора ещё не делает процедуру случайной. Следующее назначение известно заранее. Например, человек, оформляющий запись, может предложить знакомому подождать один номер, чтобы попасть в предпочитаемую группу. Это иллюстрация уязвимости процедуры, а не утверждение, что авторы конкретного исследования так поступили.
Студент исправляет карточку источника: «Распределение чередованием, не случайная последовательность». Он не выбрасывает работу только за непривычный термин, но перестаёт приписывать ей защиту, которой описанный метод не даёт. При дальнейшем поиске в PubMed фильтр типа публикации использует для отбора, а детали всё равно читает в полном тексте.

Если группы после рандомизации немного различаются

Случайное распределение не обязано давать совершенно одинаковый возраст, силу или тренировочный стаж в каждой небольшой выборке. Различия, совместимые со случайностью, сами по себе не доказывают нарушение. Но большие или подозрительно систематические несоответствия требуют внимательнее прочитать процедуру и объяснение авторов.
Не объявляйте исследование надёжным только по аббревиатуре РКИ. После распределения участники могли выбывать, менять программу или проходить неодинаковое тестирование. Рандомизация защищает определённый этап, а не автоматически все последующие решения.

Что вынести в заметку тренера

Для конкретной работы запишите: «Участников распределяли таким-то способом; будущая группа была известна или скрыта до включения; что происходило после распределения». Если статья не сообщает деталь, отметьте отсутствие информации, не подставляя ожидаемую процедуру.
Эта запись дополняет проверку участников, сравнения и исходов. Она помогает понять, почему найденная разница может или не может убедительно отвечать на вопрос о влиянии тренировочного метода.

Вопросы о случайном распределении

Случайность означает хаотичные тренировки? Нет. Случайным может быть назначение в группу, а её программа при этом подробно задана.
Если людей случайно пригласили, исследование уже рандомизированное? Нет. Важно, как затем назначали исследуемые условия.
Наблюдательная работа не имеет ценности? Имеет, но её возможности и ограничения другие. Не нужно переименовывать её в эксперимент, чтобы использовать для подходящего вопроса.