Pre-registration¶

Pre-registration (с англ. — «предварительная регистрация») — это методология научного исследования, заключающаяся в публичной фиксации плана эксперимента, гипотез, методов сбора и анализа данных до начала их сбора. Pre-registration направлен на повышение прозрачности и воспроизводимости научных результатов, а также на снижение влияния когнитивных искажений, таких как p-hacking (подгонка данных под статистическую значимость) и HARKing (формулирование гипотез после получения результатов). Процедура применяется преимущественно в экспериментальных науках, включая психологию, медицину, экономику и биологию.

¶История

¶Предпосылки возникновения

Кризис воспроизводимости, активно обсуждаемый в научном сообществе с начала 2010-х годов, выявил, что значительная часть опубликованных результатов не может быть воспроизведена независимыми исследователями. В психологии, по данным проекта Reproducibility Project (2015), лишь 39 из 100 проверенных экспериментов дали сопоставимые результаты. Одной из причин названа гибкость исследовательских практик: возможность менять гипотезы, исключать «неудобные» данные или подбирать статистические тесты после ознакомления с результатами.

¶Развитие практики

Идея предварительной регистрации не нова: в клинических исследованиях регистрация протоколов (ClinicalTrials.gov) стала обязательной в США с 2000 года (закон FDA Modernization Act). В социальных и поведенческих науках движение за pre-registration набрало силу после публикаций манифеста «Open Science Collaboration» (2012) и статей Брайана Носека (Brian Nosek) и соавторов. В 2013 году платформа Open Science Framework (OSF) запустила сервис для pre-registration, а в 2018 году журнал «Nature Human Behaviour» ввёл обязательную регистрацию для некоторых типов статей.

¶Виды pre-registration

¶Стандартная предварительная регистрация

Исследователь заполняет шаблон, в котором указывает:

исследовательский вопрос и гипотезы;
дизайн исследования (экспериментальный, квазиэкспериментальный, наблюдательный);
план сбора данных (выборка, критерии включения/исключения, процедура);
план статистического анализа (критерии, методы коррекции множественных сравнений, правила исключения выбросов).

Документ фиксируется с временной меткой (timestamp) и может быть опубликован сразу или после эмбарго (например, до публикации статьи).

¶Зарегистрированный отчёт (Registered Report)

Формат публикации, при котором план исследования рецензируется и принимается к публикации до сбора данных. После одобрения протокола журнал гарантирует публикацию независимо от результатов (при условии соблюдения методологии). Этот подход устраняет «публикационное смещение» (publication bias) — тенденцию издавать только положительные или значимые результаты.

¶Пре-анализ (pre-analysis plan)

Разновидность pre-registration, распространённая в экономике и политологии. Включает детальное описание эконометрических моделей, спецификаций регрессий и методов обработки пропущенных данных. Часто используется в рандомизированных контролируемых испытаниях (RCT), проводимых Всемирным банком и другими организациями.

¶Процедура

¶Выбор платформы

Наиболее популярные реестры:

Open Science Framework (OSF) — универсальная платформа, поддерживающая любые дисциплины. Позволяет создавать приватные или публичные записи, назначать эмбарго.
AsPredicted — специализированный сервис для психологии и социальных наук, разработанный в Университете Пенсильвании. Отличается простым интерфейсом и шаблонами.
ClinicalTrials.gov — обязательный реестр для клинических испытаний в США и многих других странах.
PROSPERO — реестр систематических обзоров (в основном медицинских).

¶Заполнение формы

Исследователь отвечает на серию вопросов, включая:

«Каковы основные гипотезы?»;
«Каковы критерии включения участников?»;
«Какие статистические тесты будут использованы?»;
«Будет ли проводиться множественная проверка гипотез и как она будет скорректирована?».

После заполнения документ получает уникальный идентификатор (DOI или ID), который указывается в публикации.

¶Контроль отклонений

После сбора данных исследователь обязан сообщить о любых отклонениях от зарегистрированного плана (например, изменение метода анализа или исключение переменных). Отклонения не запрещены, но должны быть явно описаны и обоснованы, чтобы читатель мог оценить их влияние на достоверность выводов.

¶Преимущества и ограничения

¶Преимущества

Повышение воспроизводимости: фиксация плана снижает вероятность «подгонки» результатов.
Снижение публикационного смещения: зарегистрированные отчёты публикуются независимо от значимости результатов.
Прозрачность: читатели и рецензенты могут видеть, какие гипотезы были априорными, а какие — постфактум.
Доверие к науке: практика способствует восстановлению доверия к научным выводам, особенно в условиях кризиса воспроизводимости.

¶Ограничения и критика

Жёсткость: pre-registration может ограничивать исследовательскую гибкость, особенно в пилотных или разведочных исследованиях.
Сложность для качественных методов: в качественных и интерпретативных исследованиях (например, в антропологии или истории) предварительная регистрация часто не применима.
Формализм: некоторые исследователи регистрируют планы, но затем игнорируют их, не указывая отклонений, что сводит на нет цель процедуры.
Дополнительная нагрузка: заполнение детальных форм требует времени и организационных усилий, особенно для начинающих учёных.
Недостаточный охват: по состоянию на 2023 год, лишь небольшая часть исследований в социальных науках (менее 10 %) проходит pre-registration, хотя доля растёт.

¶Применение в России

В российской научной практике pre-registration пока не является массовым явлением. Отдельные исследователи и группы (например, в Лаборатории когнитивных исследований НИУ ВШЭ, в Институте психологии РАН) используют платформы OSF и AsPredicted, но обязательных требований со стороны российских журналов и фондов (РНФ, РФФИ) нет. Исключение составляют клинические испытания, которые регистрируются в международных реестрах (ClinicalTrials.gov) или в Едином государственном реестре лекарственных средств Минздрава РФ. В 2021 году журнал «Психология. Журнал Высшей школы экономики» ввёл возможность публикации зарегистрированных отчётов, став одним из первых российских изданий, поддерживающих этот формат.

¶Интересные факты

Первый зарегистрированный отчёт в психологии был опубликован в 2014 году в журнале «Cortex» (исследование о влиянии стресса на принятие решений).
Платформа OSF (Open Science Framework) была создана в 2011 году Центром открытой науки (Center for Open Science) в Шарлоттсвилле, штат Виргиния, США.
В 2020 году, в связи с пандемией COVID-19, резко выросло число pre-registration в медицинских и эпидемиологических исследованиях — только за первые шесть месяцев было зарегистрировано более 2000 протоколов клинических испытаний вакцин и методов лечения.
Некоторые журналы (например, «Psychological Science») начали требовать pre-registration для всех статей, содержащих экспериментальные данные, с 2022 года.

¶Источники

Nosek B.A., Ebersole C.R., DeHaven A.C., Mellor D.T. (2018). The preregistration revolution. Proceedings of the National Academy of Sciences, 115(11), 2600–2606.
Open Science Collaboration. (2015). Estimating the reproducibility of psychological science. Science, 349(6251), aac4716.
Chambers C.D. (2019). The registered report: A new publishing initiative at Cortex. Cortex, 49(3), 609–610.
ClinicalTrials.gov. (2023). About ClinicalTrials.gov. U.S. National Library of Medicine.
Психология. Журнал Высшей школы экономики. (2021). Правила для авторов: зарегистрированные отчёты.