Внешняя валидность

Внешняя валидность — это свойство экспериментального исследования или теста, отражающее степень, в которой его результаты могут быть обобщены (генерализованы) на другие ситуации, популяции, временные периоды и условия, отличные от тех, в которых проводилось исследование. Внешняя валидность является ключевым критерием качества научного исследования наряду с внутренней валидностью, конструктной валидностью и статистической значимостью. Высокая внешняя валидность означает, что выводы, полученные в искусственных или ограниченных условиях эксперимента, применимы к реальным жизненным ситуациям.

История понятия

Термин «внешняя валидность» был введён в научный обиход американским психологом Дональдом Кэмпбеллом в 1957 году в статье «Факторы, влияющие на валидность экспериментов в социальных условиях». Кэмпбелл, совместно с Джулианом Стэнли, разработал классификацию угроз валидности, которая стала основой для методологии экспериментальных исследований в психологии, социологии, медицине и педагогике. В 1966 году вышла их совместная работа «Экспериментальные и квазиэкспериментальные планы для исследований», где внешняя валидность была впервые систематически описана как отдельный аспект.

В 1970-е — 1980-е годы концепция получила развитие в работах Томаса Кука и Дональда Кэмпбелла, которые выделили четыре основных типа валидности: внутреннюю, внешнюю, конструктную и статистическую. В российской науке понятие активно используется с 1990-х годов, преимущественно в экспериментальной психологии и социологии.

Отличие от внутренней валидности

Внутренняя валидность оценивает, насколько корректно установлена причинно-следственная связь между независимой и зависимой переменными в рамках самого эксперимента. Внешняя валидность, напротив, касается возможности переноса этих выводов за пределы лаборатории. Исследование может обладать высокой внутренней валидностью (например, строго контролируемый лабораторный эксперимент), но низкой внешней валидностью, если условия эксперимента сильно отличаются от реальной жизни. И наоборот, полевое исследование может иметь высокую внешнюю валидность, но страдать от низкой внутренней из-за множества неконтролируемых факторов.

Угрозы внешней валидности

Кэмпбелл и Стэнли выделили несколько факторов, которые снижают возможность обобщения результатов:

Взаимодействие отбора и экспериментального воздействия

Эффект, при котором результаты справедливы только для той группы людей, которая участвовала в эксперименте, но не для других популяций. Например, если исследование проводилось только на студентах-психологах, его выводы могут не распространяться на людей старшего возраста или другие профессиональные группы.

Взаимодействие условий эксперимента и воздействия

Результаты могут зависеть от специфических условий проведения (освещение, время суток, оборудование). В других условиях эффект может быть иным или отсутствовать.

Эффект тестирования (претест-посттест)

Предварительное тестирование может изменить реакцию испытуемых на воздействие. В реальной жизни люди не проходят предварительное тестирование, поэтому результаты могут быть нереалистичными.

Взаимодействие эффектов множественных воздействий

Если в эксперименте последовательно применяются несколько воздействий, эффект последующего может быть искажён предыдущим. В реальности такие последовательности могут не встречаться.

Эффект Хоторна

Изменение поведения испытуемых из-за осознания того, что они участвуют в эксперименте. В реальной жизни люди не знают, что за ними наблюдают.

Эффект Розенталя (эффект экспериментатора)

Ожидания исследователя могут неосознанно влиять на поведение испытуемых, что затрудняет перенос результатов на другие ситуации, где экспериментатор иной.

Способы повышения внешней валидности

Репрезентативная выборка

Использование случайной или стратифицированной выборки, которая отражает структуру генеральной совокупности. Чем более репрезентативна выборка, тем выше внешняя валидность.

Полевые эксперименты

Проведение исследования в естественных условиях (на работе, в школе, в общественных местах) вместо лаборатории. Это снижает искусственность ситуации.

Репликация (повторение)

Повторение эксперимента на разных выборках, в разных местах, разными исследователями. Если результаты воспроизводятся, внешняя валидность высока.

Мультиметодный подход

Использование различных методов измерения зависимой переменной и различных способов реализации независимой переменной. Это позволяет убедиться, что эффект не привязан к конкретному инструменту.

Учёт контекстуальных факторов

Документирование и анализ всех условий эксперимента (время, место, характеристики испытуемых, инструкции) для оценки границ обобщения.

Внешняя валидность в разных областях

В психологии

В психологических исследованиях проблема внешней валидности особенно остра из-за так называемого «кризиса репликации» (2010-е годы). Многие эксперименты, проведённые на студентах западных университетов (WEIRD — Western, Educated, Industrialized, Rich, Democratic), не воспроизводятся на других популяциях. Например, знаменитый Стэнфордский тюремный эксперимент Филипа Зимбардо (1971) критикуется за низкую внешнюю валидность, так как его результаты не удалось повторить в других условиях.

В медицине

В клинических исследованиях внешняя валидность определяет, насколько результаты рандомизированных контролируемых испытаний (РКИ) применимы к реальным пациентам. Угрозы возникают из-за строгих критериев включения (исключение пожилых, детей, беременных, людей с сопутствующими заболеваниями). Для повышения внешней валидности используются прагматические РКИ, которые проводятся в условиях, приближенных к реальной клинической практике.

В социологии

В социологических опросах внешняя валидность зависит от качества выборки и метода сбора данных. Например, телефонные опросы могут давать смещённые результаты из-за охвата только тех, у кого есть телефон и кто готов отвечать. Онлайн-опросы исключают людей без доступа в интернет.

В педагогике

Внешняя валидность педагогических экспериментов ограничена различиями в учебных программах, квалификации учителей, социально-экономическом статусе учащихся. Результаты, полученные в одной школе, могут не воспроизводиться в другой.

Критика концепции

Некоторые методологи (например, Ли Кронбах) утверждали, что стремление к высокой внешней валидности часто вступает в противоречие с внутренней валидностью. Полный контроль над переменными (высокая внутренняя валидность) обычно достигается за счёт искусственности условий, что снижает внешнюю валидность. Компромисс между ними — одна из центральных проблем экспериментального дизайна.

В 2010-е годы в рамках «движения за открытую науку» была предложена концепция «экологической валидности» как более узкого аспекта внешней валидности, фокусирующегося на соответствии условий эксперимента реальной среде.

Примеры

Пример высокой внешней валидности

Исследование эффективности вакцины от COVID-19, проведённое на выборке из 40 000 человек разного возраста, пола, этнической принадлежности и с различными сопутствующими заболеваниями, в реальных условиях массовой вакцинации. Результаты такого исследования можно обобщить на всё население страны.

Пример низкой внешней валидности

Лабораторный эксперимент по изучению влияния шума на внимание, в котором участвовали 20 студентов-добровольцев, сидящих в звукоизолированной кабине и слушающих белый шум через наушники. Результаты этого эксперимента нельзя распространить на работу водителя в условиях реального дорожного шума, так как условия лаборатории не соответствуют реальной ситуации.

Заключение

Внешняя валидность остаётся фундаментальным критерием качества научного знания. Её оценка требует от исследователя не только статистической грамотности, но и понимания контекста, в котором будут применяться результаты. В современной науке всё большее внимание уделяется репликации исследований, открытым данным и прагматическим дизайнам, что позволяет повысить внешнюю валидность и сделать научные выводы более надёжными для практического использования.

Источники:

• Campbell, D. T., & Stanley, J. C. (1966). Experimental and Quasi-Experimental Designs for Research.
• Cook, T. D., & Campbell, D. T. (1979). Quasi-Experimentation: Design and Analysis Issues for Field Settings.
• Шадриков В. Д. (2004). Психология деятельности и способности человека.
• Корнилова Т. В. (2010). Экспериментальная психология: теория и методы.
• Open Science Collaboration. (2015). Estimating the reproducibility of psychological science. Science, 349(6251).