Открыть сервис

Алгоритмическая власть

Алгоритмическая власть — это форма социального и политического контроля, осуществляемая посредством использования алгоритмов, больших данных и систем искусственного интеллекта для автоматизированного принятия решений, управления поведением людей и распределения ресурсов. В отличие от традиционных форм власти (государственной, экономической, идеологической), алгоритмическая власть опирается на способность обрабатывать огромные массивы информации, выявлять закономерности и предсказывать действия индивидов, а также воздействовать на них через персонализированные рекомендации, рейтингование и автоматические санкции. Ключевыми субъектами этой власти являются, как правило, крупные технологические корпорации (платформы), а также государственные органы, внедряющие алгоритмические системы управления.

История возникновения и развития

Концепция алгоритмической власти стала активно обсуждаться в академической и публичной среде в 2010-х годах, хотя её предпосылки возникли значительно раньше. Её истоки лежат в развитии кибернетики середины XX века, теории игр и математического моделирования социальных процессов. Однако основным катализатором стало стремительное развитие интернета, цифровых платформ и технологий сбора данных (датафикации).

Этапы становления

  1. Эпоха веб-статистики и ранних рекомендательных систем (1990-е — начало 2000-х). На этом этапе алгоритмы использовались для простейшей фильтрации информации (например, поисковые системы, ранжирующие сайты по релевантности) и персонализации контента (рекомендации книг на Amazon или фильмов на Netflix). Власть алгоритмов была ограничена и сводилась к управлению вниманием пользователя.
  1. Эпоха социальных сетей и поведенческой рекламы (середина 2000-х — 2010-е). С появлением Facebook (продукт Meta, признанной экстремистской и запрещённой в РФ), Twitter (соцсеть X — заблокирована в РФ), YouTube и других платформ алгоритмы начали активно влиять на социальные связи, распространение новостей и формирование общественного мнения. Алгоритмы ленты новостей определяли, какую информацию увидит пользователь, а какую — нет. Это стало инструментом мягкого контроля над повесткой дня. Одновременно развивалась поведенческая реклама, основанная на профилировании пользователей.
  1. Эпоха «алгоритмического управления» (с середины 2010-х). Алгоритмы вышли за рамки информационной среды и начали непосредственно управлять физическими и социальными процессами. Примеры: системы кредитного скоринга, автоматизированное принятие решений в судебной системе (например, алгоритмы оценки риска рецидива преступлений), управление городским трафиком, системы «социального кредита» (в Китае), автоматическое модерирование контента и блокировка аккаунтов. На этом этапе власть становится не просто рекомендательной, а принудительной.

Механизмы и инструменты

Алгоритмическая власть реализуется через несколько ключевых механизмов, которые часто действуют в комплексе.

Сбор и анализ данных (датафикация)

Фундаментом алгоритмической власти является способность превращать любые действия человека (поисковые запросы, покупки, перемещения, социальные взаимодействия, биометрические показатели) в цифровые данные. Эти данные агрегируются, анализируются и используются для построения прогностических моделей. Чем больше данных, тем точнее алгоритм может предсказать поведение человека и тем эффективнее может на него влиять.

Профилирование и классификация

На основе собранных данных алгоритмы присваивают каждому человеку набор категорий (профилей): «надёжный заёмщик», «потенциальный нарушитель», «сторонник определённой политической партии», «целевая аудитория для товара X». Эти профили часто невидимы для самого человека, но определяют, какие возможности ему будут доступны (кредит, работа, контент) и какие ограничения будут наложены.

Рейтингование и скоринг

Один из самых мощных инструментов. Людям, объектам или действиям присваиваются числовые оценки (рейтинги, скоринговые баллы). Примеры: рейтинг водителя в сервисах такси, кредитный рейтинг, рейтинг продавца на маркетплейсе, рейтинг научной статьи по цитируемости. Высокий рейтинг открывает доступ к ресурсам и привилегиям, низкий — ограничивает или исключает.

Автоматизированное принятие решений

Алгоритмы самостоятельно принимают решения, которые ранее были прерогативой человека. Например, алгоритм может одобрить или отклонить заявку на кредит, заблокировать аккаунт пользователя за нарушение правил, назначить штраф за превышение скорости (на основе данных с камер), отобрать кандидата на собеседование.

Персонализация и «архитектура выбора»

Алгоритмы формируют среду, в которой человек принимает решения. Подстраивая ленту новостей, список рекомендаций или цены (динамическое ценообразование), алгоритмы направляют пользователя к определённому выбору, не лишая его формальной свободы. Этот метод часто называют «подталкиванием» (nudge).

Субъекты алгоритмической власти

Основными субъектами, обладающими алгоритмической властью, являются:

  • Технологические платформы (Big Tech): Google, Meta (признана экстремистской и запрещена в РФ), Amazon, Apple, Microsoft, а также российские компании (Яндекс, VK, Сбер). Они контролируют огромные массивы пользовательских данных и алгоритмы, которые формируют информационную и экономическую среду.
  • Государства: Многие государства, включая Россию, Китай, США, страны ЕС, активно внедряют алгоритмические системы в государственное управление, правоохранительную деятельность, здравоохранение и социальное обеспечение. В России примером является система распознавания лиц (например, в Москве), автоматизированная система выдачи штрафов с камер, а также системы мониторинга социальных сетей.
  • Финансовые институты: Банки, страховые компании, инвестиционные фонды используют алгоритмы для скоринга, управления рисками и автоматической торговли.

Последствия и критика

Алгоритмическая власть порождает ряд серьёзных проблем и является предметом активной критики.

Непрозрачность («чёрный ящик»)

Большинство алгоритмов, особенно основанных на глубоком обучении, непрозрачны. Даже их создатели не всегда могут объяснить, почему алгоритм принял то или иное решение. Это делает невозможным оспаривание решений и подрывает принципы справедливости и правовой определённости.

Дискриминация и предвзятость

Алгоритмы могут воспроизводить и усиливать существующие в обществе предрассудки (расовые, гендерные, социальные). Если исторические данные, на которых обучался алгоритм, содержат дискриминационные паттерны, алгоритм будет их тиражировать. Например, алгоритмы найма могут дискриминировать женщин, а алгоритмы кредитного скоринга — жителей бедных районов.

Усиление неравенства

Алгоритмическая власть часто концентрируется в руках узкой группы корпораций и государств, что ведёт к цифровому неравенству. Те, кто контролирует алгоритмы, получают колоссальные преимущества в доступе к информации, капиталу и влиянию.

Эрозия приватности и автономии

Постоянный сбор данных и профилирование подрывают личную автономию. Человек теряет контроль над своей информацией и становится объектом манипуляции. Алгоритмическое «подталкивание» может ограничивать свободу воли, формируя предсказуемое и управляемое поведение.

«Тирания рейтингов»

Стремление к высокому рейтингу может искажать поведение людей. Водители такси могут нарушать ПДД, чтобы не снизить рейтинг, учёные — гнаться за цитируемостью в ущерб качеству исследований, а авторы контента — подстраиваться под требования алгоритмов, а не под интересы аудитории.

Регулирование и противодействие

В ответ на вызовы алгоритмической власти в разных странах разрабатываются меры регулирования. В Европейском Союзе принят Акт об искусственном интеллекте (AI Act), который классифицирует алгоритмические системы по степени риска и вводит жёсткие требования к прозрачности и безопасности для систем высокого риска. В России также обсуждаются и вводятся нормы, касающиеся оборота данных, работы рекомендательных алгоритмов и использования технологий ИИ (например, Федеральный закон «О внесении изменений в Федеральный закон «Об информации, информационных технологиях и о защите информации»», обязывающий владельцев соцсетей информировать пользователей о работе рекомендательных алгоритмов).

Кроме того, развивается движение за алгоритмическую справедливость (algorithmic justice), которое требует аудита алгоритмов на предмет предвзятости, права на объяснение принятых решений и возможности человека контролировать свои данные.

Источники

  • Зубофф, Ш. «Эпоха надзорного капитализма».
  • Паскуале, Ф. «Чёрный ящик: секретная сила алгоритмов, управляющих миром».
  • О'Нил, К. «Оружие математического уничтожения: как большие данные увеличивают неравенство и угрожают демократии».
  • Доклад ЮНЕСКО «Рекомендация по этике искусственного интеллекта» (2021).
  • Текст Акта Европейского Союза об искусственном интеллекте (AI Act).
  • Федеральный закон РФ от 31.07.2023 № 406-ФЗ «О внесении изменений в Федеральный закон «Об информации, информационных технологиях и о защите информации»».

BFOmetr — база данных и аналитика по компаниям России.

На главную BFOmetr →