Распределение по Парето

Распределение по Парето (также известно как распределение Парето, закон Парето или принцип 80/20) — это непрерывное вероятностное распределение, используемое для моделирования явлений, в которых небольшая доля событий или объектов объясняет большую часть результатов. Впервые описано итальянским экономистом и социологом Вильфредо Парето в конце XIX века на основе наблюдений за распределением богатства в обществе.

История

Вильфредо Парето в 1896 году в работе «Курс политической экономии» (итал. Corso di economia politica) проанализировал данные о распределении доходов в Италии, Англии, Франции и других странах. Он обнаружил, что примерно 20 % населения владеют 80 % богатства, причём эта закономерность повторялась в разных странах и в разные времена. Парето вывел математическую формулу, описывающую это распределение: \( P(X > x) = (x_m / x)^\alpha \), где \( x_m \) — минимальное значение, а \( \alpha \) — параметр формы (так называемый «индекс Парето»).

Впоследствии распределение было обобщено и адаптировано для других областей, включая физику, биологию, информатику и социологию. В 1940-х годах американский экономист Джозеф Джуран популяризировал принцип 80/20 в контексте управления качеством, назвав его «принципом Парето».

Математическое определение

Распределение Парето задаётся двумя параметрами: минимальным значением \( x_m > 0 \) и параметром формы \( \alpha > 0 \). Функция плотности вероятности (PDF) имеет вид:

\[ f(x) = \frac{\alpha x_m^\alpha}{x^{\alpha+1}}, \quad x \geq x_m. \]

Функция распределения (CDF):

\[ F(x) = 1 - \left( \frac{x_m}{x} \right)^\alpha, \quad x \geq x_m. \]

Математическое ожидание существует только при \( \alpha > 1 \) и равно \( \frac{\alpha x_m}{\alpha - 1} \). Дисперсия конечна при \( \alpha > 2 \). При \( \alpha \leq 1 \) распределение имеет бесконечное среднее, что характерно для «тяжёлых хвостов».

Свойства

• Тяжёлый хвост: вероятность экстремально больших значений убывает медленно (степенным образом), что отличает распределение Парето от экспоненциального или нормального.
• Масштабная инвариантность: если \( X \) подчиняется распределению Парето, то \( cX \) также подчиняется распределению Парето с тем же \( \alpha \).
• Принцип 80/20: при \( \alpha \approx 1.16 \) доля верхних 20 % значений составляет 80 % от общего объёма. Однако в общем случае соотношение зависит от \( \alpha \): доля верхних \( p \) процентов равна \( p^{(\alpha-1)/\alpha} \).

Классификация и варианты

Двухпараметрическое распределение Парето (тип I)

Классическая форма, описанная выше. Используется для моделирования доходов, размеров городов, частот слов.

Обобщённое распределение Парето (GPD)

Применяется в теории экстремальных значений (EVT) для моделирования превышений порога. Имеет три параметра: местоположение \( \mu \), масштаб \( \sigma \) и форму \( \xi \). При \( \xi > 0 \) соответствует распределению Парето с «тяжёлым хвостом».

Дискретное распределение Парето

Вариант для целочисленных значений, например, распределение Ципфа (частотность слов) или закон Бенфорда (первые цифры чисел).

Применение

Экономика и финансы

• Распределение доходов и богатства: классический пример — 20 % населения владеют 80 % богатства. В России, по данным Росстата за 2023 год, коэффициент Джини (показатель неравенства) составляет около 0,4, что соответствует умеренному отклонению от равномерного распределения, но не точному следованию закону Парето.
• Риск-менеджмент: моделирование экстремальных потерь (например, крахов рынка) с помощью обобщённого распределения Парето.
• Размеры компаний: распределение выручки или числа сотрудников часто подчиняется закону Парето.

Физика и естественные науки

• Сейсмология: распределение магнитуд землетрясений (закон Гутенберга — Рихтера) имеет степенной хвост, аналогичный распределению Парето.
• Астрофизика: распределение масс звёзд, размеров галактик.
• Биология: распределение численности видов (например, в экологии — закон Фишера).

Информатика и сети

• Трафик в интернете: объём данных, передаваемый отдельными пользователями, часто подчиняется распределению Парето (20 % пользователей генерируют 80 % трафика).
• Размеры файлов: распределение размеров файлов на жёстких дисках или в веб-серверах.
• Социальные сети: количество подписчиков у пользователей (20 % аккаунтов имеют 80 % подписчиков).

Социология и демография

• Размеры городов: закон Ципфа — ранг города обратно пропорционален его населению, что является частным случаем распределения Парето.
• Частотность слов: в любом языке небольшое количество слов (например, «и», «в», «не») составляют большую часть текста.

Критика и ограничения

• Эмпирическая проверка: не все явления, описываемые принципом 80/20, строго подчиняются распределению Парето. Часто наблюдается лишь приблизительное соответствие, особенно на малых выборках.
• Параметр \( \alpha \): его оценка чувствительна к выбросам и методам подгонки. В реальных данных \( \alpha \) может варьироваться от 1 до 3, что существенно меняет интерпретацию.
• Применимость к малым значениям: распределение Парето определено только для \( x \geq x_m \), что требует обоснованного выбора порога.
• Альтернативные распределения: логнормальное распределение, распределение Вейбулла или гамма-распределение могут лучше описывать данные в некоторых случаях (например, доходы в среднем классе).

Интересные факты

• Принцип 80/20 часто ошибочно приписывают самому Парето, но он лишь описал математическую формулу. Термин «принцип Парето» ввёл Джозеф Джуран в 1941 году.
• В менеджменте принцип 80/20 используется для приоритизации задач: 20 % усилий дают 80 % результата, хотя это не строгое математическое следствие распределения Парето.
• В России распределение Парето применяется в актуарных расчётах для оценки рисков страховых компаний, а также в анализе социально-экономического неравенства (например, в докладах Росстата и Всемирного банка).

Источники

• Pareto, V. (1896). Cours d'économie politique. Lausanne: F. Rouge.
• Arnold, B. C. (2015). Pareto Distributions (2nd ed.). CRC Press.
• Newman, M. E. J. (2005). «Power laws, Pareto distributions and Zipf's law». Contemporary Physics, 46(5), 323–351.
• Росстат. (2023). «Социально-экономическое неравенство в России». Федеральная служба государственной статистики.
• Juran, J. M. (1951). Quality Control Handbook. McGraw-Hill.