Коэффициент конкордации Кендалла¶

Коэффициент конкордации Кендалла (от англ. concordance — согласованность) — это непараметрическая статистическая мера, используемая для оценки степени согласованности между несколькими ранжировками (упорядочениями) одного и того же набора объектов. Коэффициент был предложен британским статистиком Морисом Кендаллом в 1938 году. Он применяется в тех случаях, когда необходимо определить, насколько единодушны мнения нескольких экспертов, судей или наблюдателей при ранжировании объектов, или насколько согласованы результаты различных методов классификации. Значение коэффициента варьируется от 0 (полное отсутствие согласия) до 1 (полное согласие всех ранжировок).

¶Определение и математическая формула

Пусть имеется \( m \) экспертов (или ранжировок), каждый из которых присваивает ранги \( n \) объектам. Ранги — это числа от 1 до \( n \), где 1 соответствует наилучшему (или наиболее предпочтительному) объекту, а \( n \) — наихудшему. В случае, если эксперт не может различить объекты, допускаются связанные ранги (одинаковые ранги для нескольких объектов).

Коэффициент конкордации Кендалла \( W \) вычисляется по формуле:

\[ W = \frac{12 \sum_{i=1}^{n} (R_i - \bar{R})^2}{m^2 (n^3 - n) - m \sum_{j=1}^{m} T_j} \]

где:

• \( R_i \) — сумма рангов, присвоенных \( i \)-му объекту всеми экспертами;
• \( \bar{R} \) — среднее арифметическое сумм рангов по всем объектам: \( \bar{R} = \frac{m(n+1)}{2} \);
• \( T_j \) — поправочный коэффициент для \( j \)-й ранжировки, учитывающий наличие связанных рангов. Он вычисляется как \( T_j = \sum_{k=1}^{g_j} (t_k^3 - t_k) \), где \( g_j \) — количество групп связанных рангов в \( j \)-й ранжировке, а \( t_k \) — количество объектов в \( k \)-й группе.

Если связанных рангов нет (все ранги различны), то \( T_j = 0 \) для всех \( j \), и формула упрощается:

\[ W = \frac{12 \sum_{i=1}^{n} (R_i - \bar{R})^2}{m^2 (n^3 - n)} \]

Числитель представляет собой сумму квадратов отклонений сумм рангов от их среднего значения, умноженную на 12. Знаменатель — максимально возможное значение числителя при полном согласии экспертов (с учётом поправки на связанные ранги).

¶Интерпретация значений

Коэффициент конкордации принимает значения от 0 до 1:

• \( W = 0 \) — согласованность отсутствует: ранжировки экспертов полностью независимы и не связаны между собой.
• \( W = 1 \) — полная согласованность: все эксперты присвоили объектам одинаковые ранги.
• Промежуточные значения (например, 0,3; 0,7) указывают на различную степень согласия. В практических исследованиях принято считать, что \( W > 0,7 \) свидетельствует о высокой согласованности, \( 0,4 < W \le 0,7 \) — о средней, \( W \le 0,4 \) — о низкой.

Важно отметить, что коэффициент не показывает, какое именно мнение является правильным или истинным. Он лишь измеряет степень единодушия среди экспертов.

¶Статистическая значимость

Для оценки того, является ли наблюдаемое значение \( W \) статистически значимым (то есть не вызванным случайностью), используется критерий на основе распределения \( \chi^2 \) (хи-квадрат). Статистика вычисляется по формуле:

\[ \chi^2 = m (n - 1) W \]

или, с учётом поправки на связанные ранги:

\[ \chi^2 = \frac{12 \sum_{i=1}^{n} (R_i - \bar{R})^2}{m n (n+1) - \frac{1}{n-1} \sum_{j=1}^{m} T_j} \]

Полученное значение \( \chi^2 \) сравнивается с критическим значением распределения \( \chi^2 \) с \( (n-1) \) степенями свободы при заданном уровне значимости (обычно 0,05 или 0,01). Если вычисленное \( \chi^2 \) превышает критическое, нулевая гипотеза об отсутствии согласованности (то есть о том, что \( W = 0 \) в генеральной совокупности) отвергается, и согласованность признаётся статистически значимой.

¶Применение

Коэффициент конкордации Кендалла широко используется в различных областях, где требуется агрегировать мнения нескольких экспертов или оценить надёжность результатов:

¶Экспертные оценки

В менеджменте, маркетинге, экономике и социологии коэффициент применяется для проверки согласованности мнений группы экспертов при ранжировании факторов, альтернатив, проектов или критериев. Например, при оценке инвестиционной привлекательности регионов или при определении приоритетов развития компании.

¶Психология и педагогика

В психологических и педагогических исследованиях коэффициент используется для оценки согласованности судей при ранжировании поведенческих проявлений, тестовых заданий или личностных качеств испытуемых.

¶Биология и медицина

В биологии и медицине коэффициент применяется для оценки согласованности диагнозов, поставленных разными врачами, или для сравнения результатов ранжирования образцов по степени выраженности признака.

¶Спорт

В спортивной статистике коэффициент может использоваться для оценки согласованности мнений судей в видах спорта с субъективным оцениванием (например, в фигурном катании, гимнастике, синхронном плавании).

¶Пример расчёта

Рассмотрим простой пример. Пусть три эксперта (\( m = 3 \)) ранжируют четыре объекта (\( n = 4 \)): A, B, C, D. Ранги (1 — лучший, 4 — худший) представлены в таблице:

Суммы рангов \( R_i \): A = 1+1+1 = 3, B = 2+3+2 = 7, C = 3+2+4 = 9, D = 4+4+3 = 11. Среднее \( \bar{R} = \frac{3(4+1)}{2} = 7,5 \). Сумма квадратов отклонений: \( (3-7,5)^2 + (7-7,5)^2 + (9-7,5)^2 + (11-7,5)^2 = 20,25 + 0,25 + 2,25 + 12,25 = 35 \). Связанных рангов нет, поэтому \( W = \frac{12 \times 35}{3^2 (4^3 - 4)} = \frac{420}{9 \times 60} = \frac{420}{540} \approx 0,778 \).

Значение 0,778 указывает на высокую согласованность экспертов. Статистика \( \chi^2 = 3 \times (4-1) \times 0,778 = 3 \times 3 \times 0,778 = 7,0 \). Критическое значение \( \chi^2 \) для \( (4-1)=3 \) степеней свободы при уровне значимости 0,05 составляет 7,815. Так как 7,0 < 7,815, согласованность не является статистически значимой на уровне 0,05 (при малом числе экспертов и объектов это типично).

¶Ограничения и критика

Несмотря на широкое применение, коэффициент конкордации Кендалла имеет ряд ограничений:

• Он чувствителен к выбросам: один эксперт, чьи ранги сильно отличаются от остальных, может существенно снизить значение \( W \).
• Коэффициент не учитывает силу предпочтений между объектами, а только их порядок. Два эксперта, давшие одинаковые ранги, считаются полностью согласными, даже если их реальные оценки различаются по величине.
• Для получения статистически значимых результатов требуется достаточное количество экспертов и объектов. При малых \( m \) и \( n \) даже высокая согласованность может не быть значимой.
• Коэффициент предполагает, что все эксперты независимы и равноценны, что не всегда верно на практике.

¶Связь с другими методами

Коэффициент конкордации Кендалла является обобщением коэффициента ранговой корреляции Спирмена на случай более чем двух ранжировок. Если \( m = 2 \), то \( W \) связан с коэффициентом Спирмена \( \rho \) соотношением: \( W = \frac{1 + \rho}{2} \). Кроме того, \( W \) можно интерпретировать как среднее значение коэффициента Спирмена по всем парам экспертов.

¶Источники

• Kendall, M. G., & Smith, B. B. (1939). The problem of m rankings. The Annals of Mathematical Statistics, 10(3), 275–287.
• Kendall, M. G. (1948). Rank Correlation Methods. Griffin.
• Siegel, S., & Castellan, N. J. (1988). Nonparametric Statistics for the Behavioral Sciences (2nd ed.). McGraw-Hill.
• Орлов А. И. (2002). Эконометрика. М.: Экзамен.