Показатели степени согласованности мнений экспертов

1. Коэффициент вариации.

Коэффициент вариации оценок, полученных - ым качеством, определяется следующим образом:

- вычисляется дисперсия оценок, данных -му качеству

= ,

- определяется среднеквадратическое отклонение оценок, полученных- ым качеством

= ,

- определяется коэффициент вариации оценок, полученных - ым качеством

= .

Коэффициент вариации определяется для каждого качества и характеризует степень согласованности мнений экспертов об относительной важности - го качества. Чем меньше значение , тем выше степень согласованности мнений экспертов об относительной важности - го качества.

2. Коэффициент ранговой корреляции Спирмена

Для характеристики степени согласованности двух любых ранжировок, назначенных двумя индивидуумами определенному количеству объектов по степени выраженности некоторого качества, в математической статистике используется ранговый коэффициент корреляции. Этот показатель целесообразно применить и для определения степени согласованности мнений экспертов.

Чаще всего используют коэффициент корреляции рангов , предложенный К. Спирменом (1904):

= 1 - ,

где - разность между рангами сопряженных значений признаков и ; - число парных членов ряда или объем выборки.

Обозначив ранжированные значения признаков порядковыми числами 1,2,3,4,…, нетрудно определить ранги этих значений и по их разности судить о степени зависимости одного признака от изменений другого. Очевидно, что при полной связи ранги коррелированных признаков совпадут, и разность между ними будет равна 0, а значение коэффициент корреляции = 1.

3. Коэффициент конкордации

Для характеристики согласованности группы индивидуальных ранжировок наиболее часто применяют коэффициент конкордации , как указывалось ранее. Согласованность группы считается высокой при 0,8. Коэффициент конкордации применяют и для поиска экспертов – «еретиков», предложивших ранжировки, наиболее отличающиеся от групповых.

При этом вычисляют для всей группы экспертов в целом, а затем – для группы, из которой один эксперт исключен. Если при этом повышается, то это означает, что исключенная ранжировка «разрыхляла» группу. Исключая поочередно каждого эксперта, находим эксперта, ранжировка которого наиболее сильно разрыхляла группу и, следовательно, в наибольшей степени отличалась от групповых оценок.

Дата добавления: 2014-01-06