Точность экспертных оценок

Точность экспертных оценок определяют по согласованности мнений экспертов. Степень совпадения оценок экспертов, входящих в комиссию, характеризует качество экспертизы и выражается коэффициентом конкордации

где   S – сумма квадратов отклонений количества рангов или предпочтений каждого объекта от среднего арифметического значения;

n – количество экспертов;

m – количество оцениваемых объектов.

Сумму квадратов отклонений (S) от их среднего арифметического их значения (Р_ср) по всем объектам и экспертам находят по формуле:

N_i,j – количество рангов, данное i -му объекту j -м экспертом;

N_ср – среднее арифметическое значение рангов.

Полная зависимость формулы коэффициента координации имеет следующий вид:

При W = 0 – абсолютная несогласованность, а при W = 1 – полное совпадение мнений (оценок). Следовательно, 0≤W≤1.

В рассматриваемом примере п.5.8.2 среднее арифметическое значение рангов N_ср равно:

N_ср

Сумма квадратов отклонений от среднего арифметического значения рангов

S=1²+5²+11²+13²+5²+15²=630.

Следовательно, коэффициент координации в данном случае

Повысить точность экспертных оценок (измерений) показателей качества можно, если произвести двухкратное сопоставление и оценивание объектов, т.е. сначала это сделать в одной последовательности, а потом в противоположенной.