Коэффициент конкордации

m – количество экспертов

n – количество оцениваемых факторов

x_ij - стандартизированный ранг i-го эксперта для j-го фактора

h – число групп равных рангов в оценках i-го эксперта;

t_l – число равных рангов в l -й группе.

W изменяется от 0 до 1, если он стремится к нулю, то согласованность мнений экспертов отсутствует, если W = 1 то мнение экспертов полностью согласовано.

Для того, чтобы определить значимость коэффициента конкордации при большом числе оцениваемых факторов необходимо также рассчитать χ ² критерий Пирсона.

χ ² сравнивается с табличным значением для заданной степени доверительной вероятности и соответствующего количества степеней свободы.

Если χ ²_расч больше табличного, то с заданной вероятностью можно утверждать, что критерий Дарвина-Уотсона значим, то есть согласованность мнений экспертов является не случайным.

Кроме проведения расчетов различных коэффициентов при оценке согласованности мнений экспертов также могут строиться различные гистограммы, которые наглядно показывают степень разброса мнений экспертов.