Экспертные методы принятия решений: проверка согласованности и достоверности экспертных оценок

Метод экспертных оценок представляет собой процедуру, позволяющую группе экспертов приходить к согласию.

Для многих неформализуемых управленческих задач экспертные процедуры являются эффективным, а в ряде случаев и единственным средством их решения.

Сущность метода экспертных оценок заключается в проведении квалифицированными специалистами-экспертами интуитивно-логического анализа проблемы с количественной оценкой суждений и формальной обработкой результатов.

Можно выделить два класса методов экспертных оценок:

1) индивидуальные экспертные оценки;

2) групповые экспертные оценки.

Методы коллективной экспертной оценки разделяют на два класса: одни используют открытую дискуссию, другие – опрос с помощью анкет.

Актуальной проблемой в области коллективной экспертизы при анкетной форме является повышение достоверности групповой оценки. Результаты экспертизы можно считать достоверными лишь в том случае, если достигнута достаточная степень согласия между участвующими в экспертизе экспертами.

Для оценки согласования мнений двух экспертов используют коэффициент ранговой корреляции Спирмена:

, где:

· m – количество ранжируемых элементов;

· ;

· – ранг, полученный j –ым элементом соответственно от первого и второго эксперта.

Известно, что r меняется от -1 до 1. Чем больше r, тем выше степень согласованности мнений экспертов.

Для оценки согласования мнений N экспертов используют специальные показатели, называемые коэффициентами конкордации (согласованности).

Наиболее известным является коэффициент конкордации Кендалла:

, где:

· N – число экспертов;

· m – количество элементов, подлежащих упорядочению по степени их важности;

· ;

· – ранг (от 1 до m), полученный j –ым элементом от h –го эксперта.

Известно, что W меняется от 0 до 1. Чем больше W, тем выше степень согласованности мнений экспертов.

Доказано, что величина N ×(m -1)× W имеет распределение с n = m -1 степенями свободы. Для признания значимости коэффициента конкордации необходимо и достаточно, чтобы найденное значение N ×(m -1)× W было больше табличного значения , где n – число степеней свободы, a – уровень значимости критерия (вероятность ошибки).