Подбор экспертов

Эксперты должны обладать опытом в областях, соответствующих решаемым задачам. При подборе экспертов следует учитывать момент личной заинтересованности, который может стать существенным препятствием для получения объективного суждения. С этой целью, например, применяют методы Шара, когда один эксперт, наиболее уважаемый специалист, рекомендует ряд других и далее по цепочке, пока не будет подобран необходимый коллектив.

Проведение экспертизы

Проведение процедуры отличается в зависимости от используемого метода. Общие рекомендации:1Препятствовать давлению авторитетов (эксперт часто боится противоречить мнению большинства или наиболее уважаемого специалиста).2Установить и соблюдать регламент. Увеличение времени на принятие решения сверх оптимального не повышает точность ответа.

Статистический анализ результатов

После получения ответов экспертов необходимо провести их оценку. Это позволяет:1Оценить согласованность мнений экспертов. При отсутствии значимой согласованности экспертов необходимо выявить причины несогласованности (наличие групп) и признать отсутствие согласованного мнения (ничтожные результаты).2Оценить ошибку исследования.3Построить модель свойств объекта на основе ответов экспертов (для аналитической экспертизы). Результаты экспертного оценивания оформляются в виде отчёта. В отчете указывается цель исследования, состав экспертов, полученная оценка и статистический анализ результатов.

Правильность построения модели (верификация прогноза)

Определение степени достоверности, точности, обоснованности.

Валидность, надежность, достоверность-верификация.

100% достоверность, когда прогнозное событие сбылось. До этого идет относительнаяверификция.

Уровень достоверности – уровень допустимой ошибки прогноза.

Методы верификации:1Разработка прогноза другими методами (на регрессионный анализ наложить корреляционный)2Сопоставление прогноза с другими, который описаны в других источниках3Проверка адекватности прогноза на репрезентативном периоде4Опрос экспертов5Аналитические и логические выведения прогноза параллельного из заранее полученных прогнозов6Опровержение критериев оппонентов7Выявление источников возможных ошибок8Сравнение с более компетентным мнением.

Прогнозы на несколько этапов вперед (месяц, полгода)Норма задается чаще всего интервалом (не точечно у)Область допустимых значений (ОДЗ)