Опрос экспертов

Проведение опроса экспертов требует решения ряда организационных и методических вопросов. К таким вопросам относятся:

– место и время проведения опроса;

– количество и время проведения туров опроса;

– форма и методика проведения опроса;

– необходимая документация;

– порядок фиксации и сбора результатов опроса.

Перечисленные организационные и методические вопросы решаются группой управления экспертизой.

Опрос экспертов представляет собой процедуру заслушивания и фиксации в качественной и количественной форме суждений экспертов по решаемой проблеме. С методической точки зрения при организации опроса важны вопросы выбора формы, последовательности элементарных процедур проведения и метода субъективных измерений.

Выбор формы опроса определяется требуемой достоверностью результатов, располагаемым временем проведения эксперимента, стоимостью и допустимой степенью конформизма. Опрос экспертов может осуществляться в следующих трех формах: дискуссия, анкетирование, смешанная форма.

Дискуссия – это открытое коллективное обсуждение группой экспертов решаемой проблемы. При дискуссии уменьшается время и стоимость опроса, но возрастает роль конформизма. Процедура проведения дискуссии может иметь примерно следующую последовательность:

– постановка проблемы:

– формулировка цели опроса и требований к экспертам;

– определение процедуры высказываний (регламент времени, способы фиксации высказываний и формирование обобщенных точек зрения, возможность проведения повторной дискуссии, дополнительные указания);

– выбор ведущего и интервьюеров;

– определение формы и сроков опроса экспертов после дискуссии.

Для планирования хода дискуссии необходимо прогнозировать возможные альтернативные варианты хода дискуссии и подготовить необходимые управляющие воздействия с целью направления дискуссии в нужное русло. Опрос экспертов после дискуссии преследует цель – использовать эффект последействия. Эксперименты свидетельствуют, что наиболее ценные предложения формулируются экспертами не в ходе самой дискуссии, а примерно через сутки после ее проведения. В связи с этим очень важно объявить экспертам, что через сутки они должны либо подтвердить свои высказывания и оценки, либо, если они изменились, сформулировать новое мнение.

Анкетирование может осуществляться в письменной или в устной форма. В последнем случае аннотирование носит название интервьюирования. Общей особенностью для анкетирования является предварительно разработанная система вопросов – анкета. Анкета в случае интервьюирования не представляется эксперту в виде некоторого документа, а последовательность вопросов задается интервьюером в устной форме.

При опросе в форме анкетирования увеличивается время и стоимость эксперименте, но уменьшается степень конформизма.

Анкеты подразделяются на пробные, основные и дополнительные. Пробные анкеты необходимы для предварительной обработки вопросов. Дополнительные анкеты используются для создания обратной связи с целью уточнения и согласования мнений экспертов Разработка анкеты включает решение следующих проблем:

– выбор типов вопросов;

– выбор количества вопросов;

– формулировку вопросов;

– определение необходимой для экспертов информации;

– определение содержания и формы обращения к экспертам;

– разработку формы анкеты.

Типы вопросов бывают открытые, закрытые и с веером ответов Открытый вопрос – это вопрос, ответ на который может быть сделан в произвольной форме. Закрытый вопрос предполагает всего три типа ответов: «да», «нет», «не знаю» Вопрос с веером ответов предполагает выбор экспертом одного из определенного конечного числа сформулированных заранее ответов.

Смешанная форма опроса экспертов может применяться: в случае большой неясности проблемы и, как следствие, невозможности четкой формулировки вопросов, в случае существенных разногласий в мнениях, а также для получения предварительных мнений. Для первого случая целесообразно использовать сочетание дискуссии с последующим анкетированием. Для второго и третьего случаев, наоборот, сначала проводится анкетирование, а затем дискуссия.

Качество экспертной оценки существенно зависит от степени детализации описания оцениваемых объектов. При формулировке вопросов и разработке формы анкеты необходимо иметь в виду, что большую роль играет четкость и ясность постановки вопроса и последовательность их расположения. Для проверки однозначного понимания вопросов следует проводить испытания анкет с последующей корректировкой формулировок вопросов.