Методы эвристической оценки качества эксперта: классификация, характеристика, достоинства и недостатки

1) Эвристические оценки - это оценки, назначаемые человеком и основанные на предположении правильности отражения качества эксперта через оценку окружающих или через самооценку.

К этой группе относят:

1.1) Самооценка - это метод эвристической оценки, при котором компетентность оценивается самим экспертом. Самооценка зависит от психологических особенностей эксперта, степени удовлетворенности собой, понимания оценочной шкалы. Для самооценки характерна значительная субъективность, поэтому очень часто результаты самооценки не совпадают с результатами взаимооценки. Для снижения субъективности самооценку проводят дифференцированно. Для этого показатель самооценки определяется как функция двух коэффициентов: знакомства и аргументированности. Для экспертной оценки товаров самооценку эксперта рекомендуется определять с учетом его информированности и знакомства с оцениваемой продукцией путем заполнения анкеты самооценки. При этом эксперт отмечает регулярность чтения источников информации, перечисленных в анкете, и степень знакомства с оцениваемой продукцией. Самооценка вычисляется по формуле КСАМ = ∑mЭKЭ

· mЭ – весомость показателей информированности и знакомства

· KЭ – оценка, зависящая от степени информированности и степени знакомства

1.2) Взаимооценка - метод эвристической оценки, при котором оценка эксперта определяется как среднее из оценок, назначаемых другими экспертами. Т.е. каждый эксперт дает оценку всем остальным экспертам, а затем рассчитывается усредненный результат. В зависимости от количества экспертов в группе применяются две разные процедуры:

o А) если численность экспертов в группе менее 15 человек, то всех остальных экспертов оценивает каждый эксперт

o Б) если численность экспертов равна 15 и более, то заполняется специальная анкета, в которой эксперты распределены на три группы в зависимости от их квалификации (выше средней, средней и ниже средней квалификации)

Внутри каждой подгруппы эксперты ранжируются, причем первый ранг - это самый квалифицированный эксперт, второй - следующий по квалификации и т.д. Кроме того, каждому оцениваемому эксперту присваивается числовая оценка от 0 до 10 с точностью до 0,5. Причем 0 - это совершенно неквалифицированный эксперт, а 10 - это самый квалифицированный эксперт.

Недостатки взаимооценки:

1) Эксперты могут недостаточно знать друг друга

2) На результаты оценки могут влиять взаимные симпатии или антипатии

3) Эксперты, как правило, избегают сверхвысоких и сверхнизких оценок

4) Неоднозначность восприятия понятия качества эксперта

Мероприятия по снижению указанных недостатков:

1) применять взаимооценку только в тех группах, где большинство экспертов хорошо знают друг друга (если некоторые из оцениваемых экспертов не знакомы, то рекомендуется ставить прочерк в соответствующей графе)

2) проводить анонимное анкетирование

3) разъяснять, что результаты анкеты будут использованы только для корректировки оценок товара

4) знакомить экспертов со структурной схемой свойств и их частных оценок

1.3) Оценка эксперта рабочей группой - это метод эвристической оценки, при котором оцениваются количественные характеристики заинтересованности эксперта в экспертной оценке и его внимательности в ходе опроса. Оценка дается специалистами-аналитиками, которые проводят опрос эксперта. При этом они оценивают отношение экспертов к проводимой экспертизе и их активность при обсуждении оценок. Оценки рабочей группой выставляются по десятибалльной шкале.

1.4) Оценка аргументированности и знакомства эксперта с объектом экспертизы - это метод эвристической оценки, при котором оценивается степень специализации эксперта и факторов, влияющих на его компетентность.

Эвристическая оценка компетентности обладает высокой эффективностью и достоверностью только при условии тщательной проработает методов количественной оценки и каждого фактора в виде оценочных анкет.