Одним из методов контроля проектных решений должен быть метод экспертных оценок. Эксперт, исходя из накопленного опыта, своих и заимствованных знаний, дает оценку проектных решений разработчика [26].
С помощью экспертных оценок проводится контроль правильности выбора разработчиками стратегических и функциональных задач системы, связей между ними, параметров задач и критериев выполнимости задач. Экспертным оценкам подвергаются источники информации, требуемая производительность преобразователей информации, точность преобразователей информации, их надежность. Оценивается выбор методов решения функциональных задач по параметрам точности, надежности, быстродействия, проверяется полнота комплексирования системы и корректность связи между элементами, оценивается выбор математических моделей решения задач, проверка идентификации частных математических моделей по требуемым параметрам точности, быстродействию, сходимости результатов, оценка совместимости математических моделей, выбор и построение алгоритмов частных задач с оценкой их параметров ТТЗ, оценка методов и способов получения, хранения и передачи информации, выбор технических средств преобразования информации и организации вычислительного процесса с их критериями качества. Очевидно, что перечисленный набор задач, подлежащей экспертным оценкам, принадлежит всем этапам проектирования и присутствует во всех стратах представления СТССН [27].
Сущность метода экспертных оценок заключается в опросе и обработке мнений экспертов - специалистов по решаемой проблеме. Метод экспертных оценок рационально сочетает процесс интуитивно-логического анализа проблемы с количественными и качественными методами обработки результатов [28].
Метод экспертных оценок рассматривается в настоящее время как научный инструмент для решения проблем в условиях неполной и недостоверной информации.
Можно выявить следующие основные этапы метода экспертных оценок:
- организация экспертизы оценивания;
- подбор экспертов;
- проведение опроса;
- оценка результатов экспертизы.
Особенно важен метод экспертных оценок на начальных этапах проектирования, когда знание об объекте расплывчаты и неточны.
Компетентность эксперта определяется степенью его квалификации в определенной области знаний. Она оценивается коэффициентом компетентности Ki,i=1,...,N, который определяется методом взаимной оценки.