Метод экспертных оценок
Морфологические методы
Основная идея морфологических методов — систематически находить все возможные варианты решения проблемы или реализации системы путем комбинирования выделенных элементов или их признаков. Идеи морфологического образа мышления восходят к Аристотелю, Платону, к известной средневековой модели механизации мышления Р. Луллия [16].
Основными принципами морфологического исследования выступают:
— равный интерес ко всем объектам;
— максимально точная формулировка поставленных целей;
— ликвидация всех ограничений и оценок, до тех пор, пока не будет получена полная структура исследуемой области.
Существует ряд способов морфологического исследования:
а) метод морфологического ящика;
б) метод отрицания и конструирования;
в) метод систематического покрытия поля;
г) метод экстремальных ситуаций;
д) метод сопоставления совершенного с дефектным;
е) метод обобщения.
Возможность использования экспертных оценок, обоснование их объективности обычно базируется на предположении о том, что неизвестная характеристика исследуемого явления есть случайная величина, отражением закона распределения которой служит индивидуальная оценка эксперта о достоверности и значимости того или иного события. При этом истинное значение характеристики находится внутри диапазона оценок, получаемых от группы экспертов
Термин «эксперт» происходит от латинского слова, означающего «опытный».
При использовании экспертных оценок обычно предполагается, что мнение группы экспертов надежнее, чем мнение отдельного эксперта. В некоторых теоретических исследованиях отмечается, что это предположение не является очевидным.
Все множество проблем, решаемых методами экспертных оценок, делится на два класса. К первому относятся такие, в отношении которых имеется достаточное обеспечение информацией. При этом методы опроса и обработки основываются на использовании принципа «хорошего измерителя», т. е. эксперт — качественный источник информации; групповое мнение экспертов близко к истинному решению. Ко второму классу относятся проблемы, в отношении которых знаний для уверенности в справедливости указанных гипотез недостаточно. В этом случае экспертов уже нельзя рассматривать как «хороших измерителей», и необходимо осторожно подходить к обработке результатов экспертизы во избежание больших ошибок. В литературе в основном рассматриваются вопросы экспертного оценивания для решения задач первого класса.
При обработке материалов коллективной экспертной оценки используются методы теории ранговой корреляции. Для количественной оценки степени согласованности мнений экспертов применяется коэффициент конкордации.
Коэффициент конкордации W позволяет оценить, насколько согласованы между собой ряды предпочтительности, построенные каждым экспертом. Его значение находится в пределах W=0 означает полную противоположность, a W—1 — полное совпадение ранжировок. На практике достоверность считается хорошей, если W= 0,7..Д8.
Небольшое значение коэффициента конкордации, свидетельствующее о слабой согласованности мнений экспертов, может являться следствием следующих причин: в рассматриваемой совокупности экспертов действительно отсутствует общность мнений; внутри рассматриваемой совокупности экспертов существуют группы с высокой согласованностью мнений, однако обобщенные мнения таких групп противоположны.