Методы представления и предварительной обработки оценок экспертов

Формализация информации, полученной от экспертов, направ­лена на устранение ее слабой структурированности, неопределен­ности, связанной не только с трудностями измерения, но и с самим характером исследуемых целей, средств их достижения и внеш­них условий.

Какие способы представления мнений экспертов чаще всего применяются на практике?

Если уровень факторов можно выразить количественно (в ру­блях, килограммах, процентах), то эксперты могут записать их значения в качестве оценки, и эти значения напрямую подлежат обработке. К примеру, на вопрос о количестве месяцев, необходи­мых для внедрения новой технологической линии, они ответят числом. Часто количественные ответы экспертов, имеющие боль­шой диапазон значений, преобразуются по достаточно простым правилам в некоторые шкальные оценки. Например, можно вве­сти интервалы с определенным шагом и пронумеровать их (перевод рейтинга в оценки: до 55 -2, 56—65-3, 66—80-4, больше 80—5); упо­рядочить все значения и дать им номер: отлично — 5, хорошо — 4, удовлетворительно — 3, неудовлетворительно — 2 и т. п.

Однако при решении многих практических задач факторы, определяющие конечные результаты, не поддаются количествен­ному измерению, тогда их называют качественными. Например, эффективность создания и внедрения новой техники, или сте­пень влияния (полезности, значимости) какого-либо решения на размер прибыли. Тогда расположение этих факторов в порядке возрастания/убывания составляет отдельную задачу и называется ранжированием.

Порядковый метод ранжированиясостоит в том, что эксперт располагает объекты (факторы, альтернативы) в порядке, кото­рый представляется ему наиболее рациональным и приписывает каждому из них порядковый номер — ранг. Он определяется на основе отношений «больше, чем»; «более предпочтителен»; «силь­нее» и т. д. При этом ранг 1 получает наиболее предпочтительная

альтернатива, а ранг N — наименее предпочтительная (следова­тельно, число п объектов должно быть равно N).

Если эксперт не может указать порядок следования для двух или нескольких объектов либо он присваивает разным объектам один и тот же ранг, то в результате число рангов N неравно числу объектов п. В таких случаях в результате предварительной под­готовки объектам приписывают стандартизированные ранги. Число стандартизированных рангов полагают равным п, а объ­ектам, имеющим одинаковый экспертный ранг, приписывают новый — стандартизированный — ранг, равный среднему ариф­метическому номеров мест в порядке возрастания ранга, занятых объектами с равными рангами.

Например, пусть шести альтернативам эксперт Эi присвоил ранги:

На первый взгляд, ничего не изменилось — ранги как были рав­ные, так и остались. Но здесь сумма рангов объектов, как и в пер­вом случае, будет равна сумме чисел натурального ряда 1...N, что важно для дальнейшей обработки.

Когда в экспертизе участвует несколько экспертов (т), кото­рые оценивают объект по нескольким факторам (п), обычно стре­мятся получить усредненную оценку (вес) для каждого объекта. Это особенно актуально, когда каждый эксперт использует свою шкалу оценок. Для этого рекомендуется следующая методика. 1. Составляется матрица «эксперты-факторы», в которой про­ставляются полученные от каждого эксперта оценки фак­торов по шкале от 1 до 10. Например, при проектирова­нии системы автоматического управления было выделено 6 основных проблем: 1) устойчивость; 2) управляемость;

3) предотвращение критических ситуаций; 4) помехозащи­щенность; 5) согласованность управляемой части системы с приводом; 6) сложность реализации.

Отметим, что здесь число факторов = 6, а число шкальных оце­нок = 10, поэтому сумма оценок экспертов могут не совпадать (у нас это 37 и 38), и тогда приходится вычислять относительные оценки каждого эксперта, а после этого — их обобщенную оценку. ПРИМЕР

2. Рассчитывается относительная значимость WIJ всех фак­торов в отдельности для каждого эксперта. С этой целью оценки, полученные от каждого эксперта, суммируются (по горизонтали), а затем нормируются:

3. Вычисляется усредненная оценка, данная всеми экспертами каждому фактору. Для этого нормированные оценки, полу­ченные на предыдущем шаге, суммируются (по вертикали), а затем рассчитывается средняя арифметическая для каждого фактора: