Методы экспертных оценок широко применяются на практике и имеют характерные особенности:
1) научно обоснованная организация проведения всех этапов экспертизы, обеспечивающая наибольшую эффективность работы на каждом этапе;
2) применение количественных методов как при организации экспертизы, так и при оценке суждений экспертов и формальной групповой обработке результатов.
Организация процедуры экспертной оценки включает несколько этапов: формирование репрезентативной экспертной группы; подготовку и проведение экспертизы; статистическую обработку полученных результатов опроса.
Методы отбора экспертов. В практике прогнозирования нередки случаи, когда количественная информация об объекте либо отсутствует, либо носит ограниченный характер. В этих условиях применение формализованных методов затруднено, им на смену приходят интуитивные методы или экспертные оценки.
Слово «эксперт» - латинского происхождения и означает опытный, сведущий. Интуитивные методы в отличие от формализованных появились очень давно. Один из наиболее распространенных интуитивных методов - метод Дельфи - получил свое название по названию города Дельфы, который прославился своими мудрецами и предсказателями, жившими в нем еще до нашей эры. Формализованные методы разработаны и нашли свое применение лишь в ХХ веке.
На способность эксперта строить прогноз оказывают влияние внутренние и внешние факторы. Внутренние факторы зависят от индивидуальных качеств эксперта, т.е. от его опыта, знаний, интеллекта, способности предвидеть будущее. Внешние факторы - это те, которые в значительной степени не зависят от личности эксперта, а определяются внешними условиями, ограничениями, например, степенью доступа эксперта к информации; правильностью постановки задаваемых вопросов; погрешностью модели опроса.
При отборе экспертов, как правило, необходимо руководствоваться следующими основными критериями:
1) степень компетентности эксперта. При ее оценке следует учитывать должностное положение эксперта, ученое звание, количество опубликованных работ, количество ссылок на эти работы;
2) стаж работ эксперта в области, связанной с объектом прогнозирования;
3) устойчивость взглядов кандидата в эксперты, умение отстаивать свои позиции и преодолевать ранее сложившиеся стереотипы;
4) способность к нелинейному мышлению, к рассмотрению проблемы с разных сторон, с разных позиций.
Из всего разнообразия методов отбора экспертов можно выделить:
а) документальный метод - предусматривает подбор экспертов с учетом их научных знаний, стажа работы, возраста, количества публикаций и ссылок на них, т.е. изучается вся документально подтверждаемая информация о кандидате в эксперты;
б) экспериментальный метод - заключается в проверке эффективности работы эксперта в прошлом;
в) метод самооценки – эксперту предлагается самостоятельно оценить свою компетентность в области объекта прогнозирования;
г) методы голосования (имеют несколько разновидностей: прием исключения, попарное сравнение кандидатов, метод «приятелей»).
Прием исключения. Несколько специально подобранных выборщиков (специалистов) составляют предварительный список кандидатов. Организаторы изучают его, выделяя наиболее ценные кандидатуры.
Попарное сравнение кандидатов. Из предварительного списка берется произвольно два кандидата, и при сравнении один из них обязательно исключается.
Метод «приятелей» предполагает отбор экспертов из числа знакомых. Эксперты-выборщики предлагают свои кандидатуры, дальше эти кандидаты предлагают свои кандидатуры - нарастание числа потенциальных кандидатов происходит по принципу «снежного кома».
В зависимости от организации экспертной оценки и формы опроса экспертов различают методы индивидуальных и коллективных экспертных оценок.