Общие недостатки методов экспертных оценок

1) часть специалистов экспертной группы или даже один наибо­лее активный член группы могут оказывать давление на всех членов, и, если такое мнение ошибочно, может быть получен неправильный прогноз;

2) в отдельных случаях на решения членов экспертной группы мо­жет оказать отрицательное влияние не глубина доводов, а количество замечаний «за» и «против»;

3) возможно также, что проблема достижения соглашения между членами экспертной группы будет иметь более важное значение, чем тщательно разработанный прогноз.

4) ограниченность применения,

5) высокие затраты на их проведение.

Процесс работы экспертов обычно называют экспертизой.

Этапы работы экспертов:

- подготовительный (определение цели и формирование рабочей группы);

- работа рабочей группы (уточнение целей, определение объема работ для экспертов и их опрос, разработка анкет);

- непосредственная работа экспертов (определение и выбор состава показателей, оценка их по весомости, значимости, принятие решений);

- заключительный (обработка результатов и подготовка решений).

При отборе экспертов, как правило, необходимо руководствоваться следующими основными критериями:

1) степень компетентности эксперта. При ее оценке следует учитывать должностное положение эксперта, ученое звание, количество опубликованных работ, количество ссылок на эти работы;

2) стаж работ эксперта в области, связанной с объектом прогнозирования;

3) устойчивость взглядов кандидата в эксперты, умение отстаивать свои позиции и преодолевать ранее сложившиеся стереотипы;

4) способность к нелинейному мышлению, к рассмотрению проблемы с разных сторон, с разных позиций.

Из всего разнообразия методов отбора экспертов можно выделить:

а) документальный метод – предусматривает подбор экспертов с учетом их научных знаний, стажа работы, возраста, количества публикаций и ссылок на них, т.е. изучается вся документально подтверждаемая информация о кандидате в эксперты;

б) экспериментальный метод – заключается в проверке эффективности работы эксперта в прошлом;

в) метод самооценки – эксперту предлагается самостоятельно оценить свою компетентность в области объекта прогнозирования;

г) методы голосования (имеют несколько разновидностей: прием исключения, попарное сравнение кандидатов, метод «приятелей»).

Прием исключения. Несколько специально подобранных выборщиков (специалистов) составляют предварительный список кандидатов. Организаторы изучают его, выделяя наиболее ценные кандидатуры.

Попарное сравнение кандидатов. Из предварительного списка берется произвольно два кандидата, и при сравнении один из них обязательно исключается.

Метод «приятелей» предполагает отбор экспертов из числа знакомых. Эксперты-выборщики предлагают свои кандидатуры, дальше эти кандидаты предлагают свои кандидатуры – нарастание числа потенциальных кандидатов происходит по принципу «снежного кома».

Экспертные оценки бывают индивидуальные и коллективные. Индивидуальные оценки - это оценки одного специалиста. Например, преподаватель единолично ставит отметку студенту, а врач - диагноз больному. Но в сложных случаях заболевания или угрозе отчисления студента за плохую учебу обращаются к коллективному мнению - симпозиуму врачей или комиссии преподавателей.