27. Способы согласования оценок экспертов. Методика работы экспертных групп. Метод парных сравнений.

2.Экспертные методы рассматривают не как способ выявить общественное мнение, а как один из возможных подходов к всестороннему изучению сложных явлений, в которых окончательное решение должен принять человек.

Одной из задач принятия решений, требующих привлечения экспертов, является необходимость качественной оценки альтернатив, необходимость получить информацию качественного характера, основанию на опыте и интуиции специалистов. Такие качественные оценки носят название экспертных оценок.

1. Формирование экспертной группы в соответствии с целью работы.

2. Определение правил и порядка работы экспертной группы,3. Распределение потоков информации4. Формирование правил выработки коллективного мнения группы экспертов. 5. Формирование правил оценки компетентности экспертов.6. Анализ точек зрения экспертов.

Для получения необходимой информации при проведении экспертного оценивания применяют различные виды опроса экспертов-интервьюирование, дискуссии, анкетирование.

1.Дискуссии, чаще всего, используются в качестве способов (или методов) согласования оценок экспертов (в процессе проведения экспертизы). Наиболее известны следующие варианты дискуссий:

• метод "лицом к лицу". Открытое обсуждение заданной темы (проблемы). Группа состоит из 10-20 экспертов. Руководитель выступает только в роли наблюдателя, т.е. следит, чтобы каждый эксперт предлагают свои оценки;

• метод комиссий (10-12 человек). Многократное обсуждение одного и того же вопроса. Свободный обмен мнениями. Руководитель способствует активной работе каждого эксперта;

• метод "суда". Часть экспертов выступает в качестве "защитников" варианта решения,* другая часть - оппоненты, выступающие с доводами "против". Назначается эксперт, регулирующий ход экспертизы и выносящий решение;

• "мозговая атака". Первый этап - "принудительный" опрос группы экспертов, второй этап - свободное высказывание мнений или идей (по методу генерации идей). Проводится одно или ряд заседаний. Организатор должен исключить критику предложений экспертов. Разрешаются высказывания новых идей и выступления только в развитие предыдущего предложения,

• метод "ситуационного анализа". Для метода характерна поэтапная организация процесса активного сбора, оценки и переработки имеющейся первичной информации и производство новой -вторичной информации аналитического и прогнозного характера. Объектом исследования является новая ситуация. Наиболее успешное применение метода тогда, когда проблема носит ярко выраженный ситуационный характер.

3.Эксперт производит одновременное сравнение только двух объектов (парное сравнение).

При одновременном оценивании объектов первоначально производится их ранжирование. Полностью основываются на первичном ранжировании - порядковая шкала, а также количественная и балльная шкалы.

28. Правила проведения экспертного опроса. Метод Дельфи. Обработка результатов в методе Дельфи.

Правила должны обеспечивать условия для проявления творческих возможностей эксперта, а именно:

• независимость в формировании суждений;

• сохранение анонимности суждений;

• взаимное обсуждение аргументов при обосновании предпочтений;

• простота и удобство работы с анкетами, г) измеримость оцениваемых явлений. Характеризуется устойчивым набором признаков, имеющих различные состояния, которым могут быть поставлены в соответствие некоторые числа. Для выработки признаков устанавливаются градации, которым каждый эксперт должен поставить в соответствие определенные числа, характеризующие полезность, или важность признаков.

Процесс организации системы экспертного оценивания включает следующие основные этапы.

1. Формирование экспертной группы в соответствии с целью работы.

2. Определение правил и порядка работы экспертной группы,3. Распределение потоков информации4. Формирование правил выработки коллективного мнения группы экспертов. 5. Формирование правил оценки компетентности экспертов.6. Анализ точек зрения экспертов.

Для получения необходимой информации при проведении экспертного оценивания применяют различные виды опроса экспертов-интервьюирование, дискуссии, анкетирование.

Метод Дельфи - это итерационная процедура, которая позволяет подвергать мнение каждого эксперта критике со стороны всех остальных, не заставляя их фактически сталкиваться лицом к лицу. Идея метода заключается в том, чтобы создать механизм, обеспечивающий сохранение анонимности точек зрения отдельных лиц и тем самым свести к минимуму влияние красноречивых и обладающих даром убеждать личностей на поведение группы в целом[40,58].

Метод представляет собой ряд последовательных процедур, направленных на формирование группового мнения экспертов. Характерные особенности метода:

• анонимность,

• регулируемая обратная связь,

• формирование групповой оценки на основе статистической обработки индивидуальных оценок экспертов,

• многошаговый характер оценивания

Анонимность опроса позволяет ослабить влияние отдельных "доминирующих "экспертов. Поскольку ответы экспертов анонимны, они имеют возможность пересмотреть свои ;мнения, данные на предыдущем туре, и при желании исправить оценки.

Такая процедура позволяет всем экспертам принять в расчет обстоятельства, которые они могли случайно пропустить или которыми они пренебрегали в предыдущих турах. Регулируемая обратная связь реализуется путем проведения [нескольких туров опроса, причем обработка результатов каждого тура Осуществляется с помощью статистических методов и результаты обработки сообщаются экспертам. Регулируемая обратная связь снижает влияние индивидуальных и групповых интересов, которые не Относятся к решаемым задачам, т.е. обратная связь повышает устойчивость и надежность групповой оценки (степень доверия к ней). Применение статистических методов обработки группового ответа позволяет уменьшить статистический разброс индивидуальных оценок и получить групповой ответ, в котором наиболее верно отражено мнение каждого эксперта.

При обработке результатов опроса в каждом туре полученные экспертные оценки упорядочиваютсямедиану и квартили.