10. Способы отбора экспертов из сформированного банка данных по кандидатам в эксперты. Способы, основанные на использовании коэффициентов компетентности Оценивание со стороны коллег

Суть способа состоит в том, что специалист выдвинут тем или иным числом коллег в круг потенциальных экспертов и, исходя из того или иного критерия, либо включен в этот круг, либо нет. При этом специалист, вошедший в потенциальные эксперты, во всех дальнейших операциях считается равнокомпетентным со всеми остальными.

Достоинство:

- Не требует больших затрат со стороны организаторов.

Недостаток:

-Оценка со стороны коллег может оказаться лишь оценкой взаимоотношений экспертов.

Коэффициент компетентности как функция документальных оценок

Формула для расчета коэффициента компетентности имеет вид:

где xij- значения оценок, приписываемых эксперту за производственный стаж, ученую степень, количество публикаций и т.п.; , - коэффициенты «весомости» стажа, «остепененности», публикуемости и т.п.

Например, в ГОСТ 23554.1-79 «Экспертные методы оценки

ва промышленной продукции» рекомендована формула:

где - коэффициент аргументированности, рассчитываемый пропорционально числу научных командировок за рубеж, числу прочитанных книг и др.; - коэффициент знакомства, который эксперт назначает себе сам.

Достоинство:

- Оценка производит впечатление научно-обоснованной в отношении компетентности отбираемых элементов.

Недостаток:

- Эксперты не подтвердили целесообразность метода (его использования).

Отбор экспертов по результатам тестирования

Тестирование кандидатов для отбора в эксперты может быть осуществлено следующими способами:

1) По результатам решения тестовых задач.

2) Психометрическое тестирование.

3) Тестирование по результатам оценивания тестового объекта.

Способами тестирования удается отобрать экспертов с пониженной инициативой, но умеющих хорошо соблюдать заданные правила,

пользовать профессиональные методики, положения и т.п.

Отбор экспертов по результатам участия в деловых играх

Успешную деятельность игрока в деловой игре фиксируют в виде

некоторой суммы выигрыша, по каковой и судят о его способности

исполнять ту или иную должность.

Достоинство:

- Простота.

Недостаток:

- Трудно разработать деловую игру, в которой достаточно полно проявились все качества эксперта.

Использование «рейтинга» эксперта

В тех случаях, когда специалиста неоднократно привлекают для участия в экспертизе и есть возможность ретроспективно оценить степень соответствия его прошлых оценок и суждений истине, может быть построена величина, характеризующая «качество» эксперта, его рейтинг.

Отбор экспертов по их самооценке

Самооценка по направлениям

Организаторы подразделяют всю область возможной экспертизы

на направления и каждый кандидат отмечает те направления, в работе по которым он хотел бы участвовать, и те, свое участие в которых он считал бы нецелесообразным. Эти сведения заносят в банк.

При поступлении на экспертизу очередного объекта организаторы определяют направление, к которому объект принадлежит и отбирают

соответствующих специалистов в экспертную группу.

Достоинство:

- Удобно в случае, когда экспертиза проводится неоднократно и при наличии большого банка экспертов, в том числе работающих в разных городах и странах.

Недостаток:

- Возможны ошибки при неправильном определении направления, к которому относится объект.

Самооценка по объекту экспертизы

Кандидатам в эксперты объявляют задачу и знакомят с объектом экспертизы, после чего каждый из них принимает решение, участвовать в работе экспертной группы или же нет.

Достоинства:

- Удается отобрать экспертов, наиболее способных проводить оценивание в данный момент;

- Исключается возможность ошибки в отнесении объекта к области знаний.

Недостаток:

- Требует проведения предварительного опроса в кратчайшее время.