3. Порядок выполнения лабораторной работы

Лабораторную работу следует выполнять в следующей последовательности:

1. Изучить теоретический материал по теме (глава 1)

2. Ознакомиться с примером решения задачи методами анализа экспертных оценок (глава 2)

3. Выбрать задачу свой вариант задачи (Приложение Г). Вариант выбирается на основе последней цифры номера зачётки.

4. Описать процедуру сбора экспертов и постановки перед ними задачи для предоставления оценок, с целью решения поставленной перед студентом задачи.

5. Собрать оценки экспертов, по предоставленной им задаче. Провести анализ экспертных оценок.

6. Подготовить ответ на поставленную задачу.

7. Составить отчёт по выполненной лабораторной работе

4. Содержание отчета о выполнении лабораторной работы

В отчете по лабораторной работе необходимо представить:

• цель;

• собранные оценки экспертов;

• перевод оценок в ранги;

• расчет коэффициентов конкордации и согласованности Кэндела;

• диаграмма сумм рангов оценок предоставленных экспертами;

• предложения относительно поставленной задачи

• общие результаты и выводы по лабораторной работе.

5. Контрольные вопросы

а) Какие качественные методы анализа вы знаете?

б) Опишите последовательность выполнения анализа экспертных оценок.

в) Какие показатели используются при анализе экспертных оценок? Как рассчитываются? Что показывают?

г) Для каких задач характерно использование анализа экспертных оценок?

ПРИЛОЖЕНИЕ А

Показатели согласованности экспертов

Чем более согласованны эксперты, тем более далеки друг от друга суммы рангов, по каждому фактору.

Например, три эксперта дают оценки пяти факторам. Если все эксперты дали первому фактору максимальный ранг – 1, а второму фактору минимальный ранг – 5, то сумма рангов по первому фактору будет равна 3 (1 ранг * 3 эксперта), а сумма рангов по второму фактору равна 15 (5 ранг * 3 эксперта). Таким образом, разница сумм будет равна 15-3=12

Факторы	Эксперт 1	Эксперт 2	Эксперт 3	Σ рангов
Х1	1	1	1	3
Х2	5	5	5	15
Х3	3	4	3	10
Х4	4	3	2	9
Х5	2	2	4	8
Всего	15	15	15	45

Если эксперты разойдутся во мнениях, и первому фактору реже будут присваивать первый ранг, то сумма рангов по первому фактору станет больше чем 3 и приблизиться к сумме рангов второго фактора (равного 15-ти). Аналогично, если эксперты разойдутся в мнениях и второму фактору будут давать не последние ранги (ставить меньше 5-ого ранга), то сумма рангов по данному фактору сократится и приблизится к сумме рангов первого фактора (равного 3-м). В нашем примере, разница составила 13-6=7.

Факторы	Эксперт 1	Эксперт 2	Эксперт 3	Σ рангов
Х1	1	3	2	6
Х2	5	4	4	13
Х3	3	1	1	5
Х4	4	5	5	14
Х5	2	2	3	7
Всего	15	15	15	45

Таким образом, согласованность экспертов возрастает по мере возрастания разницы между суммами рангов по разным факторам. Сложив все разницы между суммами рангов факторов можно найти общую величину согласованности экспертов. Чтобы избавиться от влияния на сумму отрицательных разниц, следует искать сумму квадратов разниц между накопленными рангами.

Для упрощения дальнейших преобразований введём допущения:

1. В сумму квадратов разниц включим по паре квадратов разниц между каждым фактором (Ха-Хв)² и (Хв-Ха)², в результате этого результат (S) увеличится в два раза (2*S), позднее мы разделим результат пополам и снимем данное допущение;

2. В сумму включим разницы между каждым фактором с самим собой (Ха-Ха)², на конечный результат эти разницы не повлияют, так как равны нулю, однако значительно облегчат дальнейшие расчёты.

, (А.1)

Извлечём квадраты:

, (А.2)

Раскроем скобки, перегруппируем элементы:

, (А.3)

Продолжим преобразование:

, (А.4)

Вынесем за скобки одинаковые члены уравнения:

, (А.5)

Снимем первое допущение и получим вполне удобную формулу для расчёта показателя согласованности экспертов:

, (А.6)

Данную формулу можно немного преобразовать:

, (А.7)

Вынесем «n» за скобки и сведём выражение в скобках к формуле разности квадратов:

, (А.8)

Заметим, что в результате мы получаем формулу суммы квадратов отклонений накопленных рангов от их средней величины, умноженной на « n ». Эта формула и будет базовой для всех наших последующих расчётов.

, (А.9)

ПРИЛОЖЕНИЕ Б