3. Основное содержание адаптации психологических методик.

3.1. Подбор стимульного (тестового) материала.

При подборе (разработке) стимульного материала выполняется процедура определения трудности каждого задания теста, которая понимается как статистический уровень его решаемости испытуемыми в выборке стандартизации. В качестве показателя трудности задания обычно определяется доля лиц выборки, решавших и нерешивших задание, а его математическим выражением является индекс трудности.

Вычисляется Ит по формуле:

где

Ит - индекс трудности в процентах.

№n - количество испытуемых , правильно решивших задание.

№ - общее число испытуемых.

В случаях, если выборка и количество заданий в тесте велико, индекс трудности определяется с использованием метода “контрастных” групп. Последовательность действий при этом следующая. В каждую их групп “лучших” и “худших” включается по 27 % лиц., имеющих соответствующие результаты в целом. Затем вычисляется индекс трудности как среднее арифметическое индексов трудности для групп с максимальным и минимальным результатом.

где:

Nп- число правильно решившив задание.

Nn- число неправильно решивших задание.

Nmax- число имеющих лучшие результаты по тесту.

Nmin- число имеющих худшие результаты по тесту.

M- число вариантов ответов.

Те задания, которые были правильно решены более чем на 84 % испытуемых, и те, которые не были решены 84% испытуемых, исключаются из теста, т.к. являются либо слишком легкими, либо слишком трудными для выборки стандартизации.

Могут использоваться и другие процедуры отбора заданий теста по характеристике “трудность”. Среди них наиболее часто используются следующая последовательность действий психолога:

1) разделение группы “лучших” и “худших” по показателю эффективности (успешности) в реальной деятельности.

2) экспертная оценка оптимальности трудности задания в баллах по предложенной шкале.

3) вычисление среднего арифметического , дисперсии, стандартного отклонения полученных данных.

4) вычисление коэффициента вариации как соотношения величин стандартного отклонения и среднего арифметического с использованием формулы:

5) исключение задания, если величина коэффициента вариации (т.е. колебание вокруг средней оценки в обе стороны) не превышает величину 0,30.

6) упорядочение отобранных заданий по правилу нарастания трудности.

Если предположить, что частоты распределения оценок испытуемых, выполнившив задание, подчиняются нормальному закону, то в пределах (М + б) величины одного стандартного отклонения от среднего значения находится около 68 % испытуемых, а за их пределами - по 16 %.

Рис.

Пороговые частоты случаев правильного и ошибочного решения при отборе задач по индексу трудности.

3.2. Проверка заданий на дифференцирующую способность.

Для проверки и отбора заданий теста, которые дифференцируют испытуемых данной выборки на категории относительно максимального и минимального результатов по тесту, необходимы следующие процедуры:

1. Представление ответов испытуемых по каждому заданию в дихотомической шкале соответственно “правильно” - 1 балл, “неправильно” - 0 баллов. Общая сумма баллов по всем заданиям при этом будет являться “сырой” оценкой.

2. Определение показателей дифференцирующей способности заданий как меры соответствия успешности выполнения одного задания результативности выполнения теста в целом. При этом данный показатель рассчитывается как коэффициент точечно-бисериальной корреляции по формуле:

где

Rpb- индекс дискриминации (дифференциации).

Xn- среднее арифметическое оценок по тесту у тех, кто правильно решил задание.

X- среднее арифметическое всех индивидуальных оценок по тесту.

_x- стандартное отклонение индивидуальных оценок по тесту.

Nn- количество правильно решивших задание.

N- общее число выполнивших тест.

3. Интерпретация полученных результатов по каждому заданию.

Полученное значение может быть в интервале от -1 до 1. Высокое положительное значение коэффициента может свидетельствовать об удовлетворительной дифференцирующей способности задания теста, а отрицательное интерпретируется наоборот. При этом коэффициенты должны быть статистически значимы на приемлемом уровне.

4. Рассмотрение заданий, по которым имеются пропуски вответах.

Если имеются пропуски в ответах, применяется следующая формула:

где:

Xn- среднее значение оценок по тесту у тех, кто правильно выполнил задание.

Xo- среднее значение индивидуальных оценок испытуемых, выполнявших задание.

_x0- стандартное отклонение индивидуальных оценок испытуемых, выполнявших задание.

N₀- общее количество испытуемых, выполнявших задание.

5. Верификация полученных данных.

Если имеется соответствующий всем нормативным требованиям и нормально распределенный (близко к нормальному) критерий (критерии) валидизации, то индекс (коэффициент) рассчитывается с применением метода контрастных групп (“лучшие” и “худшие”). Коэффициент дискриминации рассчитывается при этом как разность между долей лиц, правильно решивших задачу из “лучшей” и “худшей” групп.

где: - коэффициент (индекс) дискриминации.

Nn max- количество испытуемых, правильно решивших задание из группы “лучших”.

Nn min- количество испытуемых, правильно решивших задание из группы “худших”.

Nmax- количество испытуемых “лучшей” группы.

Nmin- количество испытуемых “худшей” группы.

При формировании контрастных групп руководствуются правилом: нижняя граница численности групп - 10 % от общего количества испытуемых в выборке, верхняя - 33 %. Обычно выделяется по 27 - 33 %. С учетом этой квоты формула коэффициента дискриминации приобретает следующий вид:

После получения коэффициентов дискриминации другим способом производится анализ их различий с полученными первым способом. Предпочтение при этом отдается тем, различия между которыми статистически незначимы.

3.3 Проверка заданий на гомогенность (внутреннюю согласованность).

С целью проверки и установления внутренней согласованности теста рассчитывается коэффициент корреляции между результатом по тесту в целом и каждого его отдельного задания. Процедура вычисления сводится к следующему: