Тема 5. Современные средства оценивания результатов обучения.

Задание 1.

Проанализируйте текст, подумайте, какие выборки должны использоваться преподавателем высшей школы в процессе создания и апробации тестов с разными дидактическими задачами.

Выборки на разных этапах создания тестов

При создании тестов школьных достижений могут быть использованы по крайней мере 5 видов выбо­рочных совокупностей, которые могут существенно отличаться как по объёму, так и по репрезентативно­сти. Определяющим здесь являются те цели, которые преследует создатель на этапе апробации.

1. Самая маленькая выборка может быть исполь­зована для проверки формулировок открытых вопро­сов. Для выполнения этой работы может оказаться достаточной выборка в 30—50 человек или 2—3 клас­са. С точки зрения репрезентативности в нее должны войти разные классы (по профилю и уровню подго­товки), из тех для кого предназначен тест. Для этой работы лучше проводить сплошное обследование клас­са, т.е. в нем должны принять все учащиеся класса.

2. Для определения времени, необходимого для вы­полнения заданий и теста целиком и для выявления ошибок (опечатки, орфографические ошибки и пр.) в текстах заданий. Для выполнения этой работы так же может быть взята небольшая выборка, мало того, по­скольку нас, как правило, интересует верхняя грани­ца времени выполнения теста для выполнения этих работ в состав выборки можно включить лучших уча­щихся, по остальным возможным стратам желатель­но сделать выборку репрезентативной (мальчики-де­вочки, профиль классов, отличия образовательных учреждений и т.д.). Объём выборки в абсолютном выражении может быть оценен в 100—200 учеников.

3. Для определения трудности и дискриминативности заданий важно участие в тестировании как группы сильных учащихся, так и группы слабых учеников. Для этой апробации вполне применим метод край­них групп, когда в выборку отбираются наиболее и наименее успешные ученики. Объём выборки можно оце­нить в 200 человек.

4. Для определения надёжности и валидности теста. Для проведения апробации теста с этими целями ва­жен не столько объём, сколько репрезентативность выборки. Она должна быть тщательно выверена и сбалансирована по всем возможным стратам. Объёма в 200—300 испытуемых, как правило, может оказать­ся достаточно.

5. Для получения норм предъявляются максималь­ные требования к объёму и репрезентативности вы­борки. Она должна полностью соответствовать гене­ральной совокупности, на которой предполагается использование тестов. Объём выборки для получения норм будет зависеть от вида норм, которые предпола­гается получить — школьные, локальные, региональ­ные, федеральные. Объём выборки для определения норм в 1000 уча­щихся не кажется излишним.

Задание 2.

Познакомьтесь с Инструкцией экзаменующемуся, составьте свою инструкцию для студентов, выполняющих тестовые задания разной сложности и разного содержания.

Инструкция экзаменующемуся

Тест «...» продолжается... часа... минут.

1. На тестирование следует прийти не позднее, чем за 5 минут до начала. Опоздавшие не допускаются.

2. Перед началом тестирования вы обязаны зарегистрировать­ся у экзаменатора.

3. На тестирование необходимо принести ручку, карандаш и ластик.

4. Перед началом работы над тестом вы заполняете контрольный лист: пишите свои имя, фамилию, дату. Заполняется контрольный лист только ручкой.

5. Перед началом тестирования есть организационный момент (5 минут), во время которого экзаменатор объясняет, что вам пред­стоит сделать, и указывает время, которое дается на выполнение теста.

6. Работайте точно по инструкции экзаменатора. Начинайте выполнение теста сразу после того, как экзаменатор укажет время начала работы. За 5 минут до окончания выполнения экзаменатор предупредит вас.

7. Во время тестирования не разрешается пользоваться слова­рями, справочниками и разговаривать.

8. Если при выполнении задания вы совершили ошибку, сотрите ошибочную метку на номере (букве) ластиком и отметьте заново правильный ответ.

9. Работайте внимательно и быстро. Если вы не уверены в пра­вильности ответа, лучше пропустите задание и выполняйте следу­ющее. У вас будет возможность вернуться к нему, если останется время в конце работы.

10. Тест содержит избыточное количество заданий, поэтому не огорчайтесь, если в отпущенное время вы выполнили не все зада­ния и не дошли до конца.

11. Задания в тесте расположены в порядке нарастания трудно­сти, поэтому их следует выполнять в предложенном порядке и пе­реходить к следующему, более трудному только после работы над предыдущим, более легким заданием теста.

Общие сведения по тесту. Тест состоит из 30 заданий. Система оценки: верный ответ на 1 вопрос дает 1 балл (оценка дихотомическая). Для получения отметки «отлично» необходимо выполнить верно не менее 25 заданий, для получения отметки «хорошо» необходимо выполнить верно от 19 до 24 заданий, для получения отметки «удовлетворительно» необходимо выполнить верно от 13 до 18 заданий.

Выполнение теста проходит без использования справочных материалов.

Правила заполнения бланка ответов:

В стандартном бланке ответов черной гелевой ручкой заполняется шапка бланка большими печатными буквами. Верный ответ в заданиях с выбором ответа отмечается крестиком в соответствующей ячейке, при ответах на задания с кратким ответом и на соответствие используются только большие печатные буквы или цифры. При наличии исправлений ответ на данное задание не засчитывается.

В каждый вариант включены задания трех видов:

Задания с выбором ответов. Это задания, к которым предложены четыре варианта ответа, из которых три не верных и только один верный. Из четырех предложенных вариантов необходимо выбрать правильный и поставить метку в соответствующей ячейке на бланке ответов. Таких заданий – 21 (70%)

Задания с кратким ответом. Задания представляют собой незаконченные утверждения, в которых отсутствует наиболее значимая часть, или вопросы, на которые надо дать правильный ответ. Выполнив задание, необходимо вписать слово или число в соответствующие этому заданию ячейки на бланке ответов. Таких заданий – 7 (23,3%)

Задание на соответствие. Необходимо установить соответствие между элементами стоящими в левом и правом столбце. В бланк ответов вписывать ответы, ставя на первое место букву, на второе – соответствую цифру. Таких заданий – 2 (6,7%)

1 Сб. пост. и распоряжений по гимназиям и прогимназиям ведомства Мин. нар. просвещ. - СПб.: Тип. В.С. Балашева, 1874. – С.60, 44.

2 Сборник постановлений и распоряжений по реальным училищам Министерства народного просвещения за 1875 – 1909 гг. – М., 1910. – С.1.