Обучение методике составления тестовых заданий и рейтингового контроля

В учебном процессе тесты применяются в основном для проверки качества знаний. До 60-х гг. смысл тестов усматривался в дифференциации студентов по знаниям. После 60-х гг. тесты стали ориентироваться на критериальную дифференциацию (критериально-ориентированные тесты). Тесты могут быть гомогенными (по одному предмету) и гетерогенными (проверяется сумма знаний). Тестирование предполагает системность. В рамках одного вуза оно должно проводиться от момента поступления студентов до момента окончания ими вуза.

Тестовый контроль – это совокупность заданий, опробованных на основе научных критериев для педагогического измерения в тех или иных целях.

Цели тестового контроля могут быть следующими:

- повышение качества обучения;

- локальные (конкретные) цели:

1. Объективная оценка объема знаний студентов.

2. Профориентация и профотбор. Тесты устанавливают адекватность выбора профессии абитуриентами.

3. Итоговая аттестация и аккредитация вузов. В настоящее время в России созданы с этой целью группы разработчиков – 5–6 вузов, работающих по разным специальностям.

4. Выявление структуры знаний у студентов. Особенное внимание уделяется структуре, а не объему знаний в Японии.

5. Система полного усвоения знаний. Эта система особенно популярна в западных странах. Выявляются нули в тестах и соответственно заполняются пробелы в знаниях.

6. Оценка эффективности работы кафедры, преподавания чи­таемых на ней предметов.

Тест – система заданий возрастающей трудности специфической формы, позволяющая объективно оценивать уровень и структуру знаний студентов.

Единицами тестирования служат тестовые задания – это одна единица контрольного материала, сформулированная в виде утверждения, предложения с неизвестным, удовлетворяющая ряду требований. Тестовое задание – задание в тестовой форме, прошедшее электронную проверку и определенным образом оцененное.

Формы тестовых заданий

I. Закрытая форма.

Задание содержит основную часть и ответы, сформулиро­ванное составителем. Инструкция указывает: найти номер пра­вильного ответа. Задание содержит два-три правильных ответа. Эта форма технологична, так как позволяет выявить опре­деленный объем знаний.

Требования к тесту закрытой формы

1. Стандартная инструкция.

2. Равная правдоподобность заданий.

3. Полная ясность текста (не должно быть разночтений).

4. Предельная краткость (5-6 слов).

5. Простая стилистическая конструкция.

6. В задание включается больше слов, чем в ответ.

7. Все ответы, правильные и неправильные, должны быть равны по длине.

8. Исключаются вербальные ассоциации, способствующие выбору правильного ответа.

9. Исключаются лишние слова (на приведенном рисунке, из перечисленных примеров).

10. Необходимо проверять не одно знание, а несколько.

11. Необходимо наличие одной стандартной инструкции (например, обведите кружком номер правильного ответа).

12. Правильный ответ должен быть только один.

13. Не должно быть противоречий между основной частью и ответами.

14. Исключить повторяющиеся слова в ответах.

II. Открытая форма.

Студент сам формулирует ответ, словесный или графический. Эти тесты хороши для текущего контроля. Инструкция к ним гласит: «Дополните...».

Требования к тесту открытой формы

1. Дополняющее слово ставится в конце.

2. Оно должно быть единственным.

3. Все прочерки должны быть одинаковой длины.

Например: Первым греческим философом был _________. Соли высших жирных кислот называются _________. Скорость света в вакууме равна _________.

III. Задания на соответствие.

Задание содержит два множества, правый столбик – для выбора, левый – для ответа. В правом на 1-2 элемента больше. Инструкция – установить соответствие.

Например:

реплики высказывания авторы

IV.Задания на установление правильной последователь­ности (тесты хороши для технических специальностей, так как содержат знание алгоритма).

Эти задания созданы для проверки знаний последовательности действий в различных ситуациях, порядка выполнения какой-либо работы и т.д. Они являются заданиями вто­рого и третьего уровня.

Инструкция: установить правильную последовательность, в соответствии с которой, слева ставятся цифры, указывающие на порядок действий. При необходимости можно сделать подзаголовок (заглавными буквами), который поможет сориентироваться.

При подготовке таких заданий необходимо давать четкие и точные названия, точно соблюдать алгоритм контролируемой деятельности. Строки задания (кроме подзаголовка) набираются маленькими буквами.

Минимальное число элементов, включенных в задание, должно быть не менее 5, а максимальное – не более 12.

Задание считается выполненным правильно, если студент установил совершенно правильный порядок в данной последовательности.

Пример:

Установить правильную последовательность.

1. вторник

2. среда

3. воскресенье

4. понедельник

5. четверг

6. пятница

7. суббота

Ответ: _________

Оценка тестов может быть:

- полигамическая, если из 10 заданий одно неправильное, то сумма баллов равна 9;

- дихотомическая (сделал – 1, не сделал – 0).

Тесты должны соответствовать следующим требованиям:

1. Содержание. Чем полнее отобрано содержание курса в тестовом задании, тем выше валидность теста. 360 заданий выполняются приблизительно за 1,5–2 часа.

Требования к содержанию тестового задания:

- предметная чистота (чем меньше междисциплинарных элементов, тем чище содержание дисциплины);

- значимость содержания; содержание ранжируется, это очень сложный процесс, так как следует выделить базис дисциплины;

- содержание должно быть нормативным, репрезентативным (более полно отражать знание курса);

- содержание должно быть научно достоверным (отражать современные взгляды).

2. Формы тестового задания. Выбор формы задания зависит от:

- содержания курса;

- цели создания теста (контроля);

- умения разработчика.

3. Степень трудности. Задания должны быть разной труд­ности; есть одно-два задания, которые не может сделать никто; одно-два задания, которые должны выполнить все; 60–70% со­ставляют задания средней трудности.

4. Дифференцирующая способность. Знающие студенты должны выполнить задание, не знающие – не в состоянии его выполнить.

5. Локальная независимость; выполнение заданий не зави­сят от результатов выполнения других форм работы.

6. Информативность заданий. Каждое задание выполняет информационную функцию.

7. Коррелируемость задания с критерием.

8. Тест может включать в себя задания разной формы в любом порядке и в любом количестве.

Выбор формы задания зависит только от материала, знание которого нужно проверить. Количество заданий определяется объемом материала. Общий принцип такой: чем больше заданий, тем точнее определяется уровень знаний.

9. Последовательность заданий друг за другом определяется по принципу: от более простого к более сложному.

В идеале в тесте не должно быть очень легких, абсолютно всеми решаемых заданий. Хотя иногда можно в начале теста вводить несколько таких заданий, чтобы ободрить испытуемого, повысить его уверенность в себе и помочь реализовать свой потенциал, ощу­тив в ходе тестирования определенный боевой настрой.

Также иногда полезно включать 1 - 2 задания высокого уровня сложности, чтобы у ученика не сформировалось чувство непогрешимости и завышенной самооценки, чтобы было к чему стремиться.

10. Вариативность содержания.

11. Тест должен включать в себя следующие элементы:

имя теста (отражение сути темы, раздела, предмета); номер варианта (чем больше, тем лучше, мин.- 4); указание уровня усвоения.

12. Краткость заданий.

Многословные задания не могут считаться тестовыми. Идеальным считается задание, в котором не более 7 слов.

Этапы разработки тестовых заданий:

1. Выбор содержания заданий.

2. Выбор формы заданий.

3. Создание инструкции и описания теста.

4. Апробация теста (сбор эмпирических данных).

5. Обработка эмпирических данных.

6. Интерпретация результатов обработки.

7. Экспертиза качества теста.

Методы оценки критериев качества тестов

Надежность – устойчивость результатов теста, получаемых при его применении.

Существуют следующие методы оценива­ния надежности:

1. Параллельное тестирование в двух группах.

2. Ретестовая надежность (повторное тестирование).

3. Расщепление теста (тест расщепляют на две части по чет­ным и нечетным номерам заданий). Чем выше корреляция между двумя частями, тем выше надежность. Существуют тесты на выявление знаний и на выявление навыков.

Известно, что контроль стимулирует обучение и влияет на поведение студентов. Как показала практика, попытки исклю­чить контроль частично или полностью из учебного процесса приводят к снижению качества обучения. Внедряемые в настоя­щее время интенсивные методы обучения ведут неизбежно к новым поискам в области повышения качества и эффективнос­ти педагогического контроля и появлению его новых форм, на­пример, таких как рейтинг.

Рейтинговая форма контроля имеет свои отличия и достаточно проста в применении. С самого начала изучения дисциплины каждый студент получает памятку, ориентирующую его в работе по рейтингу. В этой памятке содержатся перечень выполняемых заданий и шкала баллов по трем уровням исполнения. Учитываются также поощритель­ные и штрафные (за нарушение сроков) баллы. В памятке сооб­щается об установленном диапазоне рейтинга, в пределах кото­рого студент получает зачет или обеспечивает себе «3», «4» «5» за экзамен по дисциплине.

Зачетные единицы могут набираться студентами по следующей тарифной сетке: посещение лекции – 2, посещение семинара – 1, выступление на семинаре – 1–2, доклад – 2–3, содоклад – 1–2, контрольные письменные работы, программированный контроль – 1–2, участие в деловой игре – 3.Практическое применение системы «зачетных единиц» давало студентам срочную и достаточно объективную информацию, характеризующую успешность их аудиторной и внеаудиторной учебной деятельности. Количество набранных зачетных единиц по отдельным модулям сообщается студентам два раза в месяц. Кроме этого многие студенты еженедельно подсчитывали набранные суммы и знали, как оцениваются их успехи задолго до экзаменов. Основные показатели эффективности применения были получены после проведения экзаменационной сессии.

«Идеальный студент» – это виртуальная личность, которая «присутствует» в каждой группе, и на всех контрольных мероприятиях «получает» максимально возможные оценки, по какой бы шкале они ни выставлялись – пятибалльной, десятибалльной, стобалльной или др. «Идеальный студент» – это модель студента, который осваивает учебный план во всей полноте. Сравнивая с его «достижениями» достижения настоящих студентов, преподаватель имеет возможность оценить степень освоения каждым конкретным студентом содержания учебной дисциплины.

Текущая рейтинговая оценка идеального студента, всегда выполняющего требования учебного плана, в течение всего семестра равна 100%.

Рейтинговая оценка вычисляется после каждого очередного контрольного мероприятия. Необходимое число контрольных мероприятий в семестре определяется кафедрой и преподавателем, ведущим дисциплину, но оно не должно быть менее четырех.

Базовым документом, определяющим работу преподавателя и студентов в семестре, является рейтинг-план. Перед началом семестра наиболее опытные методисты и преподаватели кафедры совместно с преподавателем, ведущим дисциплину, разрабатывают рейтинг-план по дисциплине на учебный семестр. В нем определяется соотношение видов учебной деятельности студента, учитываемых в рейтинговой оценке по данной дисциплине, шкалы текущих оценок и календарный план контрольных мероприятий по дисциплине.

Форма контроля учебной деятельности студентов определяется преподавателем в зависимости от вида занятий, предусмотренных рабочим учебным планом:

- для лабораторных занятий – традиционная проверка отчетов, оценка выполненных заданий и др.;

- для практических (семинарских) занятий – оценка выступления, решения задач, выполнения контрольных работ (в том числе тестирование) и др.;

- для лекций – тестовая оценка знаний студентов (бланковое тестирование на лекционном занятии или компьютерное тестирование в установленное преподавателем время), коллоквиум, экспресс-опрос и др.

Итоговая рейтинговая оценка в конце семестра служит основанием для аттестации или неаттестации студента по данной дисциплине без проведения традиционной сессии. Соотношение рейтинговой и традиционной оценки по дисциплине для аттестации по экзамену/зачету определяется институтом/факультетом [1].

Дата добавления: 2017-01-14