II. Базовые требования к тестам
Методические рекомендации по составлению контролирующих тестов и внедрению тестирования в образовательный процесс
Введение
Создание системы оценки качества образования – одна из основных задач в сфере реформирования и модернизации образования. Один из элементов системы оценки качества – тестирование учебных достижений студентов. Система тестирования – универсальный инструмент определения уровня обученности студентов на всех этапах образовательного процесса, в том числе для оценки уровня остаточных знаний.
Тест обладает способностью сравнивать индивидуальный уровень знания каждого студента с некими эталонами, уровень знания отражается в тестовом балле испытуемого. Индивидуальные результаты тестирования можно сравнить с результатами других студентов этой же группы и проранжировать их, можно сравнить результаты тестирования нескольких групп и т.д.
Помимо уровня знаний с помощью теста можно оценить структуру знаний, то есть установитьналичие последовательности в усвоенных обучающимися знаниях, отсутствие пробелов.
Методические рекомендации для разработки банков тестовых заданий имеют целью определить единые требования к разработке тестов по учебным дисциплинам, предназначенных для проверки уровня и структуры знаний студентов СПб филиала ГУ-ВШЭ. Внедрение единой системы тестирования, позволит оптимизировать образовательный процесс и контроль качества подготовки бакалавров, специалистов и магистров.
|
|
|
Объективность результатов тестирования в первую очередь, зависит от качества тестовых материалов, поэтому при разработке необходимо учитывать комплекс требований, диктуемых, с одной стороны положениями теории и практики тестирования, а с другой стороны - особенностями и возможностями СПб филиала ГУ-ВШЭ.
Методические рекомендации помогут унифицировать тестовые материалы и технологии тестирования с сохранением возможности для кафедр самостоятельного выбора, дополнения тестовых заданий и совершенствования технологии, отражающих специфику и возможности каждой кафедры. Тестирование - лишь один из способов оценки качества подготовки студентов. Тестирование не заменяет, а дополняет другие формы диагностики, контроля и оценки уровня обученности, традиционно применяющиеся в СПб филиале ГУ-ВШЭ.
Методические рекомендации призваны способствовать:
- формированию культуры тестирования в системе оценки качества обученности студентов;
- повышению объективности процессов и результатов оценки учебных достижений студентов; - созданию необходимых предпосылок и условий для совершенствования содержания и структуры образовательного процесса;
|
|
|
- повышению уровня квалификации преподавателей, непосредственно разрабатывающих и применяющих тестовые материалы.
I. Основные понятия и определения
Тестирование - (в теории) метод выявления и оценки уровня учебных достижений обучающихся, осуществляемый посредствам стандартизированных материалов - тестовых заданий; (на практике) технологический процесс, реализуемый в форме алгоритмически упорядоченного взаимодействия студента с системой тестовых заданий и завершающийся оцениванием результатов.
Тестовое задание (ТЗ) - варьирующаяся по элементам содержания и по трудности единица контрольного материала, сформулированная в утвердительной форме предложения с неизвестным. Подстановка правильного ответа вместо неизвестного компонента превращает задание в истинное высказывание, подстановка неправильного ответа приводит к образованию ложного высказывания, что свидетельствует о незнании студентом данного учебного материала.
Трудность ТЗ - количество мыслительных операций и характер логических связей между ними, характеризующих продолжительность поиска и нахождения верного решения.
|
|
|
Тест - система заданий, возрастающей трудности, специфической формы, позволяющая качественно и эффективно определить уровень и оценить структуру подготовленности тестируемого.
Контролирующий тест - тест, выступающий в качестве метода или способа измерения уровня и структуры знаний обучающихся.
Банк тестовых заданий (БТЗ) – логически упорядоченный набор тестовых заданий, позволяющих генерировать множество тестов.
Спецификация теста - система характеристик теста, отражающая его содержание и структуру.
Надежность теста – характеристика теста, свидетельствующая о постоянстве эмпирических измерений, то есть многократном повторении.
Валидность теста — действительная способность теста измерять ту характеристику, для диагностики которой он заявлен.
Дистрактор - близкий искомому по своему смыслу вариант ответа, но не являющийся таковым.
II. Базовые требования к тестам
1. Соответствие требованиям ГОС и учебной программы дисциплины.
2. Соответствие количества ТЗ в банках объему разделов и тем учебных дисциплин.
3. Постоянное обновление и пополнение БТЗ с целью сохранения надежности и отражения изменений в теории и практике учебных дисциплин.
|
|
|
4. Количество заданий в БТЗ должно превышать длину формируемого на его основе теста.
5. Тест должен сопровождаться спецификацией с информацией о содержательной части, качественных показателях и физических характеристиках.
6. Содержание ТЗ должно отражать знания, умения, навыки,которые необходимо проверить.
7. Содержание каждого ТЗ должно охватывать какую-либо одну смысловую единицу, то есть должно оценивать что-то одно.
8. Наличие ТЗ различной тестовой формы и категорий трудности.
9. Ориентация ТЗ на получение однозначного заключения.
10. Формулировка содержания ТЗ в виде свернутых кратких суждений. Рекомендуемое количество слов в задании не более 15. В тексте не должно быть преднамеренных подсказок и сленга, а также оценочных суждений автора ТЗ. Формулировка ТЗ должна быть в повествовательной форме (не в форме вопроса). По возможности, текст ТЗ не должен содержать сложноподчиненные конструкции, повелительного наклонения ("выберите", "вычислите", "укажите" и т.д). Специфический признак (ключевое слово) выносится в начало ТЗ. Не рекомендуется начинать ТЗ с предлога, союза, частицы.
11. Применение различных форм представления ТЗ, в том числе графических и мультемедийных (для компьютерного тестирования), если это обусловлено содержанием ТЗ.
12. Среднее время заключения студента на ТЗ не должно превышать 1,5 мин. Общее время на решение теста – не более 1,5 часов.
13. Соблюдение единого стиля оформления ТЗ, входящих в один тест.
III. Структура теста Основными структурными компонентами теста являются:
1.Спецификация теста
2. Инструкция для тестируемых
3. Основной текст
4. Инструкция для проверяющих
1. Спецификация теста
В спецификации теста описываются основные характеристики теста (Приложение 1). К характеристикам теста относятся: название; цель теста; содержание теста; характеристика ТЗ по форме и уровню трудности; алгоритм формирования теста из БТЗ; правила оценки результатов тестирования.
1.1. Название теста отражает тип теста – контролирующий и название учебной дисциплины.
1.2. Для контролирующих тестов основной целью является проверка (контроль) усвоенных обучающимися знаний и навыков по конкретной учебной дисциплине. Целью текущего контроля является проверка знаний и навыков по одной или нескольким темам учебной дисциплины, по одному разделу. Целью итогового контроля является проверка знаний и навыков по всей учебной дисциплине в целом. Целью может быть проверка уровня остаточных знаний по дисциплине.
1.3. Тест должен полно отражать содержание учебной дисциплины и соответствовать содержанию ГОС и содержанию программы учебной дисциплины. В этом разделе спецификации перечисляются:
ƒ основные разделы учебной дисциплины;
ƒ основные темы учебной дисциплины;
ƒ процентное соотношение разделов или тем учебной дисциплины, представленных в тесте;
ƒ номера заданий по каждой теме.
Полнота отражения материала учебной дисциплины особенно важна для тестов, контролирующих уровень остаточных знаний. Чем полнее тест, тем точнее оценка уровня знаний испытуемых. Тест должен отражать все ключевые аспекты учебной дисциплины при соблюдении правильных пропорций. Если сместить пропорции, например, перенасытить тест заданиями тех тем учебной дисциплины, по которым легче всего составить задания, в этом случае какая-либо тема будет представлена в тесте не достаточно полно, следовательно, будет снижена содержательная валидность теста.
Тест может включать в себя базовую и вариативнуючасти. Содержание базовой части должно полностью соответствовать содержанию ГОС. По сравнению с вариативной она должна занимать не менее 70% теста. Вариативная часть может состоять из более трудных заданий, ориентированных на более сильных студентов, или из заданий, отражающих авторские особенности программы дисциплины.
1.4. Характеристика ТЗ может быть представлена в виде таблицы, в которой указывается соответствие № тестового задания разделу или теме учебной дисциплины, а также уровень трудности и форма предъявления. (Приложение 1)
1.5. Алгоритм формирования теста может быть строгим или случайным. При использовании алгоритма строгой последовательности необходимо указать порядок следования тестовых заданий.
1.6. Правила оценкитестовых заданий и теста. За выполнение каждого тестового задания испытуемому выставляются баллы. Необходимо указать тип используемой шкалы оценивания.
Номинальная шкала предполагает, что за правильный ответ к каждому заданию выставляется один балл, за не правильный — ноль. В соответствии с номинальной шкалой, оценивается всё задание в целом, а не какая-либо из его частей.
В заданиях с выбором нескольких верных ответов, заданиях на установление правильной последовательности, заданиях на установление соответствия, заданиях открытой формы можно использовать порядковую шкалу. В этом случае баллы выставляются не за всё задание, а за тот или иной выбор в каждом задании, например, выбор варианта, выбор соответствия, выбор ранга, выбор дополнения.
В соответствии с порядковой шкалой за каждое задание устанавливается максимальное количество баллов, например, три. Три балла выставляются за все верные выборы в одном задании, два балла - за одну ошибку, один - за две ошибки, ноль — за полностью неверный ответ.
Правила оценки всего теста. Общая сумма баллов за все правильные ответы составляет наивысший балл, например 90 баллов. В спецификации указывается общий наивысший балл по тесту. Также устанавливается диапазон баллов, которые необходимо набрать для того, чтобы получить отличную, хорошую, удовлетворительную или неудовлетворительную оценки.
В процентном соотношении оценки (по пятибалльной системе) рекомендуется выставлять в следующих диапазонах:
“2”- менее 50%
“3”- 50%-65%
“4”- 65%-85%
“5”- 85%-100%
2. Инструкция для тестируемых является обязательной составной частью теста. Она должна быть короткой, понятной и общей для всех испытуемых. Инструкция даёт разъяснения, как необходимо отвечать на задания теста. В инструкции сообщается время, в течение которого слушателям необходимо выполнить тест, тип шкалы оценивания.
(Приложение 4)
3. При составлении основного текста необходимо учитывать следующие требования к тестовым заданиям:
- соответствие определённой форме; - наличие композиции.
Композиция включает в себя содержание задания и содержание и число ответов или место для ответов.
4. Инструкция для проверяющих является обязательной составной частью контролирующего теста. Инструкция предназначена преподавателям, которые должны проверить тест. Инструкция не выдаётся тестируемым. Инструкция для проверяющих содержит: ƒ правила оценки ТЗ; ƒ правила оценки всего теста; ƒ ключ к тесту.
IV. Требования к формам ТЗ
ТЗ может быть представлено в одной из четырех стандартизованных форм (Приложение 2):
1. Закрытой (с выбором одного или нескольких заключений)
2. Открытой
3. На установление правильной последовательности
4. На установление соответствия
Выбор формы ТЗ зависит от того, какой вид знаний[1] следует проверить. Так, для оценки фактологических знаний (знаний конкретных фактов, названий, имён, дат, понятий) лучше использовать тестовые задания закрытой или открытой формы. Ассоциативных знаний (знаний о взаимосвязи определений и фактов, авторов и их теорий, сущности и явления, о соотношении между различными предметами, законами, датами) - заданий на установление соответствия. Процессуальных знаний (знаний правильной последовательности различных действий, процессов) - заданий на определение правильной последовательности.
Нужно помнить о том, что форма предъявления ТЗ влияет на его уровень трудности. Самые легкие – задания закрытого типа с единичным выбором, так как направлены на воспроизведение имеющихся знаний. Самая трудная форма ТЗ - на упорядочение и на соответствие. Открытая форма, ТЗ закрытой формы с несколькими правильными ответами - ТЗ со средним уровнем сложности.
Оптимальное соотношение ТЗ по форме в тесте 25%/25%/25%/25%. Допустимое минимальное для заданий на упорядочение и соответствие 10-15%.
Дата добавления: 2020-12-22; просмотров: 102; Мы поможем в написании вашей работы! |
Мы поможем в написании ваших работ!