Использование систем автоматизированного контроля знаний в профессиональной деятельности педагога Г. Соколова, С. Моркин
Рекомендовано УМО по направлениям педагогического образования в качестве учебно-методического пособия для студентов высших учебных заведений (Б.2-Информационные технологии в образовании)
Рецензенты:
Е. Ю. Панов, заведующий кафедрой математического анализа НовГУ имени Ярослава Мудрого, доктор физико-математических наук, профессор
А. В. Смирнов, профессор кафедры теории и методики обучения физике МПГУ, доктор педагогических наук
Введение
Учебно-методическое пособие предназначено для студентов педагогических направлений и специальностей, изучающих информационные технологии (ИТ), обеспечивающие профессионально-образовательную деятельность будущих педагогов необходимым формированием общекультурных и профессиональных компетенций в творческой деятельности.
Достаточно аргументировано раскрываются основные понятия тестирования, виды тестирования, формы тестовых заданий, правила составления заданий для компьютерного тестирования.
Для проверки приобретаемых знаний, умений и навыков, а также приобретения ИКТ – опыта предложены широко известные в информационно-образовательной среде системы автоматизированного контроля знаний, таких как My Test,Hot Potatoes, Система тестирования 2.2, среда Flash.
В учебно-методическом пособии подробно раскрываются требования к тестам, основные положения (правила) для подготовки учебных материалов для тестового контроля. Поэтому, вполне обоснованно раскрывается целесообразность использования методических аспектов в соответствии с ФГОС нового поколения.
Вопросы отличаются определенной структурированностью, последовательностью, логикой.
1. Компьютерный тест и его особенности
1.1 Основные понятия
Определение 1.Тестирование – аттестационная процедура, позволяющая максимально объективно оценивать соответствия личностной модели знаний ученика экспертной модели знаний. Главная цель тестирования – обнаружение несоответствия этих моделей, оценка уровня их несоответствия в количественной форме. Тестирование проводится с помощью специальных тестов, состоящих из заданного набора тестовых заданий, в равных для всех испытуемых условиях.
Определение 2.Тест – это инструмент, состоящий из статистически выверенной системы заданий, стандартизированной процедуры проведения и заранее спроектированной технологии обработки и анализа результатов, предназначенных для измерения качеств и свойств личности, изменение которых возможно в результате систематического обучения.
Определение 3.Тестовое задание – это четкое и ясное задание по предметной области, представленное по определенным правилам и требующее однозначного ответа или выполнения определенного алгоритма действий.
Определение 4.Остаточное знание (ОЗ) – совокупность знаний, которые должен показать студент по истечении 1 года после завершения изучения дисциплины. Контролирующие задания для оценки ОЗ должны строиться согласно рабочей программе дисциплины и требованиям государственного образовательного стандарта. Контролирующие задания можно рассматривать по уровням сложности:
✓ первый уровень сложности – проверка ОЗ по тем же заданиям, которые были предложены в качестве итоговых заданий/тестов по завершению изучения дисциплины;
✓ второй уровень сложности предполагает проверку основополагающих сведений изучаемой дисциплины без рассмотрения тонкостей вопроса.
1.2 Виды компьютерного тестирования
✓ централизованное тестирование по контрольным материалам, разработанным в соответствующих УМО, ассигнованных министерством центрах;
✓ аттестационное тестирование (при самообследовании, подтверждение государственной лицензии);
✓ итоговое тестирование по оценке соответствия полученных в процессе обучения знаний по конкретной дисциплине требованиям государственного образовательного стандарта;
✓ рубежное и текущее тестирование по оценке подготовленности в процессе изучения дисциплины;
✓ оценка остаточных знаний обучаемых.
Методом компьютерного контроля/тестирования можно получить объективную, оперативную, достоверную информацию о знаниях, полученных в процессе обучения и о готовности обучаемых к восприятию нового материала.
Компьютерное тестирование имеет ряд преимуществ:
✓ обеспечение стандартизации;
✓ обеспечение индивидуальности процедуры контроля;
✓ повышение объективности контроля и исключения субъективных факторов (усталость преподавателя и его эмоциональность или плохое настроение, отсутствие или недостаточность времени для личного общения с преподавателем, другое);
✓ оперативность статистической обработки результатов контроля;
✓ доступность для обучающегося к полной информации о результатах контроля;
✓ обеспечение возможности преподавателю быстрой проверки знаний большого количества обучаемых по разным темам, выполнению заданий, дисциплине в комплексе;
✓ освобождение преподавателя от выполнения повторяющейся трудоёмкой и рутинной работы по организации массового контроля, высвобождение времени для творческого совершенствования разных аспектов его профессиональной деятельности;
✓ обеспечение всесторонней и полной проверки;
✓ обеспечение возможности обучающемуся самопроверки освоения материала в том режиме работы как это ему удобно (сетевой режим доступа контролирующим системам и измерительным материалам);
✓ доступности и равноправия всех участников процедуры тестирования.
Компьютерное тестирование имеет ряд недостатков, выделим два основных:
✓ исключение из процедуры контроля устного речевого компонента;
✓ снижение потребности выбора главного в прочитанном. Рафинированное представление задания не способствует развитию личности.
1.3 Разработка контрольных заданий для компьютерного тестирования
Самой сложной задачей для педагога является задача разработки тестов, которые позволяют максимально объективно оценить уровень соответствия или несоответствия личностной модели знаний ученика и экспертной модели знаний. Разработка тестовых материалов для любой формы контроля (бланкового или компьютерного) должна удовлетворять определенным принципам, выработанным требованиям, правилам оформления и удовлетворять требованиям экспертов по оценке тестовых заданий.
1.3.1 Требования, предъявляемые к контролирующим заданиям
К основным требованиям, предъявляемым к любым контролирующим заданиям, в том числе и для компьютерного тестирования, обычно относят следующее:
✓ валидность;
✓ определенность (общепонятность);
✓ однозначность;
✓ понятный язык изложения;
✓ доступность;
✓ простота;
✓ краткость заданий;
✓ обоснованность эталона ответа;
✓ надежность.
Валидность теста – это адекватность. Различают содержательную и функциональную валидность: первая – это соответствие теста содержанию контролируемого учебного материала, вторая – соответствие теста оцениваемому уровню деятельности.
Требование определенности теста необходимо для однозначное понимания обучающимся того, что он должен выполнить.
Однозначность следует рассматривать в двух аспектах:
1 – однозначность содержательная, что необходимо для понимания теста всеми участниками процесса тестирования именно только так как написано;
2 – однозначность оценки качества выполнения теста, т. е. единство правил оценки ответов в рамках принятой формы.
Понятный язык изложения. Тестовое задание должно иметь ясный смысл, исключающий какие-либо другие толкования или интерпретации. Должны исключаться малопонятные и редко употребляемые слова, а также неизвестные символы, иностранные слова, затрудняющие восприятие смысла.
Требование простоты теста означает, что тест должен иметь одно задание одного уровня, т. е. не должен быть комплексным и состоять из нескольких заданий разного уровня.
Краткость заданий. Способ представления теста. Краткость заданий должна обеспечиваться тщательным анализом содержания каждого слова, символа, их толкования в словарях русского языка и иностранных слов, в различных энциклопедиях и т. д.
Обоснованность эталона ответа на тестовое задание.
Эталон ответа на тестовое задание разрабатывается заранее опытным преподавателем и согласовывается с научно-методической комиссией. Эталон ответа – это краткое суждение, связанное как по содержанию, так и по форме с содержанием задания.
Понятие надежности тестирования определяют как, вероятность правильного измерения величины. Требование надежности заключается в обеспечении устойчивости результатов многократного тестирования одного и того же испытуемого. Надежность теста или блока тестов растет с увеличением количества осуществляемых операций.
При организации тестирования ни одному испытуемому не дается никаких преимуществ перед другими испытуемыми. Все отвечают на задания, которые охватывают учебные элементы, составляющие основу структуры содержания обучения по данной специальности, всем даётся одинаковое время. Правила оценки выполнения задания определяются заранее и абсолютно одинаково должны применяться ко всем испытуемым.
При создании таких тестов встают некоторые вопросы:
1) Сколько заданий нужно включить в тест для надёжной оценки достижения каждой из конкретных учебных целей?
2) Какая доля заданий должна быть выполнена правильно для надёжного установления владения предметом?
Оценочные процедуры или анализ субъективных оценок экспертами создаваемых контрольно-измерительных материалов более полезны на начальном и заключительном этапах конструирования теста.