Педагогические науки / 5.
Современные методы преподавания
К.т.н., доцент Фадеева
Г.А., инженер Гайкович Е.Л.
Белорусский национальный технический университет,
Беларусь
ПРИНЦИПЫ ОЦЕНКИ КАЧЕСТВА
ТЕСТОВЫХ ЗАДАНИЙ
Одним из существенных элементов процесса обучения
является проверка знаний, умений, и навыков, приобретаемых студентами.
Разработка оперативной системы контроля, позволяющей объективно оценивать
знания студентов, выявляя имеющиеся пробелы и определяя способы их ликвидации,
- одно из условий совершенствования процесса обучения.
Автоматизированный
контроль знаний с использованием тестирующих программ позволяет преподавателям повысить объективность,
углубить и ускорить процесс проверки знаний студентов, а использование
студентами тестов по разделам изучаемых дисциплин позволяет проверять уровень
собственной подготовки.
На кафедре
«Электрические системы» Белорусского национального технического университета разработана система тестовых заданий по ряду
специальных дисциплин и дисциплин специализаций. Выбранная оболочка создания
тестовых заданий «Easy tests» универсальна и проста в использовании, что позволяет
каждому преподавателю создать систему тестовых заданий по любой дисциплине.
Для оценки качества разработанных
тестовых заданий по дисциплине «Эксплуатация энергосистем» было проведено
тестирование в двух группах студентов заочной формы обучения, изучающих
указанную дисциплину. Всего прошло тестирование 40 студентов, большинство из
которых работает в области эксплуатации электрооборудования. Собранные эмпирические
результаты тестирования были подвергнуты математико-статистической обработке,
что позволило оценить качество разработанных тестовых заданий и внести в них
необходимые изменения.
Результаты
ответов оценивались
дихотомически, т.е. за каждый правильный
ответ студент получал один балл, а за неправильный ответ или за пропуск задания — ноль баллов.
Таблица - Пример матрицы
результатов тестирования
|
Студенты |
Задания по разделу 1 |
|||||||||
|
1 |
2 |
3 |
4 |
5 |
6 |
7 |
8 |
9 |
10 |
|
|
1 |
1 |
1 |
1 |
0 |
1 |
1 |
1 |
1 |
1 |
1 |
|
2 |
1 |
1 |
0 |
1 |
1 |
1 |
1 |
1 |
1 |
0 |
|
3 |
1 |
1 |
1 |
1 |
0 |
1 |
1 |
0 |
1 |
0 |
|
4 |
1 |
1 |
1 |
1 |
0 |
1 |
0 |
1 |
0 |
0 |
|
5 |
1 |
1 |
1 |
1 |
1 |
1 |
0 |
0 |
0 |
0 |
|
6 |
1 |
1 |
1 |
1 |
0 |
0 |
1 |
0 |
0 |
0 |
|
7 |
1 |
1 |
0 |
1 |
1 |
0 |
1 |
0 |
0 |
0 |
|
8 |
0 |
1 |
1 |
1 |
1 |
0 |
0 |
0 |
0 |
0 |
|
9 |
1 |
0 |
1 |
0 |
1 |
1 |
0 |
0 |
1 |
1 |
|
10 |
1 |
0 |
1 |
0 |
0 |
1 |
0 |
0 |
0 |
0 |
Статистическим показателем оценки трудности
заданий является доля правильных ответов:
, (1)
где Rj – количество правильных
ответов, полученных по j – му заданию;
N - число испытуемых (студентов).
Показателем трудности заданий может также
служить противоположная характеристика - доля неправильных ответов:
, (2)
где Wj - число неправильных
ответов, полученных по j – му заданию;
N - число испытуемых (студентов).
В современных технологиях адаптивного
обучения и контроля знаний используется еще один показатель оценки - логит трудности задания [1]:
. (3)
Используется также оценка уровня
знаний - логит уровня знаний:
, (4)
где рi - доля правильных
ответов конкретного испытуемого (студента), рассчитываемая по формуле:
, (5)
здесь Ri –
количество правильных ответов i - го испытуемого;
K - общее количество выполненных студентом заданий.
Меры
центральной тенденции в
определенной степени помогают при оценке качества теста в том случае, когда она проводится по результатам апробации теста на репрезентативной выборке студентов. Обычно
считают, что хороший
нормативно-ориентированный тест обеспечивает нормальное распределение индивидуальных баллов, когда среднее значение баллов находится в центре распределения, а остальные значения
концентрируются вокруг среднего по нормальному закону, рис. 1 [2].
Рис. 1 - Нормальная кривая
распределения индивидуальных баллов
Пример результатов проведенного
тестирования студентов представлен на рис. 2.
Результаты тестирования
показывают распределение положительных ответов близкое к нормальному. Это
означает, что на основе данного теста можно определить устойчивое среднее
значение баллов, которое принимается в качестве одной из репрезентативных норм
выполнения теста.
Автоматизации контроля знаний при качественной научно-методической
подготовке может позволить существенно повысить, прежде всего, индивидуальность
самого контроля, варьировать его в зависимости от способностей и
образовательных ценностей студентов.
Еще одним важным аспектом применения
автоматизированного контроля становится стимулирование и мотивирование
студентов к самообразовательной деятельности.
Количество
выполненных заданий
Рис. 2 – Гистограмма эмпирического
распределения ответов по разделу «Противоаварийная автоматика и
оперативно-диспетчерское управление режимами электроэнергетических систем»
Литература
1.
Аванесов В.С. Основы
научной организации педагогического контроля в высшей школе. — М.: МИСиС, 1989.
– 168 с.
2.
Челышкова
М. Б. Теория и практика конструирования
педагогических тестов: Учебное пособие. - М.: Логос, 2002. - 432 с.