L международная выставка-презентация
научных, технических, учебно-методических и литературно-художественных изданий

Научно-методические подходы к автоматизации оценки качества обучающих тестов (на примере обучения учителей математики)


ГруппаНаучная литература
Область науки
Общественные науки
Название на русском языкеНаучно-методические подходы к автоматизации оценки качества обучающих тестов (на примере обучения учителей математики)
Авторы на русском языкеВолкова Е.А.

Резюме

Исследование, результаты которого легли в основу монографии, начинается с 2006 года, с написания кандидатской диссертации и продолжается по настоящее время.

В рамках исследования был проведен глубокий и всесторонний анализ проблемы использования обучающего тестирования, в результате которого предложен современный подход решения проблемы объективности получаемых в результате тестирования данных.

Проведенное исследование научно-методических работ в области создания и использования средств оценивания качества педагогических тестов, реализованных с помощью информационных технологий, показало, что основная часть разработок в данной области направлена на осуществление автоматизации процесса отдельных промежуточных задач процедуры оценки качества, основанных преимущественно на обработке апостериорных данных, полученных после проведения апробации тестовых материалов на испытуемых.

Установлено, что в области обучающего тестирования автоматизированные системы оценки качества тестовых материалов, позволяющие диагностировать пригодность теста для использования в образовательном процессе, пока не разрабатывались.

Таким образом, выявлена необходимость разработки автоматизированной системы оценки качества обучающих тестов, назначением которой является обеспечение автоматизации деятельности по сбору, обработке и использованию информации в области оценки качества обучающих тестов.

Как показывает практика и результаты ежегодного единого государственного экзамена, в крупных регионах, таких как Свердловская область, очень неравномерны результаты итоговой аттестации, в небольших населенных пунктах они значительно ниже, чем в областном центре. Использование обучающих тестов при подготовке учащихся, позволит диагностировать, на каком этапе решения возникают проблемы, и требуется более детальная проработка учебного материала.

Также, качественно сконструированный обучающий тест, позволяет учащимся самостоятельно освоить определенные математические манипуляции и алгоритмы решения типовых задач.

Для выявления необходимой системы параметров обучающего теста, характеризующей его качество и пригодность для использования в образовательном процессе:

- обоснован состав параметров характеристик качества обучающего теста;

- обоснованы и сформулированы требования к значениям параметров качества обучающих тестов;

- для понятий надежность и валидность сделано уточнение их содержания применительно к обучающим тестам;

- обоснованы соответствующие параметры, отвечающие за уровень и характер усвоения обучающимися изучаемого материала: уровень сложности, степень равномерности, уровень альтернативности; а также группа параметров, характеризующих нормативность обучающего теста: уровень свернутости теста, длина, ширина, степень разветвленности и степень направленности теста на обучение.

Разработаны требования к значениям этих параметров. В результате проведенного анализа научных исследований в области педагогического тестирования нами были определены содержание понятий «обучающий тест» и «оценка качества обучающего теста».

Обоснованы требования к структуре автоматизированной системы оценки качества обучающих тестов, обоснованы требования к содержательному наполнению модулей автоматизированной системы оценки качества обучающих тестов.

Содержательной базой автоматизированной системы, на основе которой она создана, являются следующие источники: опубликованные издания, результаты нашего диссертационного исследования, информация экспертов в данной области. Обоснованы требования к функционированию системы, обеспечивающей реализацию следующих действий: ввод и вывод передача, прием, необходимой информации от пользователей и администратора; обеспечение вариативности в наглядном представлении информации; методическая поддержка в области использования автоматизированной системы; назначение прав доступа к функциям и ресурсам.

Разработана программная реализация автоматизированной системы оценки качества обучающих тестов, основанная на модульной структуре и функционирующая на базе объектно-ориентированного языка программирования.

Разработана структура и содержание курса обучения учителей математики в области автоматизации оценки качества обучающих тестов, состоящая из следующих разделов: основные теоретические подходы к рассмотрению обучающих тестов; параметры качества обучающих тестов и их определение; интерпретация результатов оценки качества обучающих тестов и их анализ для эффективного использования тестов в образовательном процессе; методика работы с автоматизированной системой оценки качества; разработка и оценка качества обучающих тестов на базе автоматизированной системы. Данный курс был неоднократно апробирован в рамках повышения квалификации педагогов Свердловской области, в частности в г. Екатеринбург и в г. Нижний Тагил.

Сформулированы требования к уровню обученности учителей математики в области применения автоматизации оценки качества обучающих тестов, определяющие основные:

а) знания в области: принципов разработки обучающих тестов; параметров, влияющих на качество тестов;

б) умения в области: разработки обучающих тестов, используя знания о параметрах качества, влияющих на эффективность использования тестов;

в) владение навыками: оценки качества обучающих тестов на базе автоматизированной системы; использование методических рекомендации по его улучшению.

Разработаны методические рекомендации по применению автоматизированной системы оценки качества обучающих тестов, содержащие: рекомендации по содержательному наполнению обучающих тестов и структурированию заданий в тесте, рекомендации по использованию обучающего теста в зависимости от значений параметров качества, а также описание направлений корректировки разработанных обучающих тестов.

Экспериментальная проверка уровня обученности учителей математики в области оценки качества обучающих тестов в условиях использования автоматизированной системы показала, что применение разработанных методических подходов к обучению учителей в рамках данного курса обеспечивает достижение большинством обучаемых (более 80%) базового уровня обученности в данной области с чем согласуется расчет репрезентативности выборки Pген = 85% ± 14,1% на уровне значимости α = 0,05. Изучение данного курса позволило большинству обучаемых получить необходимый запас знаний, умений и навыков в области автоматизации.

Научная новизна и теоретическая значимость исследования заключаются: в определении основных направлений использования средств информационных технологий в области педагогического тестирования; в обосновании состава параметров характеристик качества обучающего теста и в формулировании требований к их значениям; в разработке требований к значениям параметров обучающего теста, характеризующих нормативность, валидность, надежность и направленность теста на обучение; в обосновании требований к структуре и функционированию компонентов автоматизированной системы оценки качества обучающих тестов; в разработке требований к уровню обученности учителей математики в области оценки качества обучающих тестов.

Практическая значимость представленного издания состоит в том, что результаты доведены до уровня практического применения и реализованы:

- в спроектированной автором и разработанной автоматизированной системы оценки качества обучающих тестов;

- в разработке структуры и содержания курса обучения учителей математики в области оценки качества обучающих тестов с использованием автоматизированной системы;

- в разработке методических рекомендаций по использованию автоматизированной системы оценки качества обучающих тестов.

Разработанные материалы могут быть использованы в процессе обучения будущих учителей математики, а также в процессе подготовки, переподготовки и повышения квалификации учителей-предметников.

Издание "Научно-методические подходы к автоматизации оценки качества обучающих тестов (на примере обучения учителей математики)" (Волкова Е.А.) отмечено наградой
МЕДАЛЬ «ЗА ВЕРНОСТЬ ТРАДИЦИЯМ ОТЕЧЕСТВЕННОГО ОБРАЗОВАНИЯ» С УДОСТОВЕРЕНИЕМ