аспирантка СОГПИ
Компьютерное тестирование как актуальная технология контроля качества знаний студентов
Кардинальные перемены, происходящие в современном образовании: внедрение личностно-ориентированного подхода к обучению, моделей развивающих педагогических технологий — делают крайне актуальной задачу обеспечения качества знаний студентов. К числу наиболее признанных способов контроля качества знаний в мировой практике относится тестирование.
Контроль качества знаний студентов является одним из основных элементов оценки качества образования, важнейшим компонентом педагогической системы и частью учебного процесса. В объективной оценке качества знаний специалистов должны быть заинтересованы все субъекты педагогической деятельности, поскольку количественная и качественная стороны оценки уточняют сведения об уровне обеспечения страны профессиональными педагогическими кадрами. Учебный процесс в вузе представляет собой сложный объект управления, включающий сложное взаимодействие таких элементов, как целей обучения, содержания дисциплины, методов, организации, форм и средств обучения, и самое главное, контроля результатов обучения и коррекции. Знания студентов являются выходом системы управления учебным процессом вуза. Уровень достигнутых знаний характеризуется оценкой, полученной студентом, т. к. оценка – это информация, которая по каналу обратной связи поступает в управляющую систему, характеризует текущее состояние объекта управления и дает возможность вносить коррективы в учебный процесс. Студенты получают оценки на экзаменах, зачетах, а также проходя тестирование, которое является более объективным способом определения уровня знаний.
Тестовые технологии многофункциональны, но наиболее важной представляется их диагностическая функция, позволяющая получать информацию о готовности студентов к освоению дисциплины или образовательной программы, степени подготовки студента, определять уровень знаний, умений и навыков, выявлять возможные проблемы в обучении. Не менее важна и организующая функция тестирования. Преподаватель, получив возможность в короткие сроки подготавливать, проводить тесты, обрабатывать и анализировать их результаты, получает также и возможность проводить частые, регулярные контролирующие мероприятия по освоению изучаемой дисциплины. Это организует студентов, стимулирует их процесс учения. Используя банк тестовых вопросов по темам и разделам дисциплины, студенты имеют возможность самостоятельно проконтролировать собственные знания и оценить свою готовность к текущему, промежуточному и итоговому контролю знаний, оценить собственные достижения или недостатки в отношении результатов учебного процесса.
Сильной стороной тестового контроля знаний является возможность охватить в процессе тестирования большой объем материала и тем самым получить действительно широкое представление о знаниях тестируемого студента. Использование тестирования в реальной педагогической деятельности позволяет заметно повысить объективность, детальность и точность оценивания результатов процесса обучения. Кроме того, тесты могут быть применены студентом и в ходе самостоятельной работы для контроля качества усвоения материала. Сравнивать индивидуальные результаты тестирования можно путем сравнения либо с результатами других студентов, либо с прежними результатами того же студента, либо с поставленными учебными целями.
При проведении тестирования за несколько минут до окончания занятий преподаватель может увидеть вопросы, недостаточно хорошо понятые студентами, что стимулирует к совершенствованию методики чтения данной темы. Таким образом, промежуточное тестирование, фиксируя переход от одной темы к другой, в результате чего осуществляется постоянная обратная связь обучаемого с преподавателем, позволяет повысить эффективность процесса усвоения знаний. При применении тестовых заданий в межсессионный период осуществляется самоконтроль знаний студентов, а так же их контроль преподавателем. Тесты служат основой проверки знаний в качестве промежуточного контроля и контроля остаточных знаний студентов как после окончания изучения курса, так и перед выпускными квалификационными экзаменами. При проведении тестирования студентов-выпускников по дисциплинам, вынесенным на итоговую государственную аттестацию, осуществляется проверка уровня остаточных знаний.
По форме проведения тесты могут быть индивидуальными и групповыми. Если тестирование проводится с одним испытуемым, то такие тесты носят название индивидуальных, если с несколькими - групповых. Каждый тип тестов имеет свои достоинства и недостатки. Преимуществом групповых тестов является возможность охвата больших групп испытуемых одновременно (до нескольких сот человек), упрощение функций экспериментатора (чтение инструкций, точное соблюдение времени), более единообразные условия проведения, возможность обработки данных.
Основным недостатком групповых тестов является снижение возможностей у экспериментатора добиться взаимопонимания с испытуемыми, заинтересовать их. Кроме того, при групповом тестировании затруднен контроль за функциональным состоянием испытуемых, таким, как тревожность, утомление и др. Иногда для того, чтобы понять причины низких результатов по тесту какого-либо студента, следует провести дополнительное индивидуальное собеседование. Индивидуальные тесты лишены этих недостатков.
Не меньший интерес представляет изучение результатов тестирования для определения качества отдельно взятого практического задания или целого учебного модуля. Например, по результатам тестирования в нескольких группах по заданному разделу курса можно определить эффективность усвоения материала, учитывая при этом неравнозначность уровня подготовки тестируемого контингента учащихся.
В настоящее время наиболее часто используются следующие варианты тестовых контрольных мероприятий:
- «автоматический», когда обучаемый выполняет задание в непосредственном диалоге с компьютером, результаты сразу переносятся в блок обработки;
- «полуавтоматический», когда задания выполняются письменно, а ответы со специальных бланков вводятся в компьютер (решения не проверяются);
- «автоматизированный», когда задания выполняются письменно, решения проверяются преподавателем, а в компьютер вводятся результаты проверки.
Особенностью первых двух является отстраненность преподавателя от проверки результатов испытаний. В этом случае, казалось бы, их объективность повышается. Однако, при этом утрачивается значительная часть информации, которую можно было бы получить при анализе результатов тестирования с использованием человеческого фактора.
В «автоматическом» режиме такой потери можно избежать. Но при использовании такого метода на сегодняшний день возможно появление некоторых специфических проблем. К числу подобных проблем можно отнести.
1) Отсутствие полноценной оснащенности учебного заведения компьютерным оборудованием. Не все учебные заведения могут позволить себе оснастить классы дорогостоящим компьютерным оборудованием в достаточном количестве.
2) Отсутствие навыков «пользователя компьютеров» у обучаемых. Иногда приходится работать со студентами, у которых по каким-то причинам нет достаточной компьютерной подготовки, или же они вообще никогда не общались с компьютером.
3) Сложность и дороговизна разработки программного обеспечения.
4) Затрудненность распознания ответов произвольной формы в открытых текстовых заданиях.
В «автоматизированном» варианте система тестирования включает в себя испытательный материал - в качестве инструмента измерений, преподавателя-проверяющего в качестве независимого эксперта и компьютерную оболочку, выполняющую функции обработки результатов и учета ошибок измерения, выявления статистических закономерностей, сравнения результатов испытаний с прогнозируемыми, среднестатистическими, а также между собой.
Одним из наиболее актуальных направлений развития компьютерных технологий в образовании является разработка специализированных систем проверки знаний студентов. Их активное использование помогает поддерживать нужный образовательный уровень студентов, предоставляет преподавателю возможность уделять больше внимания индивидуальной работе со студентами. Положительной стороной данного опыта является то, что студенты находятся в одинаковых условиях, исключаются жалобы на необъективность экзаменатора.
Содержание теста определяется содержанием учебного курса. Для составления теста необходимо прежде всего представлять себе структуру знания, которым должен обладать студент по мере изучения и по итогам изучения того или иного учебного курса. Тест должен иметь известную меру трудности, выполнение его должно требовать напряжения. Задания должны быть краткими, ясными и корректными, не допускать двусмысленности. Все ответы в случае необходимости их выбора должны быть правдоподобными и равнопривлекательными. Работа над составлением тестов начинается со структурирования учебного курса, выделения в нем таких содержательных блоков, которые являются более или менее подходящими для проверки знаний. Затем определяется само понятие «знание» по каждой структурной единице и на этой основе составляется план теста. Тесты должны включать в себя проверку знаний определений, законов и принципов, формул и расчетов и т. п. Умение составлять тестовые задания приходит с опытом и является своего рода искусством. При составлении заданий необходимо придерживаться некоторых правил, основные из них следующие:
- содержание задания должно принадлежать одной предметной области и иметь определенную меру трудности;
- формулировки заданий должны быть краткими, четкими, корректными, не содержащими двусмысленности;
- предлагаемые варианты ответов должны быть короткими, равнопривлекательными и правдоподобными.
Форма тестовых заданий зависит от их содержания. В настоящее время в педагогике выработано четыре основных формы тестовых заданий, которые являются основой для составления тестов по любым учебным дисциплинам:
1. Задания закрытой формы. Инструкция: обвести кружком, либо, если применяется компьютер, и тестовые задания подаются на монитор, нажать клавишу с номером правильного ответа. Вариативность заданий закрытой формы весьма велика, но в основе всегда лежит один и тот же принцип: испытуемому предлагается выбрать ответ на задание из нескольких предложенных, причем только один из них является правильным. При этом подразумевается, что все предложенные варианты ответа являются равнопривлекательными.
2. Задания открытой формы. Инструкция: дополнить. В отличие от заданий закрытой формы здесь не предлагается вариантов ответа, а делается пропуск смысловой единицы в каком-либо утверждении, причем предполагается, что заполнить этот пропуск можно строго однозначно.
3. Задания на соответствие. Инструкция: установить соответствие. Здесь необходимо установить соответствие между смысловыми единицами в правом и левом столбиках, причем справа вариантов дается больше, чем слева, то есть заведомо предполагается, что какие-то из них являются в данном случае неправильными.
4. Задания на установление правильной последовательности. Инструкция: установить правильную последовательность. Достаточно сложная форма, проверяющая глубокие и прочные знания учебного материала. Смысл ее состоит в установлении последовательности каких-либо событий, действий, терминов и т. д. В пустых квадратиках надо расставить цифры.
Установлено, что студенты, как правило, предпочитают первую форму, очевидно, потому, что чисто психологически легче решать задачу, когда знаешь, что один из предложенных ответов является правильным. По этой же причине третья и четвертая формы, сами по себе отнюдь не простые и требующие помимо знаний определенных интеллектуальных усилий, также предпочитаются второй форме, которая менее всего ориентирована на догадку. Важнейшим условием корректности применения тестов является недоступность их проверяемым до начала самой проверки. Как только ключ к основным заданиям становится известным студентам, тестовые задания необходимо менять.
Основными характеристиками теста являются его надежность и валидность. Понятие надежности связано с точностью измерений. Поскольку абсолютно точное измерение невозможно ни в одной науке, вопрос заключается в оценке погрешности и в определении на этой основе истинного значения искомой величины. Понятие валидности связано с пригодностью теста для достижения поставленной цели. И та, и другая характеристики рассчитываются с помощью соответствующих математических методов. Итогом выполнения теста определенной группой студентов является матрица результатов. Если за каждое правильно выполненное задание ставится единица, а в противном случае ноль, то уровень знаний студента по проблематике данного теста будет выражен в определенной сумме баллов. Расставив студентов по возрастанию или убыванию, мы получим ранжированный ряд студентов соответственно уровню их знаний по данной дисциплине. Если такая ранжировка проводится регулярно в течение всего изучения предмета, то к экзамену преподаватель будет иметь достаточно четкое представление об уровне знаний студентов данного курса по своему предмету. Создается своеобразный рейтинг студентов по изучаемой дисциплине. По итогам выполнения тестовых заданий видны пробелы в знаниях каждого студента, что позволяет индивидуализировать подход преподавателя. Появляется возможность четко, по одним и тем же критериям сравнивать уровень знаний разных студентов. Возможна и объективная оценка достижений преподавателя по разнице между исходным уровнем знаний студентов, определяемым по входному тесту и конечным уровнем результатов итогового теста.
Каждый вуз стремится создать свою систему контроля качества образования, которая позволила бы учесть интересы всех заинтересованных сторон. Владикавказский институт управления регулярно проводит промежуточный контроль знаний студентов по каждому модулю по циклам дисциплин с помощью внутривузовской системы контроля качества обучения. В ВИУ по основным дисциплинам сформированы банки тестовых заданий в программе «Конструктор тестов АСТ». На усмотрение преподавателя банк заданий может быть представлен в полном или частичном объеме в Учебно-методическом комплексе и выставлен в обмене института. В существующих системах тестирования предлагается, что преподаватель заранее выбирает определенную шкалу оценок. На сегодняшний день в нашем вузе студенты специальностей «Юриспруденция», «Финансы и кредит», «Таможенное дело» и «Государственное и муниципальное управление».
Также по предложению Национального аккредитационного агентства в сфере образования (Росаккредагентство) Владикавказский институт управления регулярно принимает участие в «Федеральном Интернет-экзамене в сфере профессионального образования» (ФЭПО). В декабре 2008 года мы участвовали уже в четвертый раз.
Оперативное получение результатов Интернет-экзамена позволяет использовать их в накопительной системе оценки знаний, вводимой в институте.
Кроме того, показатели, полученные на основе единой (общероссийской) технологии проведения тестирования, позволяют выстроить объективную систему гарантий качества образования. Это основной показатель в оценке эффективности нашей работы.
Подробный анализ результатов нашего участия в Интернет-экзамене ФЭПО представлен в информационно-аналитической карте, подготовленной Росаккредагентством. Показателей в ней множество, они представлены по разным критериям. Назовем один из них.
Педагогический анализ результатов Интернет-экзамена позволяет решить задачу отработки системы анализа результатов с целью ее использования на различных уровнях организации педагогического процесса в образовательном учреждении (ректорат – деканат – кафедра – преподаватель – студент) на основе разнообразных методов представления результатов. Специфика педагогических измерений, проводимых в рамках Интернет-экзамена, вытекает из поставленной цели – оценки степени соответствия подготовки студентов требованиям государственных образовательных стандартов, поэтому на первый план выносится характеристика качества подготовки группы студентов, а не отдельного студента.
Степень соответствия содержания и качества подготовки студентов требованиям государственных образовательных стандартов (ГОС) устанавливается согласно модели освоения совокупности дидактических единиц. Подготовка студента считается соответствующей требованиям стандарта, если он освоил все дидактические единицы (ДЕ) дисциплины. Для основной образовательной программы (ООП) показателем освоения дисциплины является доля студентов, освоивших все ДЕ дисциплины.
Единая система тестирования и оценки, предоставление подробного отчета позволяют судить о качестве подготовки студентов, выявлять слабые и сильные стороны в преподавании конкретных дисциплин. А оперативное получение результатов Интернет-экзамена позволяет использовать их в накопительной (рейтинговой) системе оценки знаний студентов.
Изучение проблемы качества образования, управления качеством образования, оценки качества знаний стало предметом многих исследований.
Качество знаний студентов является одним из ключевых объектов оценки качества образования. Проверка и оценка качества обучения - процесс сложный и многоплановый, и работа в этой области должна проводиться в нескольких направлениях: функции проверки в общей системе обучения; методика проверки и оценки знаний; принципы построения критериев и шкал измерения. Сегодня в качестве инновационных средств используют тестирование, модульную и рейтинговую системы оценки качества знаний.
Тестирование является одной из наиболее технологичных форм проведения автоматизированного контроля с управляемыми параметрами качества. В этом смысле ни одна из известных форм контроля знаний учащихся с тестированием сравниться не может. Тесты применяются на всех этапах дидактического процесса, что позволяет обеспечить эффективный предварительный, текущий, тематический и итоговый контроль знаний, умений, учет успеваемости, академических достижений. Сильной стороной тестового контроля знаний является возможность охватить в процессе тестирования большой объем материала и тем самым получить действительно широкое представление о знаниях тестируемого студента. Использование тестирования в реальной педагогической деятельности позволяет заметно повысить объективность, детальность и точность оценивания результатов процесса обучения.
Примечания:
1. ИТО-2006. ПНН «Образование». С. 15
2. Яцуто технологии как средство оценки качества знаний студентов педагогического ВУЗа. http//www. *****/info/books/favorits/283.
3. Информационные технологии для будущих экономистов//Высшее образование в России. №1, 1999. С. 113-116.
4. Владимиров создания системы тестового контроля на историческом факультете/ http//hist. *****/aik/testcont. htm
5. , , О компьютерной технологии оценки качества знаний//Высшее образование в России. №3, 1993. С. 146-153.
