Руководство пользователя по созданию педагогических тестов в программе JTEditor
Для работы с педагогическими тестами предназначена программа JTEditor. Последняя версия программы доступна на сайте http://cit. orensau. ru в разделе Помощь, так же на сайте доступны видео уроки по работе с программой.
Основные функции JTEditor:
· создание, редактирование и компиляция педагогических тестов в формат TST (внутренний формат информационной системы проведения электронной сессии);
· проверка соответствия педагогических тестов методическим указаниям;
· защита педагогических тестов паролем доступа на открытие их в редакторе.
Ошибки, выявляемые при проверке педагогического теста можно разделить на ошибки структуры и ошибки несоответствия методическим нормам.
Ошибки структуры:
1. «Нет названия педагогического теста». Название педагогического теста формируется из названия специальности, названия дисциплины и имени автора педагогического теста. (См. пункт 4.8 методических указаний)
2. «Не задано поле “Специальность”» (См. пункт 4.8 методических указаний)
3. «Не задано поле “Дисциплина”» (См. пункт 4.8 методических указаний)
4. «Не задано поле “Автор”» (См. пункт 4.8 методических указаний)
5. «Не задано поле “Дата создания теста”» (См. пункт 4.8 методических указаний)
6. «Время, выделенное на педагогический тест должно быть не нулевым» (См. пункт 4.8 методических указаний)
7. «Отсутствуют возможные результаты прохождения теста». В педагогическом тесте должна присутствовать шкала оценок. (См. пункт 4.8 методических указаний)
8. «Результат N не содержит строки результата». Ошибкой считается указание результата, но без указания отображаемого результата. (См. пункт 4.8 методических указаний)
9. «Результат N число баллов должно принадлежать [0..100]» (См. пункт 4.8 методических указаний)
10. «Отсутствуют вопросы» (См. пункт 4.4 методических указаний)
11. «Задание N пустое». В педагогическом тесте не допускаются задания, не содержащие вопроса.
12. «Задание N не содержит вариантов ответа». В педагогическом тесте не допускаются задания, не содержащие ни одного варианта ответа.
13. «В задании N ответ M пустой» В педагогическом тесте не допускаются варианты ответа, не содержащие текста ответа.
14. «В задании N встречаются одинаковые ответы». Запрещено указывать несколько ответов, содержащих одинаковый текст.
15. «Задание N имеющее тип “ОдинПрав” должно содержать один правильный вариант ответа»
16. «В педагогическом тесте встречаются одинаковые задания». Запрещено указывать несколько заданий с одинаковым текстом вопроса.
Ошибки несоответствия методическим нормам:
1. «В педагогическом тесте меньше N вопросов»
Пункт 4.4 методических указаний: «Общее число тестовых заданий в педагогическом тесте должно быть не менее 200. Соответствующий требованиям настоящего Положения педагогический тест с количеством тестовых заданий более 500 включается в университетский банк педагогических тестов.
2. «Недопустимая длина текста задания (M слов, максимум - N слов)»
Пункт 4.15.1 методических указаний: «Формулировка тестового заданий не должна содержать сложноподчиненных предложений, необходимо придерживаться краткости, ясности, четкости и повествовательной формы»
3. «Недопустимое число вариантов ответов (M, для закрытой формы - [n..N])»
Пункт 4.15.3 методических указаний: «Количество вариантов ответов для закрытых форм тестовых заданий должно быть от 4 до 7, для заданий на упорядочивание и установление соответствия от 5 до 7»
4. «Недопустимое число вариантов ответов (M, задания последовательности / соответствия - [n..N]»
Пункт 4.15.3 методических указаний: «Количество вариантов ответов для закрытых форм тестовых заданий должно быть от 4 до 7, для заданий на упорядочивание и установление соответствия от 5 до 7»
5. «Текст содержит повелительное наклонение (…).»
Пункт 4.15.9 методических указаний: «Не рекомендуется использовать в формулировке тестового задания повелительное наклонение (выберите, укажите, вычислите и т. д.)»
6. «Текст содержит обобщающие слова (…)»
Пункт 4.15.10 методических указаний: «Не рекомендуется использовать в заданиях и ответах обобщающих слов, таких как “всегда”, “никогда”, “иногда” и т. п.»
7. «Недопустимая длинна варианта ответа N (M слов, максимум - K)»
8. «Вариант N содержит недопустимые слова (…)»
Пункт 4.15.11 методических указаний: «Не допускается использовать в формулировках ответов слова, такие как “все правильные”, “все верные”, “все неверные” и т. п.»
9. «Длина вариантов ответов различается более, чем на N%»
Пункт 4.15.4 методических указаний: «Длина ответов должны быть примерно одинакова»
10. «Процент заданий с закрытой формой выбора ответа должен составлять не менее N% от всех вопросов теста. Сейчас – M%»
Пункт 4.11 методических указаний: «Тестовые задания в закрытой форме состоят из основы (теста, иллюстраций и т. д.) и нескольких вариантов ответов, один (или несколько) среди которых является верным, трансформирующим основной тест задания в истинное суждение. Остальные ответы являются неверными, поскольку преобразуют текст задания в ложное суждение. Доля тестовых заданий закрытой формы в базе тестового материала не должна быть менее 50%»
11. «Процент заданий с открытой формой выбора ответа должен составлять не менее N% от всех вопросов теста. Сейчас – M%»
Пункт 4.12 методических указаний: «Тестовые задания в открытой форме – неполное суждение, в котором отсутствует один или несколько из ключевых элементов (число, буква, слово, словосочетание). Отличается от закрытой формы тем, что варианты ответов не предъявляют испытуемому, и он должен самостоятельно набрать ответ с помощью клавиатуры. Доля тестовых заданий открытой формы в базе тестового материала не должна быть менее 20%.»
12. «Процент заданий на задание последовательности / соответствия должен составлять не более N% от всех вопросов теста. Сейчас – M%.»
Пункт 4.13 методических указаний: «Тестовые задания на установление последовательности предполагают упорядочивание предложенных вариантов по четко сформулированному критерию. Доля тестовых заданий не установление последовательности в базе тестового материала не должна быть более 15%»
Пункт 4.14 методических указаний: «Тестовые задания на установление соответствия позволяют проверить ассоциативные знания студентов, то есть понимание ими связей между различными явлениями, законами, свойствами, датами и т. п.. Доля тестовых заданий не установление соответствия в базе тестового материала не должна быть более 15%»
Создание педагогического теста происходит в несколько этапов.
1. Набор текста педагогического теста в текстовом редакторе в соответствии с указаниями Приложения В и сохранение в форте RTF.
Процедура сохранения в формат RTF для различных текстовых редакторов может незначительно отличаться. В программе Microsoft Word для сохранения документа в формате RTF необходимо в главном меню щелкнуть «Файл» и выбрать пункт «Сохранить как…» (Рис. 1).
Рис. 1. Меню сохранения файла.
В появившемся диалоговом окне необходимо ввести (или изменить предложенное по умолчанию) имя файла и выбрать тип файла «Текст в формате RTF» (Рис. 2).
Рис. 2. Окно сохранения файла.
После этого следует кликнуть кнопку «Сохранить».
2. Загрузка набранного педагогического теста в программу JTEditor.
Запустите программу JTEditor (Рис. 3).
Рис. 3. Значок программы JTEditor.
После запуска появится главное окно программы (Рис. 4). Кликните кнопку «Загрузить педагогический тест из формата RTF».
Рис. 4. Кнопка загрузки теста из RTF в основном окне программы.
В появившемся диалоговом окне выберите файл педагогического теста в формате RTF (Рис. 5).
Рис. 5. Диалог открытия файла.
После выбора файла кликните кнопку «Открыть».
3. Задание спецификации
После загрузки педагогического теста из в формата RTF, появится окно задания спецификации (Рис. 6.):
Рис. 6. Окно задания спецификаций.
Укажите специальность (сокращенное наименование), для контроля студентов которой предназначается педагогический тест, наименование дисциплины, ФИО автора (в формате «») и время (по умолчанию 45 минут), отведенное на прохождения тестового задания. Поле «Название теста» заполняется автоматически. После заполнения всех полей нажмите кнопку «OK».
4. Проверка соответствия методическим указаниям
Для запуска проверки педагогического теста на наличие ошибок в структуре и на соответствие методическим указаниям необходимо кликнуть кнопку «(2) – Проверить» главного окна программы. После чего появится окно результатов проверки содержащее список найденных ошибок и замечаний, а так же оценку соответствия указанным требованиям (Рис. 7).
Рис. 7. Окно результатов проверки педагогического теста.
К ошибкам структуры относятся случаи когда тестовое задание не содержит вариантов ответов, не имеет правильного варианта ответа и д. р. Для перехода к следующего этапу необходимо исправить все ошибки структуры, если таковые имеются.
5. Тестовый запуск
Тестовый запуск программы предназначен для поиска ошибок и неточностей в педагогическом тесте, которые не были обнаружены автоматическими механизмами проверки. Для тестового запуска следует кликнуть кнопку «(3) – Тестовый запуск» главного окна программы. В результате тест будет скомпилирован и открыт в программе JTRun (Рис. 8).
Рис. 8. Тестовый запуск педагогического теста.
По окончании проверки закройте окно программы JTRun. В случае обнаружения ошибок и неточностей устраните их, внеся изменения в соответствующие строки педагогического теста, и вернитесь к пункту 4.
6. Задание пароля доступа
Пароль доступа на открытие педагогического теста в редакторе позволит закрыть доступ лицам не знающего пароля на возможность просмотра структуры теста, списка всех заданий, правильных ответов и т. д. Возможность открытие педагогического теста в программе JTRun (тестирование) остается. Для задания пароля необходимо кликнуть кнопку «(4) - Установить пароль» главного окна программы. В появившемся окне необходимо дважды ввести ваш пароль доступа и кликнуть кнопку «ОК» (Рис. 9).
Рис. 9. Окно задания пароля.
Не забывайте записывать устанавливаемые вами пароли и хранить их в надежном месте недоступном для посторонних. Не передавайте и не сообщайте никому ваш пароль.
7. Компиляция
Последний этап – сохранение педагогического теста во внутренний формат (TST) информационной системы проведения электронной сессии (компиляция). Кликните кнопку «(5) - Построить тест» главного окна программы, в открывшемся диалоге укажите папку, куда будет сохранен скомпилированный педагогический тест, имя файла и кликните кнопку «Сохранить».
Педагогический тест готов.
