Федеральное агентство по образованию
«УТВЕРЖДАЮ» |
Заместитель руководителя Федерального агентства по образованию |
___________ |
Проект Ф-144 «Создание электронных образовательных ресурсов профессионального образования по наиболее востребованным на рынке труда профессиям НПО, специальностям СПО» РЕГЛАМЕНТ ПРОВЕДЕНИЯ ИНТЕГРАЛЬНОЙ ОЦЕНКИ КАЧЕСТВА ЭОР НОВОГО ПОКОЛЕНИЯ В 2009 г. |
СОДЕРЖАНИЕ
ОБЩИЕ ПОЛОЖЕНИЯ 3
1. ПОРЯДОК ПРОВЕДЕНИЯ ИОК ЭОР НП 4
1.1. Загрузка материалов РАЗРАБОТЧИКА на FTP-сервер ФЦИОР. 5
1.2. Проверка перечня тематических элементов. 6
1.3. Экспертиза сценариев (планов) ЭУМ……………………………………..……………….6
1.4. Интегральная оценка качества ЭУМ…………….…………………..……………………..7
1.5. Проведение дополнительной экспертизы/интегральной оценки качества. 9
1.6. Подведение итогов этапа работ………………………………………………………… ..10
ПРИЛОЖЕНИЕ 1. Формы документов …………..…………………………………………...11
1.1. План-график проведения ИОК ЭОР НП………………………………………………….12
1.2. Перечень тематических элементов и типы предполагаемых к разработке ЭУМ …..…13
1.3. Сводная ведомость проверки перечня тематических элементов……………………….14
1.4. Сценарий (план) ЭУМ……………………………………………………………………..15
1.5. Сводная ведомость экспертизы сценариев (планов) ЭУМ.……….…………………….19
1.6. Дефектная ведомость экспертизы сценариев (планов) ЭУМ…………………………...20
1.7. Сводная ведомость ИОК партии ЭУМ…………...………………………………………21
1.8. Дефектная ведомость ИОК ЭУМ………………………………………………………....23
1.9. Аналитическая справка по итогам этапа…………………………………………………24
ПРИЛОЖЕНИЕ 2. Разъяснения УТР и условий применения критериев ИОК при различных вариантах реализации ЭУМ………………………………………………………26
2.1. Структура мультимедиа контента…………………………...……………………………27
2.2. Размещение сторонних АКП…………………………………………………..…….……30
2.3. Спецификация результирующих данных…………………………………………….…..32
2.4. Критерии оценки категории открытости………………………………………………...33
2.5. Критерии оценки уровня интерактивности………………………………………………34
2.6. Критерии оценки уровня мультимедийности……………………………………………41
2.7. Основные критерии оценки содержательных качеств…………………………………..42
2.8. Критерии оценки адекватности результирующих данных……………...………………44
ПРИЛОЖЕНИЕ 3. Коды профессий НПО и специальностей СПО……...……………..45
ОБЩИЕ ПОЛОЖЕНИЯ
Настоящий регламент (далее − Регламент) разработан в рамках проекта Ф-144 «Создание электронных образовательных ресурсов профессионального образования по наиболее востребованным на рынке труда профессиям НПО, специальностям СПО».
Регламент устанавливает порядок проведения экспертизы результатов проекта с целью обеспечения качества электронных образовательных ресурсов нового поколения для начального и среднего профессионального образования с последующим размещением их в хранилище ФЦИОР.
Каждый электронный образовательный ресурс (далее – ЭОР) нового поколения (далее – НП) по специальности СПО и соответствующей группе профессий НПО представляет собой совокупность автономных электронных учебных модулей (далее – ЭУМ) И, П,К-типов (модули получения информации, практических занятий и контроля учебных достижений).
Интегральная оценка качества (далее – ИОК) ЭОР НП – процесс установления соответствия требованиям, предъявляемым к инновационным, технологическим и содержательным качествам электронных образовательных ресурсов нового поколения.
Заказчиком проекта является Федеральное агентство по образованию (далее – ЗАКАЗЧИК). Исполнителями проекта являются разработчики электронных учебных модулей (далее – РАЗРАБОТЧИК) и определенная ЗАКАЗЧИКОМ организация для проведения мониторинга и координации процесса создания электронных образовательных ресурсов нового поколения (далее – КООРДИНАТОР).
Результаты ИОК ЭОР НП оформляется в виде экспертных заключений. На не соответствующие критериям качества объекты составляется дефектная ведомость, которая одновременно (одним e-mail) направляется РАЗРАБОТЧИКУ и ЗАКАЗЧИКУ. Успешно прошедшие оценку качества электронные учебные модули размещаются в хранилище ФЦИОР.
1. ПОРЯДОК ПРОВЕДЕНИЯ ИОК ЭОР НП
ИОК ЭОР НП в целом представляет собой интегральную оценку качества всех составляющих данный ЭОР модулей, предваряемую экспертизой их сценариев (планов) ЭУМ и проверкой соответствия перечня тематических элементов, избранных для реализации ЭУМ, Государственному образовательному стандарту и Заданию на выполнение работ из состава Государственного контракта.
Таким образом, ИОК ЭОР НП включает следующие виды работ:
· проверка соответствия перечня тематических элементов ГОСу и при необходимости примерной образовательной программе, детализирующей содержание ГОС и Госконтракту;
· экспертиза сценариев (планов) ЭУМ;
· интегральная оценка качества ЭУМ.
При этом целью интегральной оценки качества электронных учебных модулей является оценка соответствия ЭУМ «Унифицированным требованиям (расширенным) к электронным учебным модулям открытых образовательных модульных мультимедиа систем» (далее – УТР), критериям оценки содержательных качеств ЭУМ, требованиям Государственного образовательного стандарта и Государственного контракта.
Критерии оценки инновационных и технологических качеств ЭУМ установлены в УТР. Приложения к настоящему регламенту содержат разъяснения условий применения критериев при различных вариантах реализации ЭУМ. Содержательные качества ЭУМ оцениваются экспертами − специалистами предметной области по критериям, определенным в приложениях к настоящему Регламенту.
Каждый ЭУМ подвергается ИОК, а сценарий (план) ЭУМ − экспертизе не более двух раз. При этом повторная ИОК/экспертиза проводится после устранения РАЗРАБОТЧИКОМ несоответствий установленным критериям, ошибок, дефектов, обнаруженных в процессе первичной ИОК/экспертизы и перечисленных КООРДИНАТОРОМ в дефектной ведомости. В случае, если ЭУМ/сценарий (план) ЭУМ повторно получил отрицательную оценку, дополнительная интегральная оценка качества или экспертиза сценариев (планов) ЭУМ проводится только на основании письменного указания ЗАКАЗЧИКА и в установленные им сроки.
1.1. Загрузка материалов РАЗРАБОТЧИКА на FTP-сервер ФЦИОР
КООРДИНАТОР обеспечивает предоставление технических ресурсов Федерального центра информационно-образовательных ресурсов (ФЦИОР) для размещения перечня тематических элементов, сценариев (планов) ЭУМ и созданных на их основе ЭУМ. Для размещения материалов на FTP-сервере ФЦИОР КООРДИНАТОР предоставляет индивидуальные папки (lot1-lot11) для каждого РАЗРАБОТЧИКА проекта. Для РАЗРАБОТЧИКА создается учетная запись и предоставляется право записи в соответствующую папку до начала проведения процедуры экспертизы.
РАЗРАБОТЧИК осуществляет загрузку объектов проверки/экспертизы/ИОК в соответствии с Планом-графиком, утвержденным ЗАКАЗЧИКОМ.
Для каждого пакета объектов проверки/экспертизы/ИОК РАЗРАБОТЧИК самостоятельно создает отдельные папки с указанием даты, номера этапа, количества объектов и указанием идентификаторов объектов:
L - перечень тематических элементов (например: “III-4L”);
S – сценарии (планы) ЭУМ (например: “IV-50S”);
E - электронные учебные модули (например: “III-50E”).
В составе каждого пакета файлов РАЗРАБОТЧИК обязан включить файл с контрольными суммами (MD5) файлов, входящих в загруженный пакет.
Имена файлов сценариев (планов) ЭУМ и, соответственно, идентификатор ЭУМ должны иметь следующий вид: YYYYYY_1.1.1.1.1TN_V,
где:
YYYYYY – код профессии/специальности,
1.1.1.1.1 – код тематического элемента в соответствии с перечнем тематических элементов,
Т – тип модуля (возможные значения: i, p, k),
N – порядковый номер ЭУМ (сценариев (планов) ЭУМ) в рамках данного тематического элемента (если данному ТЭ соответствует несколько модулей одинакового типа),
V – часть названия, формируемая РАЗРАБОТЧИКОМ:
1. в сценарии (плане) ЭУМ V отражает номер версии (V = 2,3 после доработки);
2. в идентификаторе ЭУМ РАЗРАБОТЧИК может использовать V как служебную информацию.
После загрузки всех файлов РАЗРАБОТЧИК уведомляет КООРДИНАТОРА по электронной почте *****@***ru о том, что все файлы загружены. КООРДИНАТОР проверяет соответствие контрольной суммы загруженных файлов и при
отсутствии ошибок блокирует соответствующую папку для записи на время проведения проверки/экспертизы/ИОК.
1.2. ПРОВЕРКА ПЕРЕЧНЯ ТЕМАТИЧЕСКИХ ЭЛЕМЕНТОВ
РАЗРАБОТЧИК загружает перечень тематических элементов в отдельную папку на FTP-сервер ФЦИОР. Папка формируется в соответствии с п.1.1 настоящего Регламента.
Файл загружается в формате MS Word версии 2003, форма перечня приведена в приложении. Документ, представленный в любом другом виде/формате, к проверке не принимается.
КООРДИНАТОР производит анализ перечня тематических элементов на предмет соответствия Государственному образовательному стандарту и при необходимости примерной образовательной программе, детализирующей содержание ГОС, и проверяет в соответствии с Государственным контрактом (Заданием на выполнение работ) общее количество и соотношение типов ЭУМ, предполагаемых к разработке на данном этапе.
Срок проверки перечня – 1 полный рабочий день.
По окончании проверки результаты направляются РАЗРАБОТЧИКУ и ЗАКАЗЧИКУ. При наличии несоответствий РАЗРАБОТЧИК обязан их устранить в течение 2 рабочих дней и направить доработанный перечень на повторную проверку.
1.3. Экспертиза сценариев (планов) ЭУМ
РАЗРАБОТЧИК загружает сценарии (планы) предполагаемых к разработке ЭУМ в папку на FTP-сервер ФЦИОР в строгом соответствии с количеством, указанным в плане-графике проведения ИОК ЭОР НП. Папка на FTP-сервере формируется в соответствии с п.1.1. настоящего Регламента.
Файлы загружаются в формате MS Word версии 2003 (один файл – один сценарий (план) ЭУМ) в соответствии с Формой сценариев (планов) ЭУМ, приведенной в приложении. Документы, представленные в любом другом виде, к экспертизе не допускаются.
Экспертиза сценариев (планов) ЭУМ проводится по следующим критериям:
· соответствие представленному ранее перечню тематических элементов;
· соответствие заявленных инновационных и технологических характеристик
ЭУМ требованиям УТР;
· соответствие учебного содержания ЭУМ требованиям Государственного образовательного стандарта и при необходимости примерной образовательной программе, детализирующей содержание ГОС, критериям оценки содержательных качеств ЭУМ и Заданию на выполнение работ;
· обеспечение развития у учащихся практических навыков, умений и компетенций;
· обеспечение расширения функционала самостоятельной работы с ориентацией на активно-деятельностное обучение;
· соответствие совокупности предполагаемых к разработке на данном этапе ЭУМ Заданию на выполнение работ (в части соотношения ЭУМ по уровню интерактивности и удовлетворения общих требований, предъявляемым к работам).
Срок проведения экспертизы партии 50 сценариев (планов) ЭУМ составляет не более 5 рабочих дней.
По результатам экспертизы формируются сводная и дефектная ведомости экспертизы сценариев (планов) ЭУМ, которые направляются РАЗРАБОТЧИКУ и ЗАКАЗЧИКУ по электронной почте.
1.4. интегральная оценка качества ЭУМ
РАЗРАБОТЧИК загружает ЭУМ в отдельную папку на FTP-сервер ФЦИОР в соответствии с планом-графиком.
Папка на FTP-сервере формируется в соответствии с п.1.1. настоящего Регламента.
РАЗРАБОТЧИК обязан в метаописании ЭУМ указывать уникальный идентификатор (GUID, Global Unique IDentifier). Получить уникальный идентификатор РАЗРАБОТЧИК может посредством пользовательского интерфейса портала совместной работы (http://eor-expert. *****).
КООРДИНАТОР в соответствии с требованиями УТР, в рамках процедуры проведения интегральной оценки инновационных, технологических и содержательных качеств электронных учебных модулей и настоящего Регламента обеспечивает проведение ИОК ЭУМ.
Процедура ИОК ЭУМ включает четыре этапа, на которых анализируются следующие группы показателей:
· Соответствие характеристик и содержания ЭУМ сценарию (плану), прошедшему экспертизу. Снижение заявленных в сценариях (планах) инновационных и технологических качеств, сокращение учебного содержания ЭУМ не допускается.
· Оценка технологических качеств модуля:
o объем;
o структура;
o программные решения;
o форматы мультимедиа компонентов;
o спецификация результирующих данных по SCORM RTE;
o манифест;
o метаданные;
o качество мультимедиа компонентов.
· Оценка инновационных качеств модуля:
o уровень интерактивности;
o уровень мультимедийности;
o категория открытости;
o выполнение условий кроссплатформенности.
· Оценка содержательных качеств модуля:
o соответствие требованиям Задания на выполнение работ,
прежде всего – по п. «Общие требования» и п. III.3. требований, предъявляемым к работам;
o соответствие современным научным представлениям предметной области;
o соответствие учебного содержания требованиям Государственного стандарта и при необходимости примерной образовательной программе, детализирующей содержание ГОС;
o развитие у учащихся практических навыков, умений и компетенций;
o расширение функционала самостоятельной работы за счет активно-деятельностного обучения;
o соответствие базовым ценностям социума;
o адекватность результирующих данных;
o иные существенные недостатки, препятствующие использованию ЭУМ в образовательном процессе.
Основания для принятия решений представлены в Карте содержательной экспертизы.
Каждый ЭУМ должен быть работоспособен и полностью функционален при воспроизведении ОМС-плеерами версий 1,0 и 2,0.
При обнаружении на любом этапе ИОК ошибок программных решений, приводящих к неработоспособности модуля в целом или любого его элемента, неверным откликам на действия пользователя или полному отсутствию реакций в предусмотренных для управления, навигации, взаимодействия с контентом фрагментах ЭУМ, процедура ИОК прекращается, модуль с отрицательным заключением направляется на доработку.
ЭУМ, корректно воспроизводимый ОМС-плеерами версий 1,0 и 2,0, проходит все этапы ИОК и получает оценку по всем группам качеств.
ЭУМ считается успешно прошедшим интегральную оценку качества при соответствии установленным критериям, отсутствии дефектов и ошибок на всех четырех этапах ИОК.
Срок проведения ИОК партии 50 ЭУМ составляет не более 7 рабочих дней.
По окончании срока проведения ИОК КООРДИНАТОР направляет РАЗРАБОТЧИКУ и ЗАКАЗЧИКУ в электронном виде сводную ведомость ИОК и дефектные ведомости по ЭУМ, требующим доработок.
Если в течение 2 рабочих дней РАЗРАБОТЧИК не отправил КООРДИНАТОРУ своих возражений по дефектным ведомостям, ЭУМ считается принятым к доработке для устранения несоответствий критериям оценки, ошибок и дефектов.
РАЗРАБОТЧИК может направить КООРДИНАТОРУ по электронной почте возражения и пояснения. КООРДИНАТОР рассматривает возражения РАЗРАБОТЧИКА, соглашаясь или опровергая его доводы. Процедура согласования мнений КООРДИНАТОРА и РАЗРАБОТЧИКА не должна занимать более 2 рабочих дней. В случае несогласия КООРДИНАТОРА с доводами РАЗРАБОТЧИКА ЭУМ подлежит доработке. После доработки ЭУМ направляется на повторную экспертизу. Если результаты ИОК вновь отрицательны, дополнительная экспертиза ЭУМ (после второй доработки) возможна только с письменного разрешения ЗАКАЗЧИКА и в установленные им сроки.
1.5. проведение ДОПОЛНИТЕЛЬНОЙ экспертизы/интегральной оценки качества
Дополнительная экспертиза/ИОК возможна только с письменного разрешения ЗАКАЗЧИКА и проводится в установленные им сроки. Дополнительная экспертиза/ИОК проводится только один раз.
После получения от КООРДИНАТОРА дефектных ведомостей повторной экспертизы/ИОК с перечнем необходимых доработок, РАЗРАБОТЧИК может обратиться к ЗАКАЗЧИКУ с просьбой о проведении дополнительной экспертизы. ЗАКАЗЧИК в своих решениях руководствуется требованиями действующего законодательства и условиями Государственного контракта. В случае положительного решения ЗАКАЗЧИК в письменном виде устанавливает РАЗРАБОТЧИКУ срок доработки, а КООРДИНАТОРУ – сроки проведения экспертизы/ИОК доработанных объектов.
РАЗРАБОТЧИК обязан устранить дефекты и предоставить КООРДИНАТОРУ исправленные объекты для дополнительной экспертизы/ИОК.
ЭУМ/сценарий (план) ЭУМ, не прошедший дополнительную ИОК/экспертизу, к рассмотрению более не принимается. Если при этом усматривается невыполнение условий Государственного контракта, вступают в силу положения его пунктов: 7.2.1, 7.2.2, 7.2.3.
1.6. ПОДВЕДЕНИЕ ИТОГОВ ЭТАПА РАБОТ
По окончании очередного этапа работ, определенного Государственным контрактом, КООРДИНАТОР проводит анализ результатов этапа на предмет соответствия Заданию на выполнение работ:
· Устанавливается соотношение уровней интерактивности разработанных на этапе ЭУМ, проверяется его соответствие Заданию на выполнение работ.
· Устанавливается соответствие общим требованиям Задания на выполнение работ (раздел 2, общие требования). Выполнение сформулированных в Задании общих требований рассматривается с точки зрения разнообразия использованных в ЭУМ методических подходов, форм взаимодействия и состава мультимедиа компонентов. Дублирование этих характеристик в модулях разных типов при незначительных отличиях (например, превращение П-модуля в модуль контроля путем изъятия подсказок и введения лимита времени) не допускается. В комплекте ЭУМ, представленном к сдаче на этапе работ, следует использовать не менее 50% из всех возможных форм взаимодействия II и III уровней (т. е. не менее 7 различных форм), и максимальное количество мультимедиа компонентов (до 5 компонентов), определенных в УТР.
Аналитическую справку по итогам этапа КООРДИНАТОР направляет ЗАКАЗЧИКУ и РАЗРАБОТЧИКУ.
ПРИЛОЖЕНИЕ 1. Формы документов
1.1. План-график проведения ИОК ЭОР НП
Этап | Кол-во ЭУМ по этапу | 1 очередь | 2 очередь | 3 очередь | 4 очередь | ||||||||||||
Кол-во ЭУМ1 | Дата сдачи2 | Кол-во ЭУМ1 | Дата сдачи2 | Дата сдачи2 | Дата сдачи2 | ||||||||||||
Перечень ТЭ | Сценарные планы | ЭУМ | Перечень ТЭ | Сценарные планы | ЭУМ | Кол-во ЭУМ1 | Перечень ТЭ | Сценарные планы | ЭУМ | Кол-во ЭУМ1 | Перечень ТЭ | Сценарные планы | ЭУМ | ||||
III |
1 - рекомендуемое количество электронных учебных модулей, исходя из общего количества модулей по этапу, для лотов №1-8 – 50 ЭУМ, для лота №9 – 40 ЭУМ, для лотов №10-11 – 30 ЭУМ.
2 - при определении количества ЭУМ и даты сдачи необходимо учитывать, что срок проверки перечня тематических элементов (ТЭ) – 1 день, срок экспертизы сценариев (планов) ЭУМ – 5 дней, срок интегральной оценки качества ЭУМ – 7 дней для 50 ед., сданных на проверку/экспертизу/ИОК.
График проведения ИОК ЭОР НП может быть составлен как в 4, так и в 3 очереди (на усмотрение РАЗРАБОТЧИКА).
1.2. Перечень тематических элементов и типы предполагаемых к разработке ЭУМ
Разработчик:___________________________________________________________
Государственный контракт №:___________________
лот: ___________________________________________________________________
код профессии НПО: ___________________________
код специальности СПО:________________________
этап: ________________
партия (в соответствии с планом-графиком): __________
№ рубрики | Наименование рУБРИК | Количество ЭУМ | ||
И | П | К | ||
1 | Раздел [название раздела] | |||
1.1 | Подраздел: [название подраздела] | |||
1.1.1 | Тематический блок: [название тематического блока] | |||
1.1.1.1 | Тема: [название темы] | |||
1.1.1.1.1 | ТЭ 1: [название тематического элемента] | |||
… | … | |||
ИТОГО: |
Как правило, одному тематическому элементу (ТЭ) соответствуют три ЭУМ разных типов (И, П,К). В этом случае в строке проставляются 1 (единицы) в соответствующих столбцах. В Задании на выполнении работ установлено соотношение типов ЭУМ 1:2:2. Это означает, что для ряда ТЭ не разрабатываются модули И типа. В исключительных случаях РАЗРАБОТЧИК может указать два ЭУМ одного типа для одного ТЭ, это может быть обусловлено только объемом учебного материала, при котором пятиуровневой вложенности рубрик недостаточно. В других случаях такая ситуация дает основание считать разбивку на тематические элементы недостаточно продуманной.
1.3. Сводная ведомость экспертизы перечня тематических элементов
|
Из за большого объема этот материал размещен на нескольких страницах:
1 2 3 4 5 |
