Методические рекомендации по апробации проектов новых образовательных программ и УМК (стр. 6 )

- компьютеры, объединенные в локальную сеть с выходом в Интернет.

Дополнительное оборудование:

- интерактивная доска;

- лазерный принтер формата А3;

- графопостроители формата А1;

- сканер формата А4.

9. Порядок контроля ресурсным центром посредством специального мониторинга

Содержание планируемого мониторинга

Одновременно с разработкой новых сетевых образовательных программ с целью их внедрения в образовательный процесс, формируется и система оценки качества освоения учебных программ. Функция общего мониторинга эффективности апробации в образовательных учреждениях отводится межрегиональному отраслевому ресурсному центру ГБОУ СПО КАС №7.

Мониторинг, в контексте данного исследования, – это система сбора, регистрации, хранения и анализа небольшого количества ключевых (явных или косвенных) параметров описания процесса апробации сетевых образовательных программ для вынесения суждения об эффективности внедрения данных программ в образовательный процесс. То есть для вынесения суждения об объекте в целом на основании анализа небольшого количества характеризующих его признаков.

Ключевыми параметрами выступают следующие показатели, контролируемые в ходе исследования:

- оценка изменений в материально-техническом обеспечении образовательного процесса;

- оценка изменений учебно-методического обеспечения образовательного процесса;

- оценка изменений уровня готовности к реализации модульных программ инженерно-преподавательского состава;

- оценка изменений степени участия работодателей;

- оценка успешности освоения программ обучающимися и роста их мотивированности для участия в образовательном процессе;

- экспертная оценка заинтересованных сторон (региональных органов управления образованием, работодателей, администраторов образовательных учреждений клиентской сети ресурсного центра, обучающихся, преподавателей, независимых экспертов) успешности процесса апробации сетевых образовательных программ.

Организация и проведение мониторинга со стороны МОРЦ включает:

- обеспечение организационной поддержки,

- осуществление контроля процесса внедрения сетевых программ в образовательный процесс на апробационных площадках,

- сопровождение информационной, учебно-методической, научно-методической поддержки.

Каждое из представленных направлений требует решения со стороны МОРЦ КАС №7 ряда задач

для обеспечения организационной поддержки:

- организация и проведение конкурса по отбору апробационных площадок образовательных учреждений для апробации сетевых образовательных программ;

- обеспечение апробационных площадок, отобранных для апробации всей необходимой документацией, регламентирующей процесс проведения апробации, включающей сетевые образовательные программы, учебно-методические комплекты по каждой программе:

- организация процесса создания рабочих групп (с включением в них «апробаторов») по проведению и обеспечению апробации на апробационных площадках образовательных учреждениях;

- перманентное осуществление повышения квалификации инженерно-педагогических работников по вопросам реализации сетевых программ и организации мероприятий по мониторингу успешности реализации программ;

- обеспечение посредством использования методических рекомендаций материалами по методике проведения исследований уровня эффективности новых образовательных программ;

- ознакомление участников процесса апробации с используемым в ходе исследований инструментарием, определение критериев оценки эффективности внедрения сетевых образовательных программ;

- проведение анализа по вопросам внедрения сетевых образовательных программ, в т. ч. анализа рисков, а также потенциала материально-технического оснащения апробационных площадок образовательных учреждений;

- координация, сбор и аналитика полученной в ходе исследований информации;

- разработка методических рекомендаций по доработке программ по результатам апробации и предоставление их организациям разработчикам, после чего осуществляется организация и доработка сетевых программ;

для осуществления контроля процесса внедрения сетевых программ

- каждую новую сетевую образовательную программу, подлежащую апробации, совместно с разработчиками, обеспечить полным пакетом учебно-методических материалов, которые являлись основой построения лекционного и практического обучения. Учебно-методические комплекты включают в себя учебный и учебно-тематический планы, программу, примеры содержания лекций, базу практических занятий и лабораторных работ, электронный контент, информационное сопровождение реализации программы, банк тестовых и контрольных заданий, базу самостоятельных работ, методические рекомендации по реализации программы и применению УМК, порядок (описание процедур) контроля за проведением апробации разработанных образовательных программ ресурсным центром посредством специального мониторинга;

- организовать контроль за соблюдением выполнения расписания учебных занятий на апробационных площадках образовательных учреждениях в соответствии с сетевыми образовательными программами. Сотрудники МОРЦ отслеживают выполнение графика проведения апробации посредствам контрольных мероприятий, таких как включение в режиме on-line в текущий образовательный процесс, выборочная проверка ведения учебной документации (учебных журналов групп) и т. д.;

- контролировать сформированность учебных групп в отобранных согласно критериям образовательных учреждений, а также качественные и количественные показатели слушателей / студентов / обучающихся;

- контролировать уровень компетентности инженерно-педагогических работников;

- определять степень участия работодателей в образовательном процессе;

- разрабатывать и предоставлять материалы по оценке качества освоения апробируемых образовательных программ. В том числе обеспечить апробационные площадки основными методиками оценивания качества освоения новых сетевых образовательных программ, едиными формами анкет и опросников для проведения исследований;

- контролировать результаты по всем видам аттестации слушателей / студентов / обучающихся;

- определять мотивированность обучающихся;

- организовывать независимую экспертизу проводимой апробации путем содействия в подборе независимых экспертов, контроля соблюдения единообразия принципов проведения экспертизы на всех апробационных площадках, сравнительного анализа экспертных заключений;

для сопровождения информационной и научно-методической поддержкой:

- предоставлять материалы по результатам апробации всем участникам сети;

- весь процесс контроля за апробацией должен сопровождать организацией со стороны МОРЦ серией межрегиональных конференций, совещаний, семинаров, а также индивидуальных консультаций по вопросам продвижения инновационных технологий реализации программ, организации образовательного процесса обучения и проведения оценочных мероприятий;

- организовать публикации по результатам проведенного исследования в информационно-аналитическом издании «Неформальное образование» и печатных изданиях, рекомендованных ВАК РФ;

- подготовить сводный отчет, в котором должны быть отражены характеристики средних профессиональных образовательных учреждений, отобранных для реализации апробации образовательных программ на базе МОРЦ, процесс разработки и внедрения механизма апробации на апробационных площадках, номенклатуры инновационных технологий реализации программ, моделей аудиторной и практической деятельности, динамики освоения новых образовательных программ, результаты аттестации, выводы и рекомендации независимых экспертов и пр.

Таким образом, определенные в ходе исследования основные показатели успешности внедрения сетевых образовательных программ позволят и в дальнейшем проводить на местах детальный анализ получаемых результатов апробации, четко идентифицировать фактическое состояние реализации сетевых программ, проводить анализ и оценку возникающих рисков, в том числе в разрезе основных целевых групп (работодателей, администраторов образовательных учреждений клиентской сети ресурсного центра, обучающихся, преподавателей).

Описание процедур контроля за проведением апробации разработанных образовательных программ ресурсным центром посредством специального мониторинга

Для проведения апробации сетевых профессиональных образовательных программ определены основные показатели мониторинга апробации, которые позволят проводить детальный анализ получаемых результатов на местах, четко идентифицировать фактическое состояние реализации сетевых программ, осуществлять анализ и оценку возникающих рисков, в том числе в разрезе основных целевых групп (работодателей, администраторов образовательных учреждений клиентской сети ресурсного центра, обучающихся, преподавателей).

Среди предложенных ключевых показателей успешности проведения апробации можно выделить четыре основные направления оценки:

1) оценка ресурсного обеспечения процесса реализации программы и его изменения, включающая оценку материально-технических, учебно-методических, кадровых ресурсов;

2) оценка организации взаимодействия образовательного учреждения и работодателей отрасли и расширения направлений сотрудничества;

3 оценка освоенных обучающимися / студентами / слушателями знаний, умений, практического опыта и компетенций;

4) оценка процесса апробации в целом.

Оценка ресурсного обеспечения и оценка организации взаимодействия образовательного учреждения и работодателей отрасли на начальном этапе проводится по материалам, предоставленными на конкурс; в ходе реализации программы фиксируются все изменения по каждой из оцениваемых позиций.

Самой трудоемкой является оценка обучающихся / студентов / слушателей. Связано это с тем, что оценка качества освоения программы должна включать текущий контроль знаний, промежуточную и итоговую аттестацию обучающихся, предоставляющие возможность оценки успешности освоения всех результатов (знаний, умений, практического опыта, компетенций), обозначенных в программе.

Для успешной организации оценочных мероприятий требуется разработка контрольно-измерительных материалов (КИМ), которые должны отвечать следующим требованиям:

- иметь компетентностный характер (должны создавать предпосылки для демонстрации компетенций в целом, в условиях приближенных к реальной профессиональной деятельности);

- быть объективными (должны давать возможность объективной оценки, независимой от частного мнения или отдельных суждений; должны быть научно обоснованными);

- быть комплексными (должны давать возможность демонстрации знаний и умений в ходе выполнения трудовых действий (трудовой функции) в целом);

- быть валидными и надежными (должны давать по отдельности или в сочетании друг с другом максимально достоверную информацию о реальным уровне владения знаниями, умениями и практическим опытом, применяемыми для выполнения вида профессиональной деятельности);

- быть транспарентными (должны быть открытыми и понятными, обладать свойством внутренней очевидности, т. е. процесс оценивания и критерии оценки должны быть доступны и прозрачны как для проверяющего, так и для проверяемого);

- быть помехоустойчивыми (должны обладать свойством относительной свободы от влияния субъективных и ситуативных факторов (настроения, погоды, стрессовой ситуации, прошлых успехов и неудач).

Обозначенные выше требования к контрольно-измерительным материалам включают необходимость соблюдения порядка контроля апробации оценкой содержания учебно-методических комплектов по сетевым профессиональным образовательным программам.

Порядок разработки и требования к оценочным материалам зависят от вида контроля, форм и методов. Для каждого вида контроля согласно ФГОС предусмотрена различная последовательность формирования.

Текущий контроль. Конкретные формы и процедуры текущего контроля знаний, промежуточной аттестации по каждой сетевой образовательной программе определяются «пилотным» образовательным учреждением – апробационной площадкой самостоятельно и доводятся до сведения обучающихся в начале обучения.

Текущий контроль проводится в пределах учебного времени, отведенного на соответствующую дисциплину, профессиональный модуль как традиционными, так и инновационными методами, включая компьютерные технологии, интернет-тестирование.

Текущий контроль знаний может проводиться на любом из видов учебных занятий. Методы текущего контроля выбираются преподавателем, мастером п/о, исходя из специфики сетевой программы, формируемых знаний, умений, практического опыта, профессиональных и общих компетенций. Преподаватель, мастер п/о обеспечивает разработку и формирование блока заданий, используемых для проведения текущего контроля качества обучения.

Текущий контроль освоения обучающимися программного материала дисциплин и междисциплинарных курсов может иметь следующие подвиды: входной, оперативный и рубежный контроль.

1. Входной контроль знаний обучающиеся проводится в начале изучения темы, дисциплины, раздела, междисциплинарного курса с целью выстраивания индивидуальной траектории обучения студентов.

2. Оперативный контроль проводится с целью объективной оценки качества освоения программ дисциплин, междисциплинарных курсов, профессиональных модулей, а также стимулирования учебной работы, мониторинга результатов образовательной деятельности, подготовки к промежуточной аттестации и обеспечения максимальной эффективности учебно-воспитательного процесса.

3. Рубежный контроль является контрольной точкой по завершению каждой единицы (темы, раздела) учебной программы и проводится с целью комплексной оценки уровня освоения материала.

Текущий контроль знаний может проводиться в следующих формах:

-  устный опрос на теоретических, практических и семинарских занятиях;

-  проверка выполнения письменных домашних заданий, практических и расчетно-графических работ;

-  защита практических, лабораторных работ;

-  контрольные работы;

-  тестирование, в т. ч. компьютерное;

-  контроль самостоятельной работы (в письменной и устной форме);

-  семинарские занятия;

-  выполнение отдельных разделов курсового проекта (работы);

-  выполнение рефератов (докладов);

-  подготовка презентаций.

 Для аттестации обучающихся на соответствие их персональных достижений поэтапным требованиям соответствующей программы (текущая и промежуточная аттестация) создаются фонды оценочных средств, включающие контрольно-измерительные материалы, позволяющие оценить знания, умения и освоенные компетенции.

Промежуточная аттестация. Фонды оценочных средств для промежуточной аттестации разрабатываются и утверждаются «пилотным» образовательным учреждением самостоятельно, на основе базы тестовых и контрольных заданий, разработанных межрегиональным ресурсным центром.

Фонды оценочных средств, в том числе контрольно-измерительные материалы, для итоговой аттестации – разрабатываются и утверждаются ресурсным центром после предварительного положительного заключения ведущих представителей работодателей строительной отрасли, «пилотные» образовательные учреждения могут согласовывать их с региональными работодателями и утверждать самостоятельно.

МОРЦ должны быть обеспечены условия для максимального приближения программ текущей и промежуточной аттестации обучающихся по программам к условиям их будущей профессиональной деятельности, для чего, кроме преподавателей конкретной дисциплины (междисциплинарного курса), в качестве внешних экспертов должны активно привлекаться работодатели, преподаватели, читающие смежные дисциплины.

Итоговая аттестация включает подготовку и сдачу экзамена квалификационного по МДК и защиту выпускной квалификационной работы Обязательное требование – соответствие тематики итоговой аттестации содержанию профессиональных модулей. В состав аттестационной комиссии входят представители администрации ОУ, работодатели и инженерно-педагогические работники, осуществлявшие образовательный процесс. Результаты итоговой аттестации оформляются протоколом.

Требования к содержанию, объему и структуре итоговой аттестации определяются ресурсным центром на основании действующего Положения об итоговой аттестации.

Разработка контрольно-измерительных материалов для входного, текущего контроля промежуточной и итоговой аттестации по каждой модульной единице программы должна базироваться на новых методах контроля образовательных результатов (компетенций), определяемых спецификой модульного подхода.

Этапы контроля

Порядок контроля апробации образовательных программ и УМК к ним ресурсным центром включает совокупность мероприятий по проверке и обеспечению выполнения образовательными учреждениями, реализующими разработанные образовательные программы, обязательств по их апробации, а также совокупность действий по предупреждению отклонений от мероприятий по апробации программ, установленного графиком выполнения мероприятий.

Порядок контроля осуществляется на постоянной основе в течение всего периода апробации, включает в себя три этапа:

1 этап: Сбор информации об эффективности сетевых образовательных программ;

2 этап: Оценка информации об эффективности сетевых образовательных программ;

3 этап: Анализ информации об эффективности сетевых образовательных программ.

1. Сбор информации об эффективности образовательных программ включает в себя социологические и психологические опросы обучающихся и преподавателей, мастеров производственного обучения – педагогов-апробаторов образовательных программ. На данном этапе осуществляется проверка знаний по изучаемым предметам / дисциплинам / модулям, включая промежуточные формы контроля. Сбор информации может проходить с использованием методов тестирования, наблюдения, анонимных опросов. Полученные результаты обрабатываются с использованием информационных технологий и доводятся до сведения всех участников апробационного процесса. Полученные результаты могут быть доведены до сведения учащихся и представителей ОУ посредством доступа к информации через Интернет (возможность администрирования базы и ввод данных через веб-интерфейс, а также просмотр отчетов по успеваемости через Интернет), что удобно для родителей или законных представителей учащихся и др.

2. Оценка информации об эффективности образовательных программ является важным этапом процесса обучения. Основной смысл этапа состоит в том, чтобы установить, какую пользу от обучения получает учащийся или выяснить эффективность и восприятие обучающимся определенных разделов, тем (в том числе, практикоориентированного характера) и т. п. сетевой образовательной программы. В идеале оценку эффективности обучения следует производить постоянно, в качественной либо количественной форме оценивая влияние обучения.

3. Анализ информации об эффективности сетевых образовательных программ. Информацию, полученную в результате оценки эффективности сетевой образовательной программы, необходимо анализировать и использовать при подготовке и проведении аналогичных программ в будущем. Информация об эффективности сетевых образовательных программ позволяет постоянно работать над повышением качества обучения, избавляясь от таких учебных программ и форм обучения, которые не способствовали решению реализации поставленных перед ними задач.

Основная причина, по которой необходимо оценивать эффективность образовательных программ – это выяснение того, в какой степени в итоге были достигнуты цели обучения. Сетевая образовательная программа, которая не позволяет достичь требуемого уровня показателей (например, компетенций), сформировать необходимые навыки или установки, должна быть изменена, дополнена. Выявление причин, по которым определенная образовательная программа потерпела неудачу, и их анализ позволяют предпринять в будущем необходимые корректирующие меры.

Оценка эффективности обучения может проводиться с помощью тестов, опросников, заполняемых обучающимися, зачетов и т. п. Оценивать эффективность обучения могут как сами обучающиеся, так и педагоги-апробаторы, мастера производственного обучения, эксперты или специально созданные целевые группы.

Можно выделить пять критериев, обычно используемых при анализе и оценке эффективности обучения:

1) мнение обучающихся;

2) усвоение учебного материала;

3) поведенческие изменения;

4) рабочие результаты;

5) эффективность затрат.

Выявление мнения обучающихся о той образовательной программе, по которой они только что прошли обучение, ее полезности (интерес к ней), является принятой практикой во многих ОУ. Это предполагает выявление мнения обучающихся по следующим вопросам:

- содержание учебной программы (насколько интересно, практическая ценность, доступность для понимания);

- качество преподавания (квалификация преподавателя, мастера производственного обучения, стиль преподавания, используемые методы обучения);

- общие условия и обстановка во время обучения (физические условия, отсутствие отвлечений и т. д.);

- степень достижения целей обучения (соответствие ожиданиям слушателей, готовность учащихся использовать результаты обучения в практике своей будущей профессии / специальности).

В образовательных учреждениях, взаимодействующих с ресурсным центром, назначается ответственный за проведение мониторинга апробации образовательных программ. Анкеты по предложенным критериям эффективности заполняют преподаватели (мастера производственного обучения), обучающие по данной программе и работодатели по итогам производственной практики учащихся, прошедших обучение по образовательной программе. Заполненные анкеты в определенные сроки отправляются в ресурсный центр, где проводится подробный анализ эффективности реализуемой в ходе апробации сетевой образовательной программы.

Основными задачами контроля и мониторинга являются:

а) непрерывное наблюдение за ходом апробации;

б) обеспечение соблюдения всеми учреждениями, взаимодействующими с ресурсным центром требований к апробации образовательных программ;

в) обеспечение эффективного взаимодействия и координации деятельности всех участников процесса;

г) информационная и консультационная поддержка, размещение информации о ходе и результатах апробации на сайте ресурсного центра.

Предлагаемая система мониторинга предполагает анкетирование учащихся и преподавателей на трех этапах: в начале обучения, в течение его и по окончании изучения программы или составляющих ее модулей. Входное тестирование позволяет сформировать сравнительно однородную по уровню подготовки группу учащихся, а также зафиксировать их первоначальный уровень подготовки. Опрос учащихся в течение обучения дает возможность сделать вывод об эффективности усвоения нового материала и, если требуется, внести коррективы в организацию и содержание учебного процесса. Анкетирование на заключительном этапе обучения ложится в основу итоговых выводов по результатам реализации программы.

В процессе мониторинга апробации и реализации образовательных программ будут оцениваться: качество и инновационный потенциал программ, организация учебного процесса, образовательные результаты. Анализ результатов мониторинга будет осуществляться два раза в год.

Данные мониторинга послужат материалом для разработки рекомендаций по совершенствованию программ и развитию модели формирования сетевой распределенной структуры образовательных программ и применению новых образовательных технологий.

При разработке диагностического инструментария рекомендуется исходить из того, что эффективность – это действенность, результативность в реализации целей образовательного процесса. Она определяется как «отношение достигнутого результата (по тому или иному критерию) к максимально достижимому или заранее запланированному результату». Средством для оценки эффективности образовательного процесса являются критерии и соответствующие им показатели, которые в наибольшей степени отражают специфику образовательного учреждения, особенности организации образовательного процесса. При этом рекомендуется не использовать большое количество критериев и показателей, а исходить из требований их необходимости и достаточности.

В соответствии с избранными критериями и показателями подбираются или создаются диагностические методики, позволяющие получить достоверную информацию о запланированных результатах образовательного процесса. Предполагается наряду с педагогическими, использовать психологические и социологические методики, что будет способствовать более объективному анализу запланированных результатов.

Разработанная система критериев и показателей реализации образовательной программы будет способствовать формированию у членов педагогического коллектива и обучающихся объективной картины образовательного процесса при реализации образовательных программ, будет определять также дальнейшую их корректировку.

Эффективность программ по результатам апробации предлагается оценить обучающимся, преподавателям, мастерам производственного обучения, представителям работодателей отрасли, осуществляющим подготовку по данным программам.

Итоговая оценка эффективности программ апробации осуществляется экспертами на основании итогов проведенного анкетирования, изучения документации, результатов итоговых испытаний и других методов экспертизы с использованием соответствующих критериев (таблица 8).

10. Критерии эффективности программ по результатам апробации

Таблица 8.

№ п/п	Критерии эффективности программы	Оценоч- ная шкала
1	Сбалансированность программы в соответствии с требованиями Федерального государственного образовательного стандарта и показателей вариативности
2	Соответствие технологическим и организационно-экономическим условиям передовых предприятий строительной отрасли
3	Модульность программы, в частности как условие обеспечения взаимодействия участников апробации
4	Последовательности формирования знаний и умений и практического опыта (компетенций)
5	Достаточное наличие в программе практических заданий, формирующих практический опыт, умения
6	Использование новых форм и методов организации образовательного процесса в соответствии с требованиями современных производственных и образовательных технологий, необходимых для формирования профессиональных компетенций
7	Наличие в образовательной программе модулей или тем, формирующих приоритетные качества рабочего / специалиста на рынке труда
8	Возможность выстраивания гибких образовательных маршрутов (индивидуальных и для групп учащихся из разных образовательных учреждений)
9	Доступность для всех участников, возможность включения программы в образовательное пространство
10	Оптимизация эффективного использования материально-технических, кадровых, финансовых ресурсов учреждений на основе сетевого взаимодействия
11	Возможность проведения дистанционного или смешанного обучения по учебным модулям программы
12	Создание системы контроля за реализацией и достижением результатов программы, в том числе со стороны работодателей и специалистов ресурсного центра
13	Соответствие результатов освоения образовательной программы требованиям работодателей, подтвержденное заявками на подготовку кадров, гарантией предоставления мест для прохождения учебной и производственной практик и последующего трудоустройства
14	Качественное изменение образовательной ситуации в образовательном учреждении, возможность обучения в любых ОУ и предприятиях, входящих в состав ресурсного центра
15	Позитивное отношение родителей (законных представителей), выпускников и местного сообщества к учреждению, осуществляющему взаимодействие с ресурсным центром, повышение рейтинга ОУ
16	Конвертируемость результатов усвоения программы

Используемая шкала для оценки степени соответствия: