Реализация принципов критериального оценивания в экспертизе процесса и результатов опытно-экспериментальной работы в школе.
,
канд. биол. наук, доцент,
зам. зав. кафедрой УОС МПГУ
Эффективность процесса внедрения инноваций в реальный образовательный процесс школы может быть значительно увеличена, если на пути внедрения научных разработок до их эффективной реализации школа и ученые будут работать в одной команде. А если в этой деятельности будут объединены усилия школы и кафедр или факультетов университетов, тогда гарантируются как результаты, так и качество самого инновационного процесса.
Такую модель сотрудничества много лет реализуют сотрудники факультета повышения квалификации и профессиональной переподготовки работников образования Московского педагогического государственного университета на кафедре управления образовательными системами (до сентября 2008 года - кафедра управления развитием школы). Многолетний опыт сотрудничества со школами обеспечил сотрудникам кафедры возможность успешного включения в программу «Экспериментальные площадки МПГУ» в 2007 году в рамках проекта «Академическая наука МПГУ – образовательным учреждениям» на гг.
Тесное сотрудничество кафедры с московскими и подмосковными школами позволило сотрудникам кафедры выявить и сформулировать направления и спроектировать содержание деятельности экспериментальных площадок на основе научного анализа, как достижений, так и проблем конкретных школ. Каждая из экспериментальных площадок (ЭП) реализует задачи, прописанные в государственных документах - Программах Приоритетного национального проекта «Образование», Городской Программы «Школа будущего», Программ «Столичное образование-5», «Наша Новая школа» и др.
Для каждой школы, участвующей в педагогическом эксперименте, результатом последнего является положительная динамика успехов каждого ученика, рост компетентности учителя и т. д. В то же время для научного руководителя основной целью эксперимента является получение нового знания. Необходимость анализа и учета практических и теоретических результатов потребовала от автора как куратора деятельности экспериментальных площадок (ЭП) МПГУ, разработать совокупность критериев и показателей качества деятельности ЭП МПГУ на каждом этапе школьного педагогического эксперимента. В данной статье представлен вариант такого проекта, апробированный частично в нескольких школах, входящих в состав ЭП кафедры УОС МПГУ.
Рассматривая педагогический эксперимент как организационно-деятельностную систему, мы выделяем в совокупности общей оценки качества ЭП три подсистемы:
· Оценка качества ПРОГРАММЫ ЭКСПЕРИМЕНТА:
· Оценка качества ПРОЦЕССА опытно - экспериментальной работы (ОЭР);
· Оценка качества РЕЗУЛЬТАТОВ эксперимента.
Результаты эксперимента мы будем оценивать по двум позициям: научно-теоретический результат, который мы предлагаем называть продуктом эксперимента, и конкретно-практический, определяемый по степени влияния полученного продукта на качество реальной школьной образовательной системы. Декомпозиция каждой группы критериев на отдельные критерии и показатели производится на основе методологических характеристик научного исследования [1]. Ниже представлен рабочий вариант критериального оценивания каждой из трех подсистем школьного эксперимента как в процессе экспертизы, так и в формате самоаудита.
Оценка качества ПРОГРАММЫ ОЭР. Для оценки готовности экспериментальной площадки к началу реализации планового педагогического исследования предметом экспертизы, осуществляемой экспертами, должна стать Программа ОЭР. Оцениваются целесообразность, актуальность, новизна, научная обоснованность и обеспеченность ОЭР [2,4]. В качестве конкретных показателей оценки качества Программы предлагаем:
Разделы программы | Показатели качества каждого раздела |
Анализ реалий и выделение проблемы | 1) Степень обоснованности актуальности темы исследования; 2) Формулировка проблемы, на решение которой направлен эксперимент; 3) Насколько широко и глубоко представлено изучение состояния проблемы в науке и практике; 4) Доказанность важности решения данной проблемы для конкретного образовательного процесса в данной школе 5) Формулировка научной новизны и теоретической значимости результатов исследования 6) Достаточность наличия ресурсов (материальных, информационных, кадровых) для решения научных проблем, апробации и внедрения практических результатов ОЭР |
Определение границ исследования, выбор темы | 7) Обоснованность определения цели (исходя из потребностей и возможностей экспериментатора и исследовательской группы); 8) Полнота отражения требований к оценке эффективности эксперимента при формировании системы показателей для промежуточной и окончательной оценки результатов данной ОЭР (объективность, валидность, нейтральность, полнота); 9) Научная обоснованность определения объекта исследования – основного процесса, внутри которого создаются результаты; 10) Научная обоснованность определения предмета исследования – условия, фактора наиболее сильно влияющего на результат |
Выбор методов исследования | 11) Адекватность выбора методов соответственно природе исследуемого процесса и его результатам; 12) Полнота и доступность описания методов исследования |
Разработка гипотезы исследования | 13) Формулировка гипотезы; 14) Наличие и обоснованность прогнозов влияния выдвинутых мер решения проблемы на результат; 15) Описание возможных негативных последствий и способов предупреждения их возникновения |
Планирование проведения исследования | 16) Полнота, обоснованность и технологичность описания этапов ОЭР: · констатирующего этапа; · формирующего этапа; · обобщающего этапа. 17) Обоснованность и полнота определение базы эксперимента; 18) Реальность сроков его проведения с учетом возможности их коррекции. |
Определение формы представления промежуточных и конечных результатов эксперимента | 19) Полнота представления продуктов ОЭР (достаточность для трансляции в профессиональный социум) 20) Реальность представления продуктов ОЭР (печатных изданий, медиа-продуктов, ресурсных центров, организация и проведение мероприятий, транслирующих опыт и т. д.) |
Каждый из показателей при экспертизе Программы предлагается оценивать по трехбалльной системе: 2 балла – высокий уровень качества, 1 балл – достаточный, 0 баллов – недостаточный уровень качества.
Качество Программы рассчитывается по формуле
(N1 + N2 + N3 +.............+ N20 ) х 100%
40
(где N – оценка каждого показателя).
При оценке 85% - 100% эксперты оценивают качество Программы как высокое и рекомендуют к реализации. При оценке 65% - 84% эксперты оценивают качество Программы как достаточное и рекомендуют к реализации с предварительной доработкой по указанным позициям. При оценке 64% и ниже эксперты оценивают качество Программы как недостаточное и рекомендуют к доработке с представлением на экспертизу через год.
Оценка качества ПРОЦЕССА РЕАЛИЗАЦИИ программы ОЭР. Эта оценка, как правило, осуществляется на основании анализа ежегодного отчета и данных мониторинга эксперимента. При этом экспертируются приращения и общие изменения в выделенных критериях оценки качества результатов и эффективность используемых ресурсов за определенный период экспериментальной деятельности площадки. Для оценки качества процесса экспертам (или субъектам управления, осуществляющим самоаудит) предоставляются:
1. Утвержденная Программа педагогического эксперимента ЭП
2. Паспорт ЭП
3. План работы ЭП на текущий год с определением конкретных продуктов деятельности каждого участника в зависимости от этапа эксперимента
4. План работы научного руководителя в данной ЭП
5. Документы, обеспечивающие систему информационного обеспечения управления ЭП (наличия инструментария, позволяющего отслеживать и фиксировать изменения в выделенных параметрах с определенными контрольными точками; наличие четкого режима мониторинга, как процесса постоянной обратной связи – когда, кто и где фиксирует и анализирует измеренный параметр, где и кем эти данные обсуждаются и т. д.)
6. Информационные материалы, позволяющие оценить промежуточные результаты экспериментальной деятельности – проекты, данные входной и промежуточной диагностики выделенных критериев оценки педагогического и/или управленческого эффекта и т. д.
Мониторинг эксперимента относится к типу проблемного мониторинга. Иными словами объектом этого мониторинга являются отдельные проблемы, задачи. Мониторинг позволяет не только диагностировать состояние процесса, но и предоставляет руководителю информацию для принятия стратегических и тактических решений по ходу эксперимента.
Оценка результатов эксперимента (ОЭР). Результатами ОЭР являются изменения в педагогической системе образовательного учреждения, а также полученное новое научное знание. Новое знание может быть представлено в различных образцах научно-методической продукции, к которым относятся:
· концепция, модель, положение, устав, структура и механизмы управления, образовательные программы, учебные программы,
· учебники и учебные пособия, хрестоматии,
· методические рекомендации для учителей и учащихся,
· учебное оборудование и другие средства обучения,
· отдельные методики, критерии, нормы, используемые в ходе исследовательской образовательной и управленческой деятельности в образовательном учреждении.
Предлагаем представлять и, соответственно, оценивать результаты ОЭР на основании следующих показателей:
Критерий | Показатели |
Научная результативность | Качественные характеристики материалов, разработанных в экспериментальных образовательных учреждениях: · актуальность, · новизна, · теоретическая значимость, · эффективность предложений, готовность к внедрению. |
Количественные показатели научной деятельности экспериментального образовательного учреждения: · объём и уровень публикаций, · количество защищённых и готовящихся к защите диссертационных исследований, · участие ОУ в грантах, конкурсах и научно-практических конференциях. | |
Методическая результативность | Разработка и освоение новых технологий, методик, программ. Количественные показатели организации методической учебы педагогов в различных формах (конференции, семинары, творческие отчёты, круглые столы, консультации и т. д.). |
Практическая результативность | Выполнение программы развития инновационных процессов в образовательном учреждении Развитие личности учащихся и воспитанников. Положительная динамика качества образования. Сохранение и улучшение здоровья учащихся и воспитанников. Повышение уровня компетентности педагогов образовательного учреждения. Рост доступности образовательных услуг для населения Рост участия общественности в соуправлении ОУ. Рост степени привлекательности образовательного учреждения для учеников, родителей, населения и т. д. |
Данная система показателей была создана на основании принципов критериального оценивания, а декомпозиция критериев с выделением указанных показателей основана на методических рекомендациях, описанных в работах , , С [1, 2, 3, 4, 5, 6].
Литература.
1. Краевский научного исследования. СПб. 2001.
2. Загвязинский и методика дидактического исследования. – Тюмень. – 1995.
3. В помощь педагогу, приступающему к экспериментально-исследовательской работе. – Калининград. – 1989.
4. Новикова эксперимента в образовательных системах. – М. – 2002.
5. Чечель исследовательской деятельностью педагога и учащегося в современной школе. – М. – 1998.
6. Черепанов оценки в педагогических исследованиях. – М., Педагогика, 1989.
