Результаты исследования уровня сформированности социальных компетенций выпускников общеобразовательных учреждений Тверской области

Результаты исследования уровня сформированности социальных компетенций выпускников общеобразовательных учреждений Тверская обл." href="/text/category/tverskaya_obl_/" rel="bookmark">Тверской области

(в рамках проекта по разработке системы показателей и индикаторов
для управления качеством образования)

нач. отдела мониторинга и статистики ГОУ ТОИУУ

Очевидно, что отметки по предметам в аттестате и баллы в сертификате ЕГЭ не отражают всей полноты результатов образования. Выпускник школы должен уметь применять знания, действовать в неопределенной ситуации, владеть ключевыми социальными и иными компетентностями. Ключевые компетентности формируются и проявляются в деятельности. Школа обладает огромным потенциалом для формирования ключевых компетентностей в рамках предметов общественно-научного цикла. Педагоги могут применять на уроках компетентностно-ориентированные и практико-ориентированные задания, позволяющие детям сформировать компетентность. Формирование ключевых компетентностей может быть обеспечено через внеаудиторные формы образовательной деятельности: проектные, творческие, исследовательские, трудовые, спортивные и др. занятия, как часть образовательного процесса. На каждой ступени обучения в школе в соответствии с возрастом учащиеся проходят разные уровни формирования ключевых компетентностей: присвоение алгоритмов (культурно заданных образцов) на начальной ступени, пробы – в подростковом возрасте (попытка субъективно заданного действия) и ответственный выбор (решение на основе субъектной позиции) – как новообразование в деятельности старшеклассника. Результат освоения субъективно новой деятельности (способов деятельности) возможно отследить через оценку продуктов деятельности или посредством однозначно формализованного наблюдения за реализацией содержания и процедуры деятельности.

Поэтому одним из важнейших направлений деятельности в системе оценки качества образования Тверской области является исследование уровня сформированности ключевых компетентностей выпускников. В соответствии с «Концепцией модернизации образования…», где определено одно из направлений изменения качества образования за счет введения в практику определения, формирования и оценки нового результата образования – ключевых компетентностей, в Тверском регионе в течение 3-х лет исследуется результат образования, выражающийся в овладении учащимися социально значимыми наборами способов деятельности, универсальными по отношению к предмету воздействия.

Для оценки уровня сформированности ключевых компетентностей применяются тестовые задания открытого типа. Компетентностно-ориентированные задания отличаются по длине и характеру ответа, что и служит основанием для классификации тестовых заданий открытого типа: вопросы с кратким ответом, вопросы с расширенным структурированным ответом, вопросы с развернутым неструктурированным ответом.

Контрольно-измерительные материалы стандартизированы по содержанию, процедуре, способам обработки и интерпретации результатов.

Стандартизация процессов обработки и интерпретации результатов достигается за счет наличия модельных ответов (для вопросов с кратким ответом) и шкал. Используется аналитическая шкала оценки открытых ответов, которая состоит из двух частей: единой шкалы, которая используется для оценки всех тестовых заданий открытого типа, и специфической шкалы, применяемой для оценки каждого конкретного задания. Использование единой шкалы позволяет обеспечить единообразный (объктивизированный) подход к оцениванию письменных открытых ответов, создает некий эталон ответов, максимально уменьшая расхождения в экспертных оценках. Аналитическая шкала позволяет снизить уровень требований к подготовке оценщиков, поскольку сама оценочная шкала заставляет фокусировать внимание на объектах оценки, детализация критериев не позволяет слишком вольно интерпретировать результаты, а выставление оценки по нескольким параметрам делает сам подсчет баллов более надежным.

Стандартизация процедуры достигается за счет соблюдения инструкции по проведению тестирования.

За три года проведена диагностика уровня сформированности ключевых компетенций выпускников в 43 муниципалитетах области (в 2007г. диагностика проведена в 3 муниципалитетах, в 2008г. – в 19 муниципалитетах, в 2009г. – в 21 муниципалитете Тверской области). Общее кол-во учащихся, участвовавших в исследовании – 1800 человек. Целью данного исследования являлось определение уровня сформированности ключевых компетентностей выпускников в сфере разрешения проблем, коммуникации и работы с информацией. За этот период подготовлено 86 специалистов-оценщиков из муниципалитетов региона, способных самостоятельно организовать, провести данное исследование, обработать и интерпретировать результаты, сделать аналитические справки. Оценщики региона прошли обучение под руководством специалиста из региона, который принял участие в установочном семинаре Московской школы социальных и экономических наук по проблеме «Индикаторы и показатели в управлении качеством образования».

Муниципальными органами управления образования для проведения тестирования были определено 3 общеобразовательных учреждений в муниципалитете, выбранных на основании рейтинга по результатам сдачи ЕГЭ («сильная школа» - 1 уровень, «средняя школа» - 2 уровень, «слабая школа» - 3 уровень). Из каждой школы в тестировании участвовал один класс выпускников.

По результатам, полученным в течение трех лет сделана сводная таблица по количеству учащихся освоивших тот или иной уровень компетентности. По результатам диагностики можно сказать, что у половины выпускников на среднем уровне сформированы информационная и коммуникативная компетентность, и только у 3,2% выпускников на среднем уровне сформирована компетентность разрешения проблем. Ни один учащийся не демонстрирует полностью сформированную компетентность в разрешении проблем.

Табл.1

Результаты диагностики уровня сформированности ключевых компетентностей

Уровни компетентности	Наименование ключевой компетентности
Информационная компетентность (Доля учащихся)	Коммуникативная компетентность (Доля учащихся)	Самоменеджмент (Доля учащихся)
Доля учащихся, не демонстрирующих компетентность	0,2%	19%	41,5%
Доля учащихся с частично сформированной компетентностью	46,9%	32,8%	55,3%
Доля учащихся, демонстрирующих средний уровень сформированности ключевой компетентности	49,9%	41,6%	3,2%
Доля учащихся, имеющая сформированную ключевую компетентность	3%	6,6%	0

Рис.1 Результаты диагностики уровня сформированности ключевых компетентностей

По результатам исследования сделаны аналитические справки с качественным и количественным анализом работ учащихся для каждого муниципалитета с рекомендациями по дальнейшей работе педагогов по формированию социальных компетентностей учащихся. Данные результаты можно использовать для разработки программ развития МО и ОУ, а также использовать в публичных докладах ОУ, что позволит повысить конкурентоспособность ОУ на рынке образовательных услуг.

Информация об уровне сформированности ключевых компетентностей, продемонстрированном каждым учащимся, позволяет определить следующие показатели:

- степень направленности деятельности региональной \ муниципальной системы образования на социализацию учащихся;

- равенство доступа в муниципальной системе образования к образовательным услугам, способствующим социализации учащихся.

По результатам исследования уровня сформированности ключевых компетентностей выпускников выстроен рейтинг муниципалитетов, который позволяет выявить те образовательные округа, где формирование ключевых компетентностей происходит наиболее успешно.

Результаты по региону свидетельствуют, что в большинстве своем учащиеся выпускного класса в рамках исследования уровня сформированности информационной компетентности:

-  готовы выделить из представленной информации ту, которая понадобится для решения задании, но не готовы самостоятельно сформулировать запрос на информацию, когда задача поставлена,

-  готовы извлечь информацию для источника, пользуясь заданными основаниями, но не готовы самостоятельно сформулировать основания на основе поставленной задачи информационного поиска,

-  готовы упорядочить информацию в рамках заданной простой структуры, но не готовы – в рамках сложной, а также не готовы самостоятельно предложить структуру для систематизации информации в соответствии с задачей,

-  видят вывод и аргументы в источнике информации, но не готовы, пользуясь предоставленной информаций самостоятельно сделать вывод и \ или подготовить аргументацию.

В регионе наиболее благополучной является ситуация по аспекту «планирование информационного поиска», учащиеся лучше справлялись с извлечением и систематизацией информации, чем с ее обработкой.

Анализ ошибок учащихся, выявленных в работах, поступивших на проверку, позволяет говорить об основных затруднениях учащихся. В заданиях по аспекту «планирование информационного поиска» затруднение вызывали задания, связанные с обозначением собственной информационной потребности в связи с поставленной задачей.

В заданиях по аспекту «извлечение и первичная систематизация информации» для большинства учащихся сложность представляло не извлечение информации по заданным основаниям, а ее структурирование в предложенной форме и перевод из одного вида – в другой. Особенные трудности вызвал перевод текстовой информации в комбинированную форму представления (схема). Если учащиеся справлялись с этими трудностями, то далее их останавливало усложнение не способа систематизации, а задания по извлечению информации. Учащиеся не могли самостоятельно сформулировать основания (критерии) (вариант 2) или путались в многочисленных основаниях для классификации и группах (вариант 2).

В заданиях по аспекту «обработка информации» типичные ошибки учащихся связаны с тем, что они не готовы соотносить вывод и аргументы:

-  учащиеся выписывают целые фрагменты текста, в которых, по их мнению, содержится аргумент, не извлекая собственно аргумент.

-  учащиеся путают позиции при извлечении аргументации,

-  учащиеся несколько раз приводят один и тот же аргумент: либо в разных формулировках, либо отдельные части причинно-следственной связки.

Часто учащиеся показывают два вида результатов. Либо они не в состоянии сделать вывод (т. е. не демонстрируют соответствия требованиям). Либо они делают вывод и корректно приводят аргумент (эту операцию они уже успешно демонстрировали ранее), но, не смотря на текст задания, в подавляющем большинстве случаев ограничиваются одним аргументом, т. е. не добирают баллы, необходимые для признания полного выполнения задания по данному аспекту.

Табл.2

Распределение учащихся по категориям внутри информационной компетентности

Уровни компетентности	Наименование ключевой компетентности
Информационный поиск (Доля учащихся)	Систематизация информации (Доля учащихся)	Извлечение информации (Доля учащихся)
Доля учащихся, не демонстрирующих компетентность	6%	25%	6%
Доля учащихся с частично сформированной компетентностью	9%	54%	55%
Доля учащихся, демонстрирующих средний уровень сформированности ключевой компетентности	72%	21%	38%
Доля учащихся, имеющая сформированную ключевую компетентность	13%	0%	1%

Большинство учащихся успешно оформляют свою мысль в форме стандартных продуктов письменной коммуникации сложной структуры, определяют жанр и структуру письменного документа (из числа известных форм) в соответствии с поставленной целью коммуникации и адресатом. Можно высказать предположение о том, что отдельные образовательные учреждения ведут работу с учащимися в этом направлении

Анализ ошибок учащихся, выявленных в работах, поступивших на проверку, позволяет говорить об основных затруднениях учащихся. Все ошибки связаны с некорректным распределением информации по структуре документа. При этом потери или искажение информации допускались очень редко. Типичные ошибки связаны с тем, что:

-  учащийся при чтении задания не умеет вычленять именно ту деятельность, которая в нем заложена,

-  учащийся не понимает формулировки задания и подменяет заложенную в задании деятельность иной, продиктованной его личным опытом (тем, что ему чаще всего приходится делать) или указанием учителя, который в нарушение инструкции навязывает учащемуся свое понимание задания,

-  учащийся, даже приступив к выполнению задания, сбивается на воспроизводство информации, заложенной в справочных материалах или иных источниках, так как не имеет опыта выполнения задания,

-  учащийся игнорирует практическую, прагматическую направленность задания и выполняет его формально: например, приводит аргументы, которые не будут эффективны в реальной ситуации.

Результаты по региону свидетельствуют, что основная масса учащихся выпускного класса не готовы ставить задачи, планировать свою деятельность и ресурсы и осуществлять текущий контроль собственной деятельности. Это означат, что учащиеся:

-  не готовы определить и выстроить в хронологической последовательности шаги по решению поставленной задачи,

-  не готовы учесть внешние требования и ограничения при планировании своей деятельности,

-  не готовы корректно воспроизвести в процессе планирования технологию по инструкции (источнику задания),

-  не готовы называть ресурсы, необходимые для выполнения деятельности, даже выбрав их из источника.

Соответствие требованиям уровня II не продемонстрировал ни один учащийся. Это означает, что ученики выпускного класса в целом:

-  не готовы ставить задачи, адекватные цели,

-  не готовы ставить цель своей деятельности в соответствии с проблемой, требующей разрешения,

-  не готовы самостоятельно спланировать и осуществить текущей контроль своей деятельности,

-  не готовы выбирать технологию деятельности (способ решения задачи) или выделить часть известного (данного в источнике) алгоритма для решения конкретной задачи,

-  не готовы спланировать ресурсы для решения задачи.

По результатам диагностики в разрезе школ разного уровня были получены следующие результаты:

- в школах 1 и 2 уровня у выпускников выше развиты информационные компетентности, что закономерно, т. к. материально-техническая база школ позволяет интенсивно развивать эти компетентности;

- компетентность в разрешении проблем выше развита у сельских школьников, т. к. им приходится самостоятельно решать больше бытовых проблем, чем выпускникам городских школ.

Табл. 3

Результаты данных по компетентностям в разрезе школ разного уровня

Категории школ	Средний балл по информационной компетентности	Средний балл по коммуникативной компетентности	Средний балл по компетентности в разрешении проблем
Школы 1 уровня (лицеи, гимназии, базовые школы, профильные классы)	14,87	8,05	4,64
Школы 2 уровня (общеобразовательные школы малого города)	15,03	7,29	4,03
Школы 3 уровня (малые сельские школы)	13,91	7,75	4,91

Рис.2 Результаты данных по компетентностям в разрезе школ разного уровня

Анализ результатов диагностики уровня сформированности ключевых компетентностей выпускников показал, что учащиеся испытывают затруднения при работе:

• с заданиями большого объема как текстовой информации, так и информации в виде таблиц, диаграмм, графиков, рисунков, схем;

• с заданиями, составленными на материале из разных предметных областей, для правильного выполнения которых надо интегрировать разнообразные знания, использовать общеучебные умения, отбирать и использовать адекватные описываемой ситуации способы размышления, анализа;

• с заданиями, в которых неясно, к какой области знаний надо обратиться, чтобы определить способ действий или информацию, необходимые для выявления и решения проблемы;

• с заданиями, где нужно привлекать дополнительную информацию (в том числе выходящую за рамки описанной в задании ситуации), или, напротив, с заданиями, содержащими избыточную информацию и «лишние» данные;

• с комплексными или структурированными заданиями, состоящими из нескольких взаимосвязанных вопросов;

• с большим числом заданий разной тематики и разных форматов, требующих разных форм записи ответа (выбора ответа, записи словесной или числовой, краткого или развернутого обоснования) в одной работе, которую надо выполнить за ограниченное время.

Лучше всего в регионе выглядят результаты по направлению «информационный поиск» и «готовность к продуктивной коммуникации». Уровень готовности к разрешению проблем наиболее проблемная составляющая социализации учащихся в регионе. В нашем случае комбинации, частота который составляет 5% и более от совокупной выборки, следующие:

1.  20,31% - учащиеся, не продемонстрировавшие готовности к разрешению проблем и продемонстрировавшие готовность к работе с информацией и к коммуникации,

2.  2,8% - учащиеся, продемонстрировавшие соответствие требованиям среднего уровня по всем трем компетентностям,

3.  36,6% - учащиеся, не продемонстрировавшие готовности к разрешению проблем и к продуктивной коммуникации и продемонстрировавшие готовность к работе с информацией на среднем уровне,

4.  4,6 б% - учащиеся, не продемонстрировавшие готовность к разрешению проблем и к работе с информацией, а продемонстрировали готовность к продуктивной коммуникации на среднем уровне,

Если рассматривать типичные ситуации по муниципалитетам разных видов, можно заметить, что кластер 1 и 3 часто встречается у школьников больших и малых городов. Для других кластеров нехарактерна определенная связь с видом муниципалитета.

Большая доля респондентов (более 50%) , не демонстрирующих и демонстрирующих частично сформированную компетентность – говорит об отсутствии направленности деятельности региональной \ муниципальной системы образования на социализацию учащихся. Очевиден вывод о том, что социализация части учащихся происходит стихийно под воздействием непосредственного или более широкого социального окружения, а не вследствие целенаправленной работы в системе образования.

На основании полученных результатов считаю целесообразным:

- включить в региональную систему оценки качества образования в рамках внеучебных достижений учащихся такой индикатор как уровень сформированности ключевых компетентностей ученика общеобразовательной школы;

- обобщать и распространять опыт образовательных учреждений по формированию компетентностных результатов образования учащихся, по усилению роли самостоятельной работы, применению деятельностных методов обучения, направленных на формирование ключевых компетенций;

- использовать результаты исследования уровня сформированности ключевых компетенций выпускников для оценки качества и результативности работы учителей для установления стимулирующих выплат педагогическим работникам;

- использовать результаты исследования уровня сформированности ключевых компетенций выпускников в качестве показателя эффективности деятельности педагогических кадров во время аттестации;

- исследовать уровни сформированности ключевых компетентностей на более ранних ступенях обучения, чтобы принять адекватные решения по устранению проблем и корректировке образовательного процесса.