Квалиметрия образовательных технологий (стр. 9 )

«Пакетирование рейтинговых баллов»

СЭ	335	332	334
335	1,20	0	0,55
332	0	1,10	0
334	0,45	0	1,30

В отличие от модульных кластеров разнообразия, акцентирующих внимание на структурных элементах (СЭ), суммарный кластер учебной дисциплины включает в себя ситуации неопределенности (СН) концептуальной (К), прикладной (П), технологической (Т) направленности.

Кластер разнообразия учебной дисциплины

СН	К	П	Т
К	3,60	0	1,52
П	0	3,30	0
Т	1,48	0	3,90

Диагональные элементы кластера характеризуют количество проблемных заданий (в случае N=3 их 9) и дробные величины разнообразия тестовых заданий соответствующей направленности. Кроме того, взаимосвязь двух структурных элементов каждого модуля представлена долевыми вкладами в проектное задание, которые можно рассчитать по экспертному бланку на странице 26.

С учетом эталонного распределения разнообразия построим универсальный кластер целевой функции.

Кластер целевой функции N-модульной дисциплины

СН	К	П	Т
К	1,2N	0	0,5N
П	0	1,1N	0
Т	0,5N	0	1,3N

Для получения желаемого результата необходимо, чтобы половина тестовых заданий была посвящена используемой технологии, и только одно задание должно быть прикладным. При этом основой проектного задания являются два структурных элемента высших рангов, обладающих практически одинаковой значимостью. Вычитая из кластера разнообразия целевой кластер (N=3), получаем кластерный показатель эффективности образовательной технологии.

Кластер эффективности модульной структуры

СН	К	П	Т
К	0	0	+0,02
П	0	0	0
Т	‒0,02	0	0

Судя по тому, что абсолютное максимальное значение отклонения от эталона не превышает 0,02, эффективность модульного структурирования оказывается не меньше 0,98. Это значит, что в 98% случаев разработанная модульная структура учебной дисциплины позволяет отказаться от условия предшествования.

Тест рубежного контроля №6

Тест содержит 6 заданий, на выполнение которых отводится 8 минут. Выберете в каждом задании наиболее правильный, по Вашему мнению, вариант ответа и отметьте его любым значком.

1. Скорость передачи информации уменьшается при переходе
1)	к повторению ранее изученного материала	2)	к обсуждению нового материала
3)	к изучению сложного материала	4)	к конспектированию программного материала
2. В результате обсуждения трех вариантов разрешения каждого из двух проблемных заданий и двух вариантов ответа на третье задание педагогическое действие составило
1)	2 структурных элемента	2)	2 ⅔ структурного элемента
3)	3 структурных элемента	4)	8 структурных элементов
3. Показателем публикационной активности преподавателя является количество изданий, зарегистрированных в РИНЦ
1)	в текущем году	2)	в журналах с импакт-фактором больше 0,1
3)	и соответствующих учебной нагрузке	4)	и цитируемых другими авторами
4. Количество разрешенных проблемных ситуаций в процессе изучения трехмодульной дисциплины группой из 25-ти студентов и эффективности стимулирования их заинтересованности процессом обучения 0,69 равно
1)	6	2)	9
3)	52	4)	155
5. Шесть студентов из 25-ти успешно справились с тестом рубежного контроля и предложили оригинальные способы выполнения проектного задания, а двум студентам, пропустившим тестирование, преподаватель начислил тестовый и проектный пакеты рейтинговых баллов. Эффективность технологии стандартизации тестового задания составляет
1)	0,24	2)	0,32
3)	0,50	4)	0,68
6. При эффективности технологии пакетирования рейтинговых баллов 0,94 из 25-ти студентов имеют средневзвешенные рейтинги, превышающие эталонную медиану
1)	11	2)	12
3)	13	4)	14

7. Квалиметрическое анкетирование

7.1. Наиболее эффективной диагностической процедурой, применяемой в образовательном процессе, является …

экспертиза; тестирование; анкетирование.

Экспертиза – это количественная оценка квалифицированными профессионалами недостаточно исследованных или неформализованных объектов, точность которой обеспечивается отбором экспертов в соответствии с весомостью и конкордацией их суждений. Примером экспертизы является социологическое исследование суждений работодателей по поводу кредитования компетенций, эффективность которого определяется степенью соответствия научных интересов преподавателей отобранным стандартам поведения. Автономная экспертиза – важнейшая составляющая модульного структурирования учебной дисциплины, эффективность которой подтверждается степенью отклонения кластера разнообразия ситуаций неопределенности от кластера целевой функции отказа от условия предшествования. Наконец, эффективность репрезентативной экспертизы проблемного задания, связанной со стимулированием заинтересованности процессом обучения, характеризуется отношением суммы реально начисленных проблемных пакетов рейтинговых баллов к максимально возможному ее значению.

Тестирование – это процедура выполнения специальным образом подобранных заданий, позволяющих оценить личностные характеристики испытуемого, в частности, его учебные достижения. Тестовые материалы подвергаются стандартизации посредством определения их валидности и надежности с помощью репрезентативной выборки испытуемых и нормального статистического распределения. Например, целевая функция стандартизации тестового задания заключается в выявлении степени согласованности рефлексии собственных достижений с внутренней мотивацией студента. При этом эффективность рубежного тестирования определяется долей совпадения успешного выполнения теста с самостоятельной проектной деятельностью.

Анкетирование – это ответы на вопросы или количественные оценки критериев объекта исследования, которые включены в специально подготовленный бланк, подвергающийся статистической обработке. Анкета не обладает встроенной индикаторной методикой типа шкалы лжи или заранее подготовленных ключей. Респонденты не отбираются по квалификационным признакам или конкордации их суждений. Статистическая значимость результатов анкетирования достигается объемом выборки, на основе суждений участников которой формулируются диагностические заключения.

7.2. Анкета приобретает экспертные свойства, если в нее включить критерии …

согласованные по содержанию; различной направленности; содержащие ошибочные утверждения.

Анкета, включающая в себя прямолинейные вопросы или утверждения, не обладает экспертными свойствами и позволяет получить результаты, обладающие только статистической ценностью. Например, если респонденту предоставить возможность оценить по пятибалльной шкале утверждение «Прагматическая педагогика обладает большей эффективностью по сравнению с классической педагогикой», то в случае оценки одним или двумя баллами мы имеем дело с противником постиндустриальной образовательной системы. Статистическая обработка результатов анкетирования интересующей нас выборки покажет, насколько прагматическая педагогика востребована в современном обществе, но никакой информации об эффективности постиндустриальной системы образования с помощью данного утверждения получить нельзя.

Чтобы повысить экспертную направленность и объективность результатов анкетирования, необходимо предложить респонденту оценить еще одно утверждение «Усвоение программного материала на уровне понимания предполагает заинтересованность процессом обучения». Если оно будет оценено высоким баллом, то станет очевидной непоследовательность и ситуативность суждений респондента. Если же его оценка и в данном случае окажется низкой, то следует признать внутреннюю согласованность взглядов, негативных по сути, но имеющих право на существование. Утверждая приоритетность классической педагогики, вполне естественно отрицать взаимосвязь между понятийным усвоением информации и заинтересованностью обучением. В этом случае, респондент вполне достоин статуса эксперта, хотя и относится к иной научной школе.

Обратите внимание на то, что согласующиеся по содержанию критерии, все же различаются по своей направленности. В утверждении о преимуществе прагматической педагогии явно доминирует концептуальная составляющая. Если же говорится о заинтересованности процессом обучении, то налицо прикладная направленность соответствующего критерия. Необходимость различать внутреннюю ориентацию предлагаемых утверждений связана с тем, что анкета должна включать в себя пары взаимосвязанных критериев, объединенных общим содержанием, но при этом образующих два множества – концептуальное и прикладное.