В философии дихотомии соответствуют парные диалектические противоречия объект-субъект, причина-следствие, необходимость-случайность, теория-практика и т. д. На быто­вом уровне здравый смысл типа «да-нет» совместим с однозначностью причинно-следственной картины мира Галилея. У человека немало симметричных парных органов, выполняющих одни функции. При нарушении деятельности одного органа человек смо­жет обойтись с помощью дублера. В этом смысле исключение составляют лишь два по­лушария головного мозга, которые не могут заменить друг друга. Согласно данным В. Геодакяна, левое полушарие мозга служит для последовательной обработки информации, в то время как правое полушарие воспринимает информацию одномоментно.

Диада высвечивает в пространстве решений резкое разграничение – ось. Противопо­ложности занимают на некоторой шкале оценки крайние места, взаимоисключают и взаимопредполагают друг друга. В динамическом характере столкновения противоположных сил происходят процессы изменения и развития. Приведенные антимологии-проблемы выражают диалектические ситуации познавательного отношения между понятиями в наи­более резкой форме. Этому соответствует и жизненная мудрость, которая указывает, что «крайности сходятся». Однако, в случае высказывания типа «да» и «нет», когда один гово­рит одну правду, а другой противоположное, проблема всегда находится посередине.

Неопределенность диады в рассматриваемых случаях подразумевает возможность вы­хода за рамки формально-логического «да-нет» в другое измерение, в новую сферу поня­тий. Так, например, создатели неэвклидовой геометрии, уйдя от оппозиции «да-нет», от­крыли новую область знаний. Ограниченность метода парных оппозиций при выборе стратегии оценки учебных достижений очевидна, поскольку двоичные суждения слишком категоричны. В них не учитываются корреляционные связи между противоположными полюсами атрибутов. Сохраняя антропоморфную ограниченность двоичного мышления, нельзя выйти из получающихся при этом тупиковых ситуаций. Этому образу привычного бытовизма диады, где все определено в соответствии с нормами повседневности типа «да – нет», и противостоит многоуровневая оценка. Поэтому первым шагом на пути разреше­ния этой антиномии является переход к исследованию более сложных взаимодействий применительно к анализу результатов компьютерного тестирования.

НЕ нашли? Не то? Что вы ищете?

В свое время Гегель представлял выявление и разрешение антиномий – проблем в схеме триады: «тезис-антитезис-синтез», которую он назвал «отрицание отрицания». Наи­более часто в наше поле зрения попадает триадная структура. Здесь умение понять диа­лектическое единство противоположностей обеспечивает их синтез. «Синтез», в свою оче­редь, порождает переход от диады к триаде и осуществляется всякий раз на пути поиска решения, в рамках которого достигается единство противоположностей тезиса и антите­зиса.

Понятие «триада», как описание троичности, впервые было применено древнегрече­ским философом Платоном. Назовем триадой три элемента, связанные между собой в единый целостный комплекс. В поисках общих закономерностей трихотомии, т. е. расще­пления понятия на три части, обратимся к истории стихийно сложившихся систем триад. Прежде всего следует описать массовые примеры, в которых используется процедура со­поставления сравниваемых объектов произвольной природы [11].

В математике различают топологические, порядковые и алгебраические структуры. Особенностями интерактивных алгоритмов оценивания считают: универсальность, про­стоту реализации, ориентированность на сложные задачи. Психологической, математиче­ской или статистической модели в системе «человек – машина» соответствуют три вида моделирования деятельности оператора: психологическое, математическое и статистиче­ское. Любое тестовое суждение состоит из трех частей: условия, требования и оператора задания. Отношения рефлексивности, симметричности и транзитивности являются фор­мальными правилами, указывающими на пределы логически возможного в количествен­ных взаимоотношениях. Имеются три эквивалентных способа анализа множества данных в зависимости от того, делается ли акцент на структуре (логическая точка зрения), содер­жании (теоретико – множественная точка зрения) или на ее отношении к действительным фактам (событийная точка зрения). Главные затруднения, связанные с применением мате­матических методов в тестометрии, определяются недостаточной разработкой трех групп вопросов:

·  методологии построения «идеализированных» понятий;

·  терминологических проблем языкового барьера между математикой и педаго­гикой;

·  специального прикладного математического аппарата и путей его применения в процессах КАТ.

При создании математической модели рассматривают три основные ступени: по­строение математической теории; сопоставление теоретических и экспериментальных по­нятий; установление границ применения теории. Динамика системы КАТ описывается ма­тематической моделью, которая отражает зависимости между тремя множествами пере­менных: входа, состояния и выхода. Три кита лежат в основе вычислительной задачи: су­ществование, единственность и алгоритм. В этом смысле проблема безусловной миними­зации непрерывной органической функции характеризуется триадой: «Имеет ли задача минимизации решение?» «Является ли минимизирующая функция одноэкстремальной?» «Можно ли найти сходящийся эффективный алгоритм вычисления хотя бы одного ло­кального минимума заданной функции?» Назначение трансцендентальной логики И. Кант усматривал, во-первых, в установлении источника знания, во-вторых, в определении его объема и, в-третьих, в выявлении границ разумного мышления.

Развитие геометрии шло от псевдоэвклидовой плоскости к трехмерному пространству и далее к четырехмерному миру Г. Манковского, скрытого от непосредственного зритель­ного восприятия. Через три операции – отрицание, конъюнкцию и дизъюнкцию – выражаются многочисленные высказывания. Термины связность, сложность и катастрофа ох­ватывают атрибуты процессов, пронизывающих различные направления теории систем.

Методология научного познания в зависимости от того, какая сторона явления счита­ется наиболее существенной для данного исследования, позволяет выделить три типа мо­делей: концептуальные (феноменологические), эмпирические (физические) и математиче­ские (аналитические). Структура науки сводится к трем взаимодействующим между собой компонентам знаний: эмпирическому, теоретическому и философскому.

Имеют место три модуса времени: постоянность, последовательность и одновремен­ность. В постулатах эмпирического мышления формулируются три вида условий: фор­мальные, материальные и их сочетание. Разум мыслит посредством категорических, гипо­тетических и дизъюнктивных умозаключений. Переход от физической модели к матема­тической совершается посредством трех операций: абстрагирования (выделение одного свойства объекта), обобщения (распространение выделенного свойства на другие объек­ты) и идеализации (логической операции, определяющей предел выделенного свойства).

Для выбора методологического подхода, разработки технологии и инструментальных средств компьютерного тестирования целесообразно исследовать практические задачи со­вместимости программ и данных в трех аспектах.

·  Создать программы и базы ПДТЗ, обладающие свойством рентабельной пере­носимости в заданных пределах.

·  Перенести в создаваемую инструментальную среду тестовых проверок сущест­вующие ЭФТК, которые разрабатывались без учета всего комплекса факторов, влияющих на эффективную переносимость.

·  Оценивать эффективность разработки KCT3 и переноса ПДТЗ при управлении проектом, учитывая выигрыш от простоты ввода ЭФТК, переноса ранее соз­данных тестовых ситуаций и затрат на перенос, а также выигрыш и потери в функциональных возможностях приложений за счет их переноса e исходных на новые платформы.

В экспертных системах для записи различных типов решений об оценке меры трудно­сти ПДТЗ используется «доска объявлений», на которой могут быть записаны три типа представлений: элементы плана, заявок и решений. Первые описывают способ решения задачи анализа категории трудности ЭФТК, включая текущие планы, цели и контексты. Второй тип представлений несет информацию о потенциальных действиях, ожидающих выполнение, которые соответствуют правилам вычисления коэффициента согласования оценок экспертов и установления интервалов качества. Элементы решения представляют собой гипотезы и выводы, генерируемые экспертной системой в качестве возможных вариантов вместе с зависимостями, связывающие эти решения между собой.

Для реализации экспертных систем принятия решений о мере трудности ПДТЗ су­ществуют различные возможности формирования программной оболочки, основанные на:

·  применении языков высокого уровня;

·  использовании специальных языков программирования;

·  выборе пакета прикладных программ.

Три типа коммуникаций характерны для информационного общества: между людьми, между людьми и информационными системами и между самими системами. Триада «вход-процесс-выход» описывает информационные процессы. Цели субъекта при органи­зации управления сводятся к одной из трех форм «приравнять – ограничить – минимизировать». Целостная система включает три компонента и их модели: «человек – управляе­мый объект и процесс управления». Информация получает статус равноправного члена триады «масса – энергия – информация», как это следует из работ Н. Винера и А. Берга. Развитие организационно-технической системы представляется во времени траекторией трех групп показателей: входные, внутренние и выходные состояния. Производственные процессы объекта управления характеризуются триадой «ресурсы-процесс-продукт».

В искусстве и литературе трихотомия встречается еще чаще: «Три танкиста», «Три то­поля на Плющихе», «...У отца было три сына», «Три девицы под окном», Три богатыря, «Змей трехглавый», «Три попытки», «Русская тройка удалая», «Три поросенка» и т. п. Ра­ботая в различных живописных манерах, Леонардо да Винчи, Микеланджело Буонарроти и Бартоломео дела Порта сходились в поисках изобразительных средств, с помощью ко­торых можно было достичь единства и свободы в передаче пространства. Тринитарное мышление мы наблюдаем на примере изображения девы Марии: молящейся, указываю­щей, умиляющейся. Часто говорят, «бог троицу любит». Изобразительное искусство рас­щепляют на композицию, рисунок и живопись. Достижение формального равновесия, со­гласия и спокойствия прослеживается в трихотомии творчества Рафаэля: Три грации, Сон рыцаря, Мадонна в зелени, Мадонна со щегленком и Прекрасная садовница.

Лучший путь к постижению творчества – через триаду братьев Карамазовых. Триада «вера – долг – тоска» характеризует «Три сестры» . Три новеллы Эдгара По «Убийство на улице Морг», «» и «Похищенное письмо» образуют первый канон, на котором строится сюжет классического детектива. Требование нравственности определяется такими нормами, как «не лги», «не воруй», «не чини насилия», а совестливость – интеллигентностью, духовностью и порядочностью. Рейнгардт свел «возвышенные» женские характеры к трем типам: Эгерии, Пенелопы и Си­виллы. Триединство истины, доброты и красоты – это вершина Единого, о котором гово­рит «Троица» Рублева. Творчество великих писателей венчает трилогия.

Ф. Шеллин в книге «Философия искусства» указывает, что идея триединства имеет философский смысл: «Вечное есть Отец всех вещей, никогда не выходящий из своей веч­ности, но рождающий себя от вечности в двух формах: конечное, которое есть сам по себе абсолютный, но во внешнем явлении страдающий и очеловечивающийся Сын, а затем вечный Дух, бесконечное, в котором все вещи суть Единое». Трехгранность культуры от­ражается в разнообразии подходов к ее определению (антропологический, философский, социологический). С помощью категории бытия интегрируются три идеи о существовании мира: целостность – единство – реальность. В специфике рассуждений содержания фило­софской категории бытия возникает триада: трудность – вопросы – сомнения. Триада «вера – надежда – любовь» подчеркивает диалектическое единство тела и духа человека. Строение материи можно представить как иерархию трех уровней: «метагалактика – не­живая природа – биосфера». Формы движения материи сводятся к трем сферам матери­ального мира: неживой природе, живой природе, обществу. Материальными носителями биологического движения выступают белки, ДНК, РНК. Для описания целостной картины Мира объединяются ценности духовные, культурные и нравственные. Духовное освоение мира и самопознания человека происходят на общефилософском, социально-философском и культурологическом уровнях. Разум – это триединство мышления, нравственности и системы знаний.

Великий Конфуций (Кун-фу цзы, 551г. до н. э.) различал три полезных друга – спра­ведливый, чистосердечный, знающий, – и три друга, приносящих вред – льстивый, дву­личный и красноречивый. Он утверждал, что существует триада полезных (музыка, речь о чем-нибудь хорошем в людях, дружба с достойными людьми) и триада вредных радостей (тщеславие, безделье, застолье). Конфуций предостерегал: рядом с благородным мужем допускают три ошибки – опрометчивость, скрытность и слепота. Китайская классическая «Книга перемен» содержит высказывание о том, что в мире действуют три потенции – не­бо, человек и земля.

Существует три уровня понятия: бытовой, научно-рациональный и творчески-духовный. Связям «строение, функционирование и развитие» соответствует структурный, функциональный и генетический типы целостности как единство частей в многообразии их взаимодействий. Только в совокупности эти три понятия дают целостную практику факторов, от которых зависит качественная определенность системы компьютерного тес­тирования. Диалектическое «отрицание» включает в себя триаду «деструкция, кумуляция и конструкция». Реальным аналогом «отрицания отрицания» являются «спиралевидные» процессы, включающие в себя цикличность, повторяемость и поступательность.

Единство сил, определяющих циклические периоды Хаоса и Порядка, прослеживают­ся в индийской философии, где выделяются три мифических образа: творец мира (Брах­ма), хранитель мира (Вишну) и разрушитель мира (Шива). Этим образам свойственны три качества: активность, уравновешенность, неустойчивость. Они прослеживаются в различ­ных модификациях во многих легендах и учениях: плодородие – жизнь – смерть; творец – хранитель – разрушитель; бог – пророк – дьявол; идея – память – забвение; возбуждение – невосприимчивость – покой. Духовное освоение мира и самосознание человека происхо­дит на трех уровнях – общефилософском, социально-философском и культурологическом. Признание необходимости существования триадной Европы «Западная – Центральная – Восточная» выступает как предпосылка идентификации и целостности народов континен­та.

Самосознание человека происходит на общефилософском, социально-философском и культурологическом уровнях. Чувственное познание включает в себя три формы отраже­ния: ощущение, восприятие и представление. Неотъемлемой частью человеческого позна­ния являете абстрактное мышление, которое осуществляется в формах понятия, суждения и высказывания. В психологии принято различать три ступени человеческой памяти: мгновенную, оперативную и долговременную.

Лингвисты, антропологи, культурологи, этнографисты и др. отмечают особые свойст­ва числа три в плане обязательного присутствия в сознании трех признаков, трех главных осей и т. п. Окружающий мир человек воспринимает как трехмерный. Для всех примитив­ных культур характерно наличие символической цветовой триады «белое, красное, чер­ное». Цвет также описывают три параметра: спектральный состав, насыщенность и свето­сила.

В философско-образовательных исследованиях рассматриваются три взаимосвязан­ных друг с другом объекта – «человек – социум – цивилизация». Единство трех аксиологи­ческих составляющих – государственной, общественной и личностной – образуют катего­рию ценности образования. Благодаря способности к творчеству человеческая деятель­ность обладает триадой универсальных качеств: преобразующих, универсальных и дина­мических.

Методологическая культура преподавателя высшей школы – системная триада «наука – обучение – воспитание»; аспекты педагогической деятельности заключены в единый смысл «методика – дидактика – педагогика». В педагогике замкнутые триады образуют антитезы «учение – преподавание – научение», «простота – точность – локальность», «целостность – элементарность – связанность», «представление – знание – умение». Вы­дающийся педагог эпохи Каменский соль жизни видел в сочетании ра­зума, действия и речи. В психологической концепции выделены три «обра­зующие» сознания – личностный смысл, значение и чувственная ткань.

Мировоззренческие аспекты духовной сферы образования рассматриваются в триаде «наука – образование – религия». Образование синтезирует триаду «наука – образование – производство», а синтез знания и веры соединяются в триаде «знание – смысл – вера». Среднее образование связывает триаду «начальное – среднее – высшее» в единую сферу образования. Содержание образовательных программ определяет подготовку бакалавров, специалистов и магистров. Гармонию аксиологических блоков «государственная – обще­ственная – личностная» составляет категория ценности образования. Философия образования реализуется через триаду «статус – проблемы – перспективы», а менталитет социу­ма – «знания – познания – преобразования». Применение тестов с целью прогнозирования профессиональной пригодности осуществляется на основании триединства аналитическо­го, синтетического и комплексного подходов. Формирование механизма моральной моти­вации у тестируемых определяется триадой: «элементарная нравственность, конвенцио­нальная нравственность и автономная нравственность».

M Вебер различает политиков «по случаю», «по совместительству» и «по профессии». С математической точки зрения установление типа шкалы дидактической оценки опреде­ляет способ, обеспечивающий переход от одной числовой системы к другой, если они «включают одни и те же отношения и гомоморфны одной и той же эмпирической систе­мы». П. Суппес и Дж. Зенис подчеркивали, что «числовое представление – это функция, гомоморфно отражающая эмпирическую систему на числовую, шкала – это кортеж длин­ной три, один из элементов которого есть числовое представление [Суперс C., Зинес Дж. Основы теории. Психологические измерения. M., 1967].

Приведенный список триад выглядит бессмысленным до тех пор, пока не уточнено внутреннее содержание каждой триады, не выяснено введение третьего понятия, которое уменьшает противоречия между «крайними терминами». Так, если генезис диады «статика – динамика» антитетичен, то в плоскости триады одновременно существует три парных отношения «статика – кинематика – динамика», смещенные относительно центра. Введе­ние третьего измерения в антитез «явление – сущность» замыкается аналитически через понятие «структура». Резкие грани дня и ночи устраняет рассветно-сумеречная зыбкость. Язык превращает диаду индивидуализированного и объективизированного духовного в единую триаду «сознание – язык – мысль». Связка «есть» замыкает высказывания «роза белая», «калина красная» и т. д. Она приписывает субъекту всеобщую характеристику свойства «быть».

Системная триада характеризуется целостностью и единством содержания, устойчи­востью составляющих ее частей. Если генезис диады изначально антитетичен (сильный-слабый, добрый-злой), то в плоскости триады одновременно существуют три парных от­ношения, смещенные относительно центра. Триады образуют путем расщепления доми­нирующей части диады или путем дополнения последней до триады. При этом её жизнен­ность обеспечивается наличием корреляций между частями тройного комплекса. Так, обо­гащение категорий «часть-целое» понятием связи открыло путь к формированию трех взаимосвязанных категорий: элемент, структура, система; общее и единичное синтезиру­ется в категории особенного, отражающей меру и способ их целостности.

Разработан ряд шкал порядка для анализа профессиональной пригодности или дости­жений испытуемых. Так, например, для вычисления оценки использует де­вятибалльную шкалу. В ней по результатам тестовых проверок с учетом диагностических коэффициентов подсчитывается интегральная оценка, включающая в себя беседы с абиту­риентом, наблюдения за ним в процессе выполнения заданий, методику исследования оперативной памяти и другие параметры личности.

Тринадцатибалльная система была введена (1832) в Царскосельском лицее и пред­ставляла собой шесть ступеней: «0 – худой успех; 1 и 2 – слабый; 3, 4 и 5 – посредствен­ный; 6, 7 и 8 – хороший; 9, 10 и 11 – весьма хороший и 12 – отличный». В 1834 г. система баллов была изменена: «12 оставлено для обозначения отличных успехов, 11 и 10 принято за весьма хорошие успехи; 9 и 8 – хорошие; 7 и 6 – удовлетворительные; 5 и 4 – посредст­венные; 3 и 2 – худые; 1 и 0 – для обозначения безуспешности [Исторический очерк Импе­раторского лицея 1811 – 1861 С. – Петербург, 1861]. Применительно к педагогическим из­мерениям B. C. Аванесовым предложены десятибалльная и одиннадцатибалльная шкалы оценки. Шестнадцатибальная шкала описана A. O. Татуром. В соответствии с предложе­ниями специальной группы Task Group on Assessment and Nesting в Англии результаты уровней достижений школьников определяются по 10-балльной шкале.

Переходя к триадной сущности шкалы оценки, мы выдвигаем версию, что триада, как одно из возможных логичных объяснений представления результатов СКДО, может быть использована при установлении УУД тестируемого. Третий фактор здесь выступает в ро­ли регулятора, а учет всех частей триады ведет к построению симметричной формы прин­ципа неопределенности. Отсюда следует, что если подойти к проблеме культуры оценки более широко и откорректировать соответствующим образом смысл используемых тер­минов, то получается не тупик, а диалектическая перспектива шкалирования.

Рассмотрим в качестве триадной структуры шкалу оценки поведения респондента на уровне отличника. За традиционной отметкой не удается различить индивидуальные со­стояния обученности целеустремленных объектов. В системе обучения отметка выражает атрибут анонимного множества экзаменуемых без учета их индивидуальности. Здесь не­возможно обнаружить никаких специфических черт, характерных, например, для почти отличников и превосходно обученных испытуемых. В триаде необходимо предусмотреть традиционную отметку и ввести необходимые рациональности. Расщепляя понятие «отличник» на части, получим оценочную триаду типа «превосходно – отлично – почти отлично». Такому подходу соответствует общепринятая оценка преподавателя, когда он уточняет качество проверки достижений студента знаками « – и +» (т. е. – 5, 5 и 5+). Здесь здравому рассудку экзаменатора, ориентированного на однозначность оппозиции «соот­ветствует – не соответствует», противостоит триада «почти отлично – отлично – превос­ходно». Если есть культура оценки, то есть и диахронизм, наличие не одной, а несколь­ких оценок (как нет личности, тождественной другой личности). Раскрывая внутренние связи триады с учетом их содержания, можно более точно различить испытуемых одного класса обученности. В свою очередь, если вся триада тяготеет к другой отметке, то ее можно замкнуть в системную триаду более низкого уровня. В результате приходим к тет­раэдру триад (рис.10).

Рис.10 Двенадцатиуровневая шкала оценки

Двенадцатиуровневая шкала позволяет усилить различающую способность оценки поведения эмпирических объектов, не создавая при этом проблем для преподавателей, традиционно использующих пятибалльную (а точнее четырехбалльную) систему отме­ток. Базовые точки на рисунке составляют привычную систему отметок, а скачки ха­рактеризуют переход количественных изменений оценки в качественные, когда незна­чительные изменения поведения испытуемого являются источниками его перехода из одного класса обученности в другой. Скачки определяют критические моменты «перехода» поведения тестируемого из одного класса обученности в другие, когда в точках «разветвления» (бифуркации) возможных путей эволюции качества заключений индивида тестирующая система принимает соответствующие решения. Связь количе­ственных и качественных противоположностей выражается понятием меры, которая определяет интервал изменений оценки, в пределах которого сохраняется заданный уровень достижений.

(1775 – 1854) отрицал скачки, перерывы в постепенном развитии. Он исходил из мысли (1646 – 1716) о том, что природа не делает скачков. Отсюда следует и ошибочное заключение Шеллинга – все различия в природе и мире носят лишь количественный характер. Ф. Гегель () впервые разработал кате­горию меры, выражающую гармоническое единство качественной и количественной определенностей. В соответствии с этой категорией каждому качественному уровню-интервалу оценки в триаде присущи определенные количественные характеристики. Баллы изменчивы и подвижны. Однако эта изменчивость ограничена уровнем-интервалом триады, за границами которого количественные изменения приводит к появлению нового качества оценки.

Примером того, как накапливающиеся количественные изменения в течение сеанса компьютерных тестовых испытаний приводят к скачкам, является структурная адапта­ция системы КАТ, когда в результате анализа заключений объекта нечисловой приро­ды на требования тестовых заданий происходит автоматическое изменение категории трудности предъявляемых ему тестовых проблемных ситуаций. Гегель в связи с этим отмечал: «Кажущееся невинным количественное изменение представляет собой хит­рость, за которой улавливается качественное изменение». В рассматриваемом нами случае оценки описание закона взаимного перехода подчиняется триаде: качество – количество – мера.

Образование триадной шкалы порядка дает возможность организовать в процессе КАТ различение испытуемых по УУД внутри каждого таксона. Это позволяет утвер­ждать, что культура вариативности степени обученности испытуемых может быть дос­тигнута только на основе различия поведения испытуемых внутри данного класса обученности. Отсюда следует вывод: механизм культуры оценки работает не в на­правлении стандартизации образа тестируемого и подгонки его поведения к общепринятой отметке, а в направлении роста оригинальности, возрастания разли­чий в поведении испытуемых. Здесь действует принцип неразличимости части и целого, когда, входя в целое как часть, отдельная индивидуальность не перестает быть целым. Находясь на этой позиции, можно с полным правом говорить о культуре триад в образовании, если иметь в виду не традиционную отметку, а прогностический смысл культуры оценки. Суть вопроса заключается в индуктивном механизме того, что при­нимается нами как правдоподобное основание для интерпретации поведения целеуст­ремленных объектов.

Триадная сущность шкалы оценки состоит в том, что результаты СКДО между уровнями-интервалами отдельных триад можно отнести к оценкам на порядковой шкале, когда в зависимости от собственных достижений тестируемый относится системой КАТ к тому или иному классу обученности. Это позволяет упорядочить объекты на этапе кластеризации. Более того, внутри каждой триады поведение испытуемого оце­нивается на интервальной шкале, когда для любых значений оценок θ1 и θ 2 содержа­тельный смысл имеют не только соотношения типа θ1 = θ2 или θ1 > θ2, но и разность между ними.

Особенно важным для тестируемых представляется выбор ими меры трудности за­даний в период рациональной аттестации. Ведь полученная им на этапе типологиче­ской классификации оценка является приближенной. Если количественное изменение переходит ту или иную границу (в случае, когда полученные тестируемым баллы на­ходятся на границах скачков), то при незначительных отклонениях поведения испы­туемого происходит нарушение меры и действия тестируемого элиминируются.

Приведенный системный тетраэдр триад оценки УУД телеологических объектов сохраняет качественную картину проверки достижений и обеспечивает естественное различение их качества обученности на каждом уровне иерархии шкалы, представ­ляющей собой совокупность возможных цифр и уровней-интервалов, соответствую­щих качеству заключений тестируемых. В каждой триадной дефиниции, например, «почти хорошо – хорошо – более чем хорошо» и т. д. существенно новым является по­нятие целостности. Уровень достижений каждого образа отмечается теперь не точкой в плоскости отметок, а окружностью на шкале оценок. Окружность выделяет в рабочем пространстве «хорошиста» область целостного УУД индивида. Триада выступает здесь как фундаментальная структурная ячейка синтеза, кристаллизующая в себе значение латентного параметра обученности конкретного испытуемого.

Доминирование отдельных частей в каждой триаде приводит к изменению ее роли, значимости и «удельного веса» других компонентов, обеспечивает целостность связей, адекватность и образность оценки. Вместе с тем элементы триады неразрывно связаны (скоррелированы) друг с другом, выражают взаимодействие диалектических понятий в пределах заданного уровня достижений тестируемого. Конкретная отметка занимает в триаде соответствующее ей среднее положение, сохраняя при этом свою смысловую нагрузку (отличник, хорошист и т. д.). Триада сопоставляет, соединяет индивидов од­ного класса обученности, уточняет и индивидуализирует их УУД. При всей размыто­сти понятий триадических процедур степень их точности описания уровня знаний, ин­теллектуальных умений и практических навыков соответствует естественной оценке, устанавливаемой экзаменатором.

Приведенные рассуждения позволяют обосновать вывод: только избегая двух крайностей количественного и качественного подходов к установлению значе­ний латентных параметров целеустремленных объектов, – можно применять куль­туру оценки для проведения объективного компьютерного тестирования уровня обу­ченности каждого конкретного испытуемого. Исследуя структуру культуры оценки, замечаем, что помимо целостности каждая триада обладает свойством симметрии от­носительно базовой отметки. В нарушении симметрии триады можно усмотреть скры­тое за этим проявление симметрии другого типа, в переходе от одиночной триады к тетраэдру триад. Речь идет об иерархии симметрии триад, зацепленных друг за друга и соединяющих разные уровни достижений. Эта идея переходящих друг в друга триад заимствована из рассмотрения широкого круга вопросов, связанных с их построением и изложенных в [11]. Строение оценки УУД телеологического объекта (рис.10) есть синтез вычисления (количества) и классификации (качества). В рассматриваемом нами случае оценки понимаются не как противоположные друг другу понятия «соответствует – не соответствует», а как иерархия переходящих друг в друга различных (но близких) уровней обученности. Здесь же следует еще раз под­черкнуть, что идея замыкания оценки внутри каждой триады и связей между триадами приобретает в последнее время все большую и большую популярность. Конечно, в этом случае требуется наличие машинной программы для установления оценки, что­бы в каждом треугольнике триады представить поведение конкретного объекта нечи­словой природы.

Триадный подход к стратегии оценки достижений позволяет перейти к интерваль­ной шкале. Действительно, если производить различение испытуемых внутри любой из триад, то разность между оценками уровней достижений любых двух индивидов имеет вполне осмысленное значение.

Отказ от привычных для преподавателей отметок – цифрового аналога оценки и признание существования триад – является новым шагом на пути объективизации учебных проверок и способствует совершенствованию культуры регулирования про­цессом обучения. Таким образом, переход к культуре оценки оказывается неотдели­мым от проблемы культуры КАТ в целом.

Развивая диалектический метод, можно утверждать, что системно-триадный синтез открыт для преодоления. Однако следует помнить, что идеал всегда хорош, пока мы не слишком к нему близки, что даже переход при аттестации испытуемых от двух компо­нентов к трем имеет большое значение: «Задача взаимодействия двух тел была решена еще И. Ньютоном, а проблема трех тел не решена до сих пор». Безусловно, речь идет только о некоторой степени упорядочения стратегии оценки поведения испытуемых, а не о завершенном исследовании. Согласно принципу , полный порядок во всем равноценен полному хаосу, неопределенности. Надо лишь помнить, что в ис­тории культуры диалектические противоположности всегда понимались в смысле взаимодополнительности, симметрии и взаимоуравновешенности. В тетраэдре триады взаимосвязаны настолько, чтобы обеспечить различение поведения испытуемых как внутри каждой триады, так и дифференциацию поведения тестируемых с различными уровнями-интервалами обученности.

Шкалирование при анализе дидактической информации

Теория тестирования, каким бы строго дедуктивным не было ее изложение, не есть ее априорная конструкция. Ее дедуктивным образом изложенные результаты ни в малейшей степени не исключают генетического отношения теоретического к эмпирическому в са­мой фундаментальной теории КАТ, типичные характеристики которой не сводимы к сис­теме одних лишь логических выводов.

Научная теория, во-первых пользуется абстракциями более высокого порядка, чем эм­пирическое исследование; она восходит от эмпирических данных к идеализированным объектам, широко применяет понятия, не имеющие реальных коррелятов; ее объяснения и выводы включают в себя гипотетические представления.

Второе существенное отличие научной теории состоит в том, что она – продолжение предшествующих теорий, которые непрерывно перерабатываются и развиваются. Мас­штабность, уровень объяснения, глубина проникновения в сущность явлений, обобщение качественно разнородного фактического материала отличают переход от эмпирического к теоретическому знанию. Здесь важно уметь вскрыть специфическую форму единства этих категорий научного познания.

Эмпирический фундамент оценки несравненно многообразнее, чем материал экзаме­национной отметки, сознательно ограниченной необходимым минимумом фактических данных.

Традиционные баллы – наиболее наглядный пример в определении УУД экзаменуемо­го. Значение этого параметра отражает форму и отношение качества заключений тести­руемого на ПДТЗ различной или конкретной меры трудности безотносительно к эмпири­ческому объекту, к которому они могут быть применены. Количество баллов – идеализи­рованная цифра, не обладающая физическими свойствами обученности индивидов. Безус­ловно, количественные отношения и формы их представления наличествуют в самой объ­ективной действительности, но методы их вычисления «имеют своим непосредственным предметом не сами объекты и явления действительности, а идеальные объекты, которые они рассматривают умозрительно, исключая из своих аргументов ссылку на опыт» (. Математика. «Философская энциклопедия», т.3).

Данные наблюдений, послужившие исходным материалом для вычисления баллов, ра­зумеется недостаточны для объяснения состояния обученности конкретного индивида. Чтобы понять закономерность этих величин, необходимо уяснить тот факт, что математи­ка изучает логически возможное «безотносительно к тому, возможно ли его действитель­но осуществить». Логическая сущность баллов стремится выявить, исчерпать мысленно значение латентного параметра обученности индивида. Дедуцируя формально возможное, установление балла учебных достижений представляет реальную возможность их эмпи­рической интерпретации. В этом смысле можно сказать, что абстрактные математические положения опосредованным образом связаны с определением состояния обученности тестируемого. Эту связь необходимо исследовать с позиции категории качества. Утвер­ждать, что состояние обученности объекта нечисловой природы может быть описано только количественно баллами, значит полностью устранить информационно-эпистемологическую проблему, значение которой для понимания сущности шкалирования трудно переоценить.

Задача шкалирования состоит в том, чтобы построить оценки качества заключений тестируемых в числовых или номинальных шкалах. Целью шкалирования является про­ектирование пространства научных наблюдений за поведением тестируемых. Пространст­ва могут быть метрическими (чаще эвклидовым) или метрика может задаваться только путем упорядочения оценок поведения телеологических объектов по осям. Рациональны­ми с точки зрения представления результатов КАТ являются методы шкалирования, в ко­торых УУД индивидов не менее, чем интервальный.

В зависимости от вида исходной информации методы шкалирования делятся на мет­рические и не метрические. Если качество заключений тестируемых на требования ПДТЗ различной категории трудности предлагается оценить в шкале от 1 до 3, причем 1 – значе­ние самого легкого тестового суждения, а 3 – самого трудного тестового утверждения, то предлагается оценить выводы индивидов в интервальной шкале. С информацией такого рода работают метрические способы, и с этими данными проводятся соответствующие арифметические операции. В другом случае предлагается упорядочить качество заключе­ний респондентов по предпочтению. Информацию такого вида обрабатывают с помощью неметрических методов шкалирования (ранговая шкала). С подобными данными не производится никаких незаконных для порядковой шкалы арифметических операций.

Поскольку тестометрия занимается анализом поведения как отдельных респондентов, так и групп индивидов, то дидактическая оценка исходного уровня их учебных достиже­ний связывается с вычислением баллов, полученных целеустремленными объектами в процессе обработки их заключений на ПДТЗ различной категории трудности, а также взаимным расположением результатов КАТ вдоль некоторой шкалы отсчетов. Тестометрическая концепция такого шкалирования заключается в содержательном разделении поведе­ния объектов нечисловой природы на классы, определяемые заданием качественных уровней-интервалов, когда количественное различие определяется полученными респон­дентами баллами и трактуется как степень выраженности числового аналога этого каче­ства. Отображение эмпирической системы с отношениями обученности между объектами в числовую и интервальную шкалу будем называть шкалой оценок. На этой шкале рас­положены отсчеты (деления) для вычисления баллов и уровни-интервалы для отнесения поведения эмпирического объекта к тому или иному таксону (рис. 11).

Оценка УУД тестируемого – категория качественная. До тех пор пока полученные индивидом баллы не получат смысловую окраску, невозможно судить о значении латент­ного параметра обученности респондента. Поэтому отнесение количественных данных характеризующих поведение респондента, к конкретному качественному уровню-интервалу его обученности – постижение смысла оценки для заданной процедуры шкали­рования. Постигая сущность оценки, мы как бы переносим замысел исходного знания проектировщика алгоритма отображения УУД объекта нечисловой природы, обогащая это знание собственным суждением.

Желательно, чтобы шкала оценки, уточняя традиционный подход к отметке, была принципиально доступна пониманию позиционеров, психологически воспринималась как утверждение справедливости, подъем на новую ступень установления действительной степени обученности респондента. Более высокий уровень понимания алгоритма шкали­рования связан с новой познавательной позицией, задающей интеллектуальную перспек­тиву видения изучаемой реальности. Вне этой рациональной позиции исследователя во­прос о понимании качества отображения поведения тестируемого на шкалу оценки не может иметь адекватного решения. Рациональность есть, прежде всего, сфера принципов, допущений и процедур, обеспечивающих требуемую объективность и результативность процесса КАТ.

Если толковать процедуру шкалирования произвольно, как некое чисто субъективное образование, никак не обусловленное принятой в сфере обучения и исторически сформу­лированными методами оценки УУД индивидов, то неизбежно придется либо отказаться от научной рациональности как регулятивного принципа, либо этот принцип истолковы­вать каждый раз в субъективистском духе.

Разумеется, выбор алгоритма шкалирования может оказаться и неадекватным, так или иначе деформирующим отображаемую степень обученности объекта нечисловой приро­ды. Но для системы образования принципиальное значение имеет решение вопроса о воз­можности адекватного понимания сущности оценки УУД индивидов. В этом случае шка­лирование приобретает новое в информационно-эпистемологическом смысле качество: с одной стороны, оно есть некоторая «точка зрения» познающего субъекта, задающая ин­теллектуальную перспективу видения реальности оценки, с другой – оно является некото­рой объективной мерой, обуславливающей масштаб подхода к изучаемому процессу, не­кий его аспект, высвечиваемый субъектом с помощью имеющихся у него инструменталь­ных и концептуальных средств. Объективно задаваемую познавательную процедуру шка­лирования целесообразно обозначить как «смыслообразующий уровень-интервал качества обученности тестируемого».

Рассмотрим основные средства качественного уровня-интервала обученности:

·  интервал представляет собой относительно замкнутую целостность качествен­ной оценки УУД каждого целеустремленного объекта;

·  представление в оценке поведения тестируемого имеет место внутри каждого уровня-интервала. Так, нельзя понять, что такое «почти отличник», если не ука­зано относительно какого уровня-интервала обученности идет речь;

·  переход от одного уровня-интервала обученности к другому осуществляется в виде скачка и объективно детерминирован. Хотя научный смысл шкалирования носит интервальный характер, это не приводит к ситуации «несовместимости» парадигма традиционной отметки и нового механизма качественной оценки, что позволяет обоснованно говорить о семантической преемственности триадного подхода к выбору шкалы оценки;

·  смыслообразующие уровни-интервалы устанавливают информационно-эпистемологическую границу между объективным и субъективным;

·  качественный уровень-интервал оценки достижений имеет культурно-историческую нагруженность. Это отчетливо видно на примере перехода от ка­чественной традиционной четырехбалльной оценки, когда количество (баллы) и качество (уровни-интервалы) рассматриваются как единое целое.

Предикаменты (категории) количества – «сколько» и качества – «какое», введенные Аристотелем, образуют диалектическую пару и имеют собственную, реализующую их схему. В категории качества отражается специфика оценки, а в количестве — ее зна­чимая определенность. Так, схема количества есть число, а схема качества – синтез ощущений, т. е. отражение свойства степени обученности эмпирического объекта. Кате­гория «количество» выражает УУД тестируемого в баллах, в то время как предикамснт «качество» объединяет сходные достижения респондентов. Качества допускают большую или меньшую меру УУД. Им также присущи противоположности: если одна противоположность качества есть «аттестован», то другая будет – «неаттестован».

В рассматриваемом нами случае процедура шкалирования опирается на качественный (логичный) и количественный (логический) анализ. Игнорирование качественного подхо­да для оценки поведения объектов нечисловой природы затушевывает реально сущест­вующие дидактические процессы и находит лишь абстрактные числа – «Ряды чисел увле­кают» (). На рис. 11 приведена модель процесса установления оценки (оценива­ния и типологической классификации). Множество делений шкалы оценки (например 100) характеризует баллы, а множество уровней-интервалов обученности определяет качество полученной тестируемым оценки.

Рис. 11 Модель оценки

Отказ от принципа постулирования традиционной шкалы отметки, т. е. переход к со­держательной методологии шкалирования означает перевод теории тестометрии на пози­ции гармоничного синтеза категорий количества и качества оценки. Процесс приписы­вания чисел поведению конкретных эмпирических объектов в соответствии с разработан­ным методом шкалирования будем называть оцениванием. Назовем шкалой отображе­ние множества заключений тестируемого на требование ПДТЗ различной меры трудности в числовую систему с отношениями, носителем которой является совокупность действи­тельных чисел.

Шкала определяется триадой <Я, Ч, Ц>, где Я – исследуемая эмпирическая система с отношениями (описание поведения тестируемого); Ч – некоторая числовая система с от­ношениями; Ц – отображение первой во вторую. С помощью этой шкалы каждому резуль­тату тестовой проверки ставится в соответствие некоторое число. Будем называть эту ква­зичисловую оценку балльным значением поведения объекта. На рис. 11 указаны эмпири­чески установленные границы действительной степени обученности тестируемых:

θmax – верхняя граница, за которой присваивается высшая количественная отметка (θmax = 100);

θmin – низшая граница количественной отметки (θmin = 0).

Обозначим размах выборки r = θmax θmin , найдем длину качественного уровня-интервала

и запишем формулу перевода количественного значения отметки Q. в ее качественный аналог:

Пусть 10 испытуемых получили в течение сеанса компьютерного тестирования сле­дующие баллы (табл.1). Для наглядности данные в табл.1 упорядочены.

Таблица I

Количественные значения баллов

1

2

3

4

5

6

7

8

9

10

θi

16

27

31

44

55

66

78

83

92

98

Требуется найти значение качественных аналогов для этих количеств, если макси­мальное число баллов, которое может получить тестируемый, равно θmax =100. Размер ис­пользуемого уровня-интервала телеологического состояния обученности объекта зависит от наших целей. Предположим, что нижняя отметка границы θmin =0, а число качествен­ных уровней – интервалов оценки К = 12. Тогда в соответствии с (1) длина уровня-интервала

По формуле (2) переведем количество баллов полученных индивидами в их качест­венные аналоги.

Границы уровней-интервалов и соответствующие им качественные оценки сведены в табл.2.

Таблица 2

Количество (θi)

16

27

31

44

55

66

78

83

92

98

Качество (Кi)

2.8

4,0

4,4

5,8

7.0

8.2

9,6

10,1

11,1

11,8

3

4

4

6

7

8

10

10

11

12

Оценка

2+

3 –

3 –

3+

4 –

4

5 –

5 –

5

5+

Предлагаемая двенадцатиуровневая шкала оценки учитывает количественные и каче­ственные свойства обученности тестируемого и способна разрешить противоречие между оцениванием и классификацией его поведения. Она сочетает в себе функцию смыслового анализатора значения латентного параметра индивида и функцию корректного статисти­ческого оценивателя количественных характеристик этого свойства. Такой компромисс возникает с первых шагов разработки алгоритма шкалирования, который состоит из двух частей: способа оценивания поведения тестируемого, выраженному в сырых баллах, и метода перехода от этих баллов к качественной оценке.

Обращение тестометрии к целенаправленному исследованию свойства обученности объекта нечисловой природы позволяет не только более содержательно отразить его пове­дение в модели, но и в существенной степени корректировать требования к алгоритму шкалирования. Интересующие исследователя или тестирующего отношения в эмпириче­ской системе проверок могут быть конкретизированы в процессе моделирования. В таком случае приписывание поведению целеустремленного объекта шкального значения и отне­сение этой величины к тому или иному качественному уровню-интервалу можно считать оцениванием УУД тестируемого, соответствующим его скрытому параметру обученно­сти.

Под предметом моделирования понимается некоторый условный процесс компью­терного адаптивного тестирования, качественные свойства которого отражены в уровнях-интервалах обученности, а количественные – в баллах, полученных за некоторый период времени. Целью моделирования является установление новых знаний о латентном пара­метре индивида.

Будем считать, что изменения степени обученности объекта носят эволюционный ха­рактер и в отсчетный период остаются неизменными. В отличие от ряда научных наблю­дений физических, технических или биологических процессов с их возможностью плани­рования эксперимента и известной точности средств измерений, дидактические времен­ные ряды заключений индивидов представляют собой принципиально неповторимые реа­лизации показателей тестирования с отсутствием информации о статистических атрибутах ошибок оценивания. Поэтому говорить, как это имеет место в традиционной теории тес­тов и квалиметрии, что целью анализа поведения целеустремленных объектов является отыскание их математических ожиданий, корреляционных функций и прочих статистиче­ских характеристик, – значит ставить принципиально некорректную задачу.

В этих условиях наиболее целесообразным является использование методов непара­метрической и интервальной статистики. Математическая статистика интервальных данных применяется в тех случаях, когда на знания неконтролируемых заключений тес­тируемых накладываются неопределенности учебной среды. Интервальный метод позволяет сгладить эти непредсказуемые воздействия на результаты оценивании, найти ком­промисс между тестометрией и статистикой.

Оценку в тестометрии можно сравнить с механической силой, имеющей направление и величину: направление соответствует уровню-интервалу, а величина – количеству бал­лов. Уровень-интервал следует из степени обученности, а число баллов нет. Уровень-интервал объективен, а количество баллов субъективно. Однако качество заключений – баллы существенно. Определяя количество уровней, мы «открываем дверь» для субъек­тивных различий в поведении испытуемых. Рассматривая примеры триад, мы пытались увидеть логичные рассуждения в действии, конкретно, в описании процесса шкалирова­ния. Безусловно, правдоподобные рассуждения не могут претендовать по точности с тео­рией доказательных выводов. Гипотетические рассуждения о многообразии триад близки к силлогизмам Аристотеля и Д. Пойа, построенных с помощью индуктивных методов.

В заключении этого раздела отметим, что участники культурного пространства тес­товых испытаний приписывают различные значения и символический смысл феноменам этого комплекса. Культурный процесс КАТ превратился бы в неуправляемый хаос, если бы каждый раз позиционерам приходилось во всех деталях выяснять значение любого своего действия, прежде чем совершить его. Профессиональная культура тестолога, экс­перта или разработчика ПДТЗ включает совокупность специальных знаний и интеллекту­альных умений, связанных с проектированием содержания и формы, содержательности и логичности, а также выбор рационального объема представления тестовых ситуаций. Ис­следователи сталкиваются здесь с необходимостью применения методологических правил и норм, которые упорядочивают их деятельность. Совокупность этих культурных правил и норм образует культурные конвенции.

Процедура формирования тестируемыми концептов и выводов есть процесс познания, поскольку при этом респондент узнает (в случае содержательного и логичного для него ПДТЗ) что-то для себя новое. В качестве средства познания здесь выступает моделирова­ние мыслительной деятельности эмпирического объекта, когда он преодолевает трудности при выполнении тестовых заданий.

Мысли, чтобы предстать в виде заключения, должны материализоваться, принять форму одного из значений признака сигнала. Материализация имеет две стороны: содер­жательную и логичную. Содержательный аспект материализации связан с выполнением отношения, существующего между смыслом ПДТЗ и возможностью тестируемого понять его. Логичность характеризует наличие соответствия между мерой трудности тестовой си­туации и действительной степенью обученности испытуемого. Когда мысль воплощается в конкретное следствие, то тем самым решается вопрос об ее объективной истинности. Этот процесс обнаруживает определенное несоответствие между образцовым выводом на требования ПДТЗ и полученным от тестируемого заключением, которое возникает вследствие либо недостаточности знания, либо незнании способов его реализации индивидом.

Содержание ПДТЗ включает в себя смысл и значение конкретной тестовой ситуации. Оно определяется контентом исходного знания и представляется в кратком тестовом суж­дении в свернутой и стандартизированной (для данного фрагмента учебной дисциплины) форме.

Степень валидизации KCT3 в значительной мере определяется содержанием, содержа­тельностью и логичностью множества образцовых тестовых суждений. Процедура конст­руирования этих образцов проводится на этапе понятийной спецификации БТЗ. Поэтому при решении задачи анализа качественных показателей образцовых таблиц – KCT3 – в конкретных областях знаний используется опыт групп экспертов.

Содержательность определяет смысл тестового утверждения для испытуемого с фик­сированной степенью обученности. Прагматически доступная тестовая ситуация бессо­держательна для испытуемого, если ее энтропия (степень неопределенности) равна нулю. Энтропия проблемной тестовой ситуации может быть использована как мажоранта со­держательности ПДТЗ и как оценка количества информации, необходимого для восста­новления прагматически корректной ситуации.

Логичность ЭФТК устанавливает соответствие меры трудности тестовой ситуации ла­тентному параметру обученности испытуемого. Простые задания для отличников и xopo-шистов являются нелогичными. Аналогичная ситуация наблюдается, если слабо подго­товленные индивиды получают ПДТЗ с высоким для них уровнем трудности.

Документальными носителями содержания, содержательности и логичности тестовых материалов, в зависимости от степени их декомпозиции, выступают структуризация, по­нятийная и технологическая спецификации KCT3. Эти дидактические материалы задают результат, цели, разделы, темы, категории, понятия, последовательность, преемственность между ними и т. п.

В контексте содержательности и логичности интеграция тестируемых изучается через эмпирическое сходство их поведения. Здесь культурная дифференциация предполагает, что испытуемые с различными в некотором смысле латентными параметрами будут раз­делены системой КАТ и отнесены к различным образам. И в этой связи культура тестоло­га – творческая, ценностно-ориентированная способность к созданию валидных, содержа­тельных и логичных для тестируемых KCT3.

Из содержательных истинных посылок ЭФТК можно вывести корректные за­ключения. При этом тестовые ситуации должны быть тщательно подобраны по смыслу и значению, логичными и содержательными для испытуемых с фиксиро­ванными уровнями обученности.

Когда мы говорим о мере трудности тестовой ситуации, то применяем эту философ­скую категорию для каждого конкретного содержания особым образом, и в качестве тако­вой она имеет значение только вместе с особым способом своего применения и воплоще­ния. Мы не можем выразить эту меру в виде эталона, подобно эталону длины того метра, который хранится в Париже. Мера предпочтительности каждой тестовой ситуации уста­навливается субъектом и поэтому она является категорией качественной.

Исключить факторы содержательности ПДТЗ и логичности нельзя в принципе, по­скольку они имеют важное значение не только в процессе типологической классификации поведения объектов тестирования, но и при различении системой КАТ поведения испы­туемых из одного образа. Для корректного проектирования и оперативного обновления содержания ЭФТК на этапе их наполнения или модификации целесообразно обращение к оценочным суждениям компетентных экспертов, использованию их профессиональных знаний и творческих потенций с целью внесения изменений в смысл и значение каждой тестовой ситуации.

В рассматриваемом здесь смысле культурное пространство КАТ настолько реально и полезно, насколько оно информативно. Поэтому содержательность и логичность есть сама реальность в том ее синтезе пассивности и активности испытуемого, который проявляется в качестве его поведения.

Изложенное позволяет заключить: обеспечение содержательности и логичности ЭФТК для испытуемых с фиксированными степенями обученности достигается только в том случае, когда смысл задания им понятен, а мера трудности ПДТЗ приближается к значениям латентных параметров обученности этих респондентов. Последнее дос­тигается только в том случае, когда система КАТ может приспосабливать категории трудности тестовых суждений к качеству заключений каждого конкретного объекта нечисловой природы.

Стабилизация неустойчивого состояния системы КАТ, когда β → θ, есть принцип максимума эмоциональных переживаний индивида. В этом случае осуществляется наи­большая неопределенность микросостояния эмпирической системы КАТ, поскольку на­блюдается максимально возможное мысленное напряжение испытуемого.

Во второй части книги описан нетрадиционный подход, позволяющий существенно уменьшить степень некомпетентности экспертов в оценке качества ПДТЗ. Анализ основан на применении сходства их мнений при оценке рассмотренных нами показателей ЭФТК. От того, насколько удачно сформировано множество образцовых тестовых утверждений, во многом зависит успех типологической классификации и рациональной аттестации УУД объектов нечисловой природы. Здесь нужна система понятий и способов оценки, ко­торая выходила бы за пределы количественной статистики и учитывала бы интересы спе­циалистов, изучающих поведение тестируемых, как типологическое, так и индивидуаль­ное.

Эта книга продолжает развивать тезис: исчисление вероятностей к результатам оценки тестовых испытаний применять следует, но только с учетом гармоничного единства ка­тегорий количества и качества. По этому вопросу Д. Пойа высказывался так: «Приписывание правдоподобности числового значения на основании какого-либо допу­щения или симметрии следует здесь рассматривать как тривиальное: чтобы оправдать ко­личественные правдоподобности, требуется что-то большее и более новое» [33].

Действительно, поведение телеологического объекта должны изучать тестолог и экза­менатор с точки зрения качества, в то время как математик призван находить методы чис­ленной оценки качества заключений тестируемых. Первая из этих проблем относится к гипотетическим (качественным) рассуждениям, а вторая – к теоретическим (количествен­ным) доказательствам и вычислениям. Чтобы оценить меру трудности ЭФТК, надо быть знакомым с данной областью знания; чтобы оценить категорию трудности тестовых суж­дений с уверенностью, следует быть специалистом в этой области. Формальный подход к оценке конституирует необходимую связь между степенью обученности индивида и ка­чеством его заключений только с количественной стороны, не отражая реального смысла.

Поскольку процесс тестирования подчинен целям индивида, выраженным в его выво­дах, он может быть логичным и нелогичным. Логичность мышления испытуемого – это единство его рассудочной и разумной деятельности, которая лежит в основе вычисления реальной степени обученности испытуемого, определения пути рациональной траектории каждого конкретного эмпирического объекта. Если для рассудка характерен анализ, когда индивид оперирует абстракциями по строго заданной схеме, известной ему заранее, то для разума характерен синтез, «как доведенная до самого высшего уровня человеческая спо­собность». Разумное мышление требует от тестируемого максимального напряжения творческих сил, оно является орудием формирования истинного суждения, когда значение признака заключения испытуемого соответствует мере трудности конкретной тестовой ситуации.

В процессе перехода к логичному мышлению происходит и изменение форм пред­ставления тестовых суждений. Ведущим при этом является движение от ПДТЗ, в котором фиксируется какой-либо факт, к ЭФТК, устанавливающим соответствие между элемента­ми двух множеств и выбор правильной последовательности исторических дат каких-либо событий или действий. Здесь по мере перехода от простого суждения к более сложным формам представления содержания ЭФТК наблюдается и возрастание степени трудности ПДТЗ. Формирование тестовой ситуации с различной мерой трудности должно стать главной целью тестологов, поскольку оно является основой, на базе которой возможно будет успешно формировать частные ПДТ для каждого тестируемого с конкретной степе­нью обученности. Значение признака заключения тестируемого на требование ПДТЗ несет в себе информацию о категории трудности конкретной тестовой ситуации.

Существуют правила логические и логичные. Пойа и Аристотель собирали свои силлогизмы, их намерения, по-видимому, состояли в том, чтобы найти общности, ко­торые « в соответствии с обычаями хороших ученых допустимы в научной дискуссии и имеют целью оказать разумное влияние на правдоподобность» обсуждаемых предположе­ний. Подтверждение примерами рассматривается как разумный довод в пользу коррект­ности разработанных авторами данной книги гипотетических правил и приведенных ло­гичных рассуждений.

Исследования свойств и поведения объектов нечисловой природы основаны на на­блюдении и обобщении. И самое главное, что основной итог применения качественного анализа должен быть связан с сохранением смыслового значения параметра обученности, а также свойств тестовых утверждений. Эту проблему убедительно обосновывает , непараметрический подход которого к анализу поведения объектов нечисловой природы авторы использовали при оценке сходства мнений экспертов [25].

Заключение на требование ЭФТК – это мысль, достигшая заданной степени объек­тивности и нацеленная на практическую реализацию правильного формирования сужде­ния. Следовательно, заключение, чтобы быть рациональным (отображать латентный па­раметр обученности с заданной верностью), должно отражать четыре момента:

·  конкретное, целостное знание содержания ПДТЗ;

·  стремление к материальному воплощению;

·  план формирования истинного суждения;

·  значение признака вывода тестируемого на требования ЭФТК.

Тестология и тестометрия, которые исследуют процессы установления степени обу­ченности индивида путем научных наблюдений и математических методов, отвлекаются от некоторых эмпирически конструируемых свойств и отношений. Последнее, однако, становится предметом специального изучения, как только теория тестирования делается основой прикладного исследования. Теория КАТ, как бы ни был совершенен ее математи­ческий аппарат, проверяется, подтверждается, и следовательно, в конечном итоге и дока­зывается эмпирически.

В объективной телеологии свойства обученности индивида выводятся на основе вос­приятия регулярности его поведения при изменяющихся, но определенных условиях учебной среды. Характеристики человеческого поведения выводятся из того, что мы мо­жем описать в процессе научных наблюдений. Форма наблюдений отражается в структуре сообщений об этих наблюдениях, что приводит к открытию в эмпирическом материале регулярностей и закономерностей

V. ФОРМА ТЕСТОВОЙ СИТУАЦИИ

Разработчик KCT3 всегда стремится к максимальной «власти» над учебным материа­лом. Он творит тестовые ситуации, используя материал как сырье, не отображая, а преоб­разуя его, вкладывая в каждый ЭФТК свои убеждения и мысли. И поэтому форма пред­ставления тестового утверждения в зависимости от его замысла поддается столь же решительной деформации, как «черты лица на шаржах Домье».

Процесс отображения содержания фрагмента учебного материала во множество тес­товых ситуаций можно в общем виде понимать как приведение его к некоторой структуре, образованию порядка. Единство психического и логического, обусловленное категорией формы, можно видеть и в том, что отраженное испытуемым содержание ПДТЗ составляет индивидуальный опыт конкретного разработчика, когда строение представленного ЭФТК акцентирует процесс мышления тестируемого на восстановление корректного порядка в тестовом утверждении. Понятие формы содержит достаточную степень ограничений и вместе с тем отражает смысл и значение исследуемого фрагмента конкретного знания.

Любое ПДТЗ является выбором из пространства возможных стандартизированных со­общений, и, следовательно, оно имеет определенное строение (структуру) форму. По­нимание содержания и требований ЭФТК индивидом тесно связаны фактом наличия не­разрывной связи между чувственной и логической ступенями процесса познания. Поэтому форму тестового задания можно воспринимать как характерную структуру не только для чувствительного наблюдения, но и как раздражение испытуемого для возникновения у не­го мыслительных процессов. Постижение аналогии в наблюдаемых строениях ПДТЗ обу­славливает появление в рассуждениях тестируемого определенной упорядоченности.

И в этом контексте культура создания ЭФТК образует нерасторжимое единство ду­ховной и материальных сторон, проявляющихся в отображении смысла и значения тесто­вой ситуации. Чисто духовное начало содержание тестового суждения — не может стать достоянием культурного потребления, не будучи воплощенным в материаль­ном носителе форме. Только таким путем духовное творчество коллектива разработчи­ков ЭФТК может приобрести общечеловеческую значимость, стать доступным для тести­руемых, распространяться про каналам социальной и культурной коммуникации. Содер­жание без формы – бесплотно.

Выявляя способы представления содержания учебных дисциплин в систему тестовых суждений, информационная эпистемология рассматривает структуру ПДТЗ как инвари­антный аспект отображения понятий, явлений или процессов, поскольку стандартизиро­ванные формы тестовых утверждений могут «покрывать» содержание различных пред­метных областей знаний. Для установления понятия «форма ПДТЗ» воспользуемся сле­дующим формальным правилом:

Π15: Отображение фрагментов учебною материала из различных областей знаний представимо в одной из конкретных форм с учетом сохранения семантики исходного знания.

Это правило применимо к любым по содержанию тестовым ситуациям, и «можно быть уверенным, что из истинных суждений мы получим снова истинные суждения».

В Советском энциклопедическом словаре (1987) под формой понимают «внешнее выражение содержания». Отсюда трудно сделать какое-либо утверждение о понятии «форма», поскольку она определяется через другой термин «содержание» в неявном виде. Более того, строение тестового утверждения в данном контексте является выражением, отвлеченным от контента (содержания). Иногда в обыденных ситуациях используют ин­туитивное (неточное) понятие формы как структуры (внутренней формы) способа организации содержания. Такое неявное определение формы задания мы находим у : «Форма тестового задания – это способ организации, упорядочения и су­ществования содержания теста». С этой дефиницией формы ПДТЗ также нельзя согла­ситься, поскольку непонятно, что представляет собой структура. Оба понятия в равной мере известны и неизвестны, а, следовательно, определение одного из терминов через другой представляет собой простое переименование исходного термина близким ему по смыслу. Это номинальное определение формы не содержит специфического и сущест­венного признака и принято нами быть не может.

Понятие «форма тестовой ситуации» не может основываться на ее интуитивном по­нимании, а должно выражаться реальным (эффективным) определением. Это необходимо сделать и по той причине, что чем точнее представлены понятия в суждениях, тем качест­веннее можно устанавливать истинность тестовых утверждений. Ведь только на основе точного выражения содержания задания через его форму можно обеспечить возможность для логичного рассуждения тестируемого.

В соответствии с Π12 одна и та же форма задания может представлять контент ЭФТК из различных предметных областей, выражая тем самым тождество их строения. Как ме­тод внешнего выражения смысла фрагмента учебного знания, форма ПДТЗ отражает тип и структуру содержания, а как способ связи элементов этого конетента, она оп­ределяет строение ПДТЗ и выступает как нечто внутреннее. В то же время форма представляет собой отражение смысла ЭФТК и устанавливает способ связи содержа­ния конкретного суждения с запрашиваемой от индивида информацией Ограничен­ное многообразие строений ПДТЗ – унификация – оказывает активное влияние на возможность адекватного представления содержания учебного знания, способствует узна­ваемости респондентами структур представления тестовых утверждений.

Мы будем пользоваться как реальным, так и номинальным определением формы ПДТЗ. Реальная дефиниция формы характеризует то общее, что имеют все структуры изоморфных по представлению ЭФТК. Индуктивное (номинальное, неточное) определе­ние формы рассматривает последнюю как структуру, как строение, как способ организа­ции содержания ПДТЗ. Здесь задача реальной дефиниции формы «подменяется более простой задачей переименования» [31]. Эта операция используется нами лишь для того, чтобы избежать тавтологии изложения материала без ущерба для его сущности, когда термины «форма», «структура», «строение» и «организация содержания» считаются сино­нимами понятий.

Исследуя строение ЭФТК со стороны возможности целостного представления содер­жания, можно определить форму ПДТЗ как относительную выделенность в фрагменте учебного материала существенных его частей и соответствующий порядок матери­альных взаимодействий данных частей, посредством которых они соединяются в то единство, которое отображает содержание единицы учебного знания. Эта дефиниция формы относится к структуре ПДТЗ для физических объектов, а не к теоретическим по­строениям. Структура ЭФТК в данном контексте устанавливается выбором тех или иных существенных посылок и типом логического вывода.

С методологической точки зрения рассматриваемую дефиницию можно представить как относительно устойчивое единство посылок и требований, а также их отношений в стандартизированном целостном тестовом суждении. Данное определение формы по­зволяет отображать в виде ЭФТК широкий круг явлений, предметов и процессов как ма­териального, так и идеального характера. В данном случае структуру (форму, строение) ЭФТК образует совокупность тестовых посылок, которые имеют конкретную эмпириче­скую и семантическую интерпретацию. Заключения на требования ПДТЗ формируются тестируемыми по правилам вывода из корректных посылок тестовых ситуаций. Из ска­занного следует, что строение ЭФТК определяется набором исходных посылок и типов логических, логичных или математических заключений респондентов. Духовная культура формирования БТЗ в пространстве КАТ представляется нами как знаковая система, воспринимая которую испытуемый осознает содержательную сторону каждого ЭФТК и формирует к их требованиям свое отношение. Культурное начало вы­ступает здесь как смысл ПДТЗ, а материальное, выраженное в знаковой системе, как конкретная форма ЭФТК. Если содержание тестового утверждения есть подвижное единство необходимых, существенных свойств и отношений между знаками ПДТЗ, то форма выражает внешнее представление этого единства, его стандартизированное проявление во взаимодействии респондента и тестирующей системы. И здесь стандарти­зированные формы характеризуют повторяющиеся связи или отношения между исходными элементами (посылками) тестовых суждений [10].

«Неуважительное отношение» к методологическим правилам представления содержа­ния ПДТЗ и правовой нигилизм по отношению к стандартам при конструировании форм тестовых суждений – лейтмотив производства псевдотестов. Эту национальную беду в нашем социуме поэт прошлого века Б. Алмазов выразил так [19]:

Широки натуры русские, Не влезают в формы узкие

Нашей правды идеал Юридических начал...

В этом смысле при проектировании профессиональных компьютерных тестов можно выделить три группы разработчиков ПДТЗ: «по принуждению», «по совместительству» и профессиональных тестологов. Представители первой группы участвуют в создании тес­тов стихийно в соответствии с приказами руководителей. Они, как правило, не имеют представления о правилах и стандартах конструирования ЭФТК и рассматривают свою деятельность в этом направлении как досадную акцию. К разработчикам ПДТЗ «по со­вместительству» относятся более или менее активные позиционеры, которые пытаются самостоятельно совершенствовать процесс контроля УУД учащихся, студентов или спе­циалистов за счет применения высоких технологий проведения тестовых проверок. Они опираются в основном на собственный опыт в формировании тестовых материалов (ПДТЗ, ПДТ и KCT3) и слабо осведомлены о нормативной системе культуры представле­ния тестовых заданий. Профессиональные тестологи – это позиционеры, для которых дея­тельность по созданию или экспертизе стандартизированных тестовых утверждений со­ставляет основное занятие. Для некоторых представителей этой группы конструирование и экспертиза ЭФТК является основной работой, а другие видят смысл своей деятельности в том, чтобы, в соответствии со стандартами и правилами, создавать культурные системы ПДТЗ – KCT3.

В процессе отражения контента ЭФТК неизбежно осуществляется передача информа­ции, т. е. такое восприятие структуры ПДТЗ, на основе которой тестируемый может судить о содержании и требовании конкретного задания. Обладая стандартизированной формой, знаковое текстовое утверждение, содержащееся в том или ином сигнале, несет в себе ин­формацию о смысле и значении ЭФТК.

При переработке содержания ЭФТК тестируемым действуют две дополняющие друг друга тенденции:

·  аналитическая, т. е. стремление к расчленению, к установлению порядка эле­ментов тестового суждения;

·  синтетическая, т. е. тенденция к постижению взаимозависимостей между по­сылками тестового утверждения.

Эти тенденции лежат в основе создания форм ЭФТК, когда целостность, иначе го­воря, качественность отображения содержания фрагмента учебного материала, следует из объективного единства строения и смысла ПДТЗ. Требования логичного мышления индивида связаны с наличием у него определенного равновесия между рас­члененностью, взаимосвязью и взаимозависимостью между элементами структуры тес­тового утверждения.

Мы хотим предостеречь разработчиков от бытующей точки зрения, одной формы кон­струирования ЭФТК, побудить их к выявлению связей между содержанием учебного ма­териала и моделированием его в виде KCT3, облегчить переход к применению различных стандартизированных построений тестовых ситуаций. Взаимопонимания следует доби­ваться не столько путем жесткой унификации и единообразия, сколько с помощью нала­живания обозримой и упорядоченной системы правил, позволяющих проектанту «пере­мещаться в пространстве» структур представления стандартизированных кратких тесто­вых суждений.

Свертывание проблемных тестовых ситуаций – вариантность форм – является мощ­ным средством конструирования разнообразных ЭФТК, менее утомительных и интерес­ных для тестируемых. Более того, невербальное представление ПДТЗ в виде рисунка, таб­лицы, схемы, географической карты, графика и т. п. позволяет формулировать тестовые утверждения для проверки знаний и умений респондентов, причем в различной форме может быть отображено не только содержание тестовых ситуаций, но и заключения на них [3,10]. Строение тестового утверждения выступает как внешнее выражение опреде­ляющей стороны знания и как бы «покрывает» содержание конкретного факта, закона и т. п. Различие форм при одном и том контенте – есть различающая способность тестово­го задания для испытуемых с фиксированным уровнем обученности.

Форма ПДТЗ раскрывает только существенные стороны содержания фрагмента из конкретной области знания в пределах обусловленных возможностями инструментальной среды тестовых испытаний. Как результат деятельности мышления разработчика или экс­перта, отражающий проявления причинно-следственных отношений в заданной предмет­ной области, форма ЭФТК всегда субъективна. Существенным здесь является то, что каж­дая структура ЭФТК обладает своей качественной спецификой, возникающей в результате внутренних взаимодействий между элементами ее материального носителя. Более того, применение конкретных форм представления контента позволяет осуществлять проверку знаний, интеллектуальных умений и практических навыков респондентов.

Анализ строений тестовых заданий необходимо отнести к предмету тестологии и по логико-методологическим соображениям. Безусловно, форма накладывает некоторые ог­раничения на возможность представления содержания ПДТЗ из различных областей зна­ний. И, как указывает B. C. Аванесов, «Дело, следовательно, состоит не столько в исследо­вании содержания теста, как и любого другого контрольного материала, сколько в изуче­нии специфической формы, обеспечивающей взаимосвязь между содержанием и фор­мой». Из его же рассуждений следует, что не существует одной какой-либо формы, кото­рая могла бы рационально выразить богатство содержания даже отдельно взятой учебной дисциплины [1].

В методологии логичного мышления понятию «форма» соответствуют термины эф­фективного и неэффективного определения. Эффективное определение указывает на ра­циональный способ выражения смысла и веса (значения) проблемной ситуации в одной из форм ПДТЗ. Под рациональным представлением содержания будем понимать отраже­ние фрагмента учебного материала в одну из структур тестового утверждения для испы­туемых с фиксированным уровнем обученности. Рациональность фиксирует два момента: внутренний и внешний. Первый детерминируется совокупностью рекомендаций, правил и культурных норм, общезначимых для выбора той или иной структуры представления ЭФТК. В соответствии с этим моментом разработка ПДТЗ рассматривается как деятель­ность по правилам. Второй момент устанавливает отличия предлагаемой рациональности от всех остальных, когда появление новых форм демонстрирует плюрализм рациональностей. Рациональная форма выражения содержания проблемной тестовой ситуации для оценки поведения тестируемых характеризует максимальную близость энтропии ЭФТК к степени обученности испытуемых (например, отличников).

В соответствии с методологическими правилами Π7 – Π10, Π11 и Π12 дадим эффек­тивную (реальную) дефиницию формы ПДТЗ:

Структура ПДТЗ — это то рациональное, целостное и общее, что имеют все изоморфные тестовые утверждения, преобразованные по формальному правилу.

Из этого определения следует, что важным фактором качественного установления формы ПДТЗ является заданный способ связей (или отношений) между элементами за­дания в конкретной тестовой ситуации. В свете структурного подхода строение ЭФТК выступает как устойчивое взаимоотношение посылок задания, характеризующее его специфику представления и позволяющее отличить форму одного ПДТЗ от другого; при этом в явном виде существует подобие (изоморфизм) структуры за­дания по отношению к содержанию различных предметных областей. Восприятие упорядоченности стандартизированной формы приводит к гносеологическому вырав­ниванию, приспособлению респондентов к структурам тестовых утверждений.

Композиция посылок ПДТЗ должна быть доведена до такого состояния, чтобы ни­чего нельзя было выбросить и нечего прибавить без того, чтобы не нарушилось семан­тическое содержание проблемной тестовой ситуации. Следует всегда помнить, что нет антропоморфной формы, но существует информационное содержание. Очищенные от инородных контекстуальных наслоений ПДТЗ, представленные в конкретных формах, образуют массив стандартизованных ЭФТК. Эти элементарные феномены культуры – краткие тестовые суждения – существенно отличаются от других менее четких и неод­нозначных форм мышления.

Негативной стороной подобной «деконтекстуализации» содержания ПДТЗ является то, что в результате ее проведения происходит определенная смысловая деформация исходной проблемной ситуации. Эта трудность может быть преодолена путем рацио­нального ограничения (унификации) количества конкретных форм представления ЭФТК, для которых указанная модификация содержания не приводит к потере эписте­мологического статуса тестового суждения. Неизбежные ограничения, накладываемые на область конкретных структур ПДТЗ в различных областях знаний, компенсируются наглядностью, четкостью, выразительностью и ясностью расположения элементов тестового задания на экране дисплея, позволяющих включить их в различные альтер­нативные модели ЭФТК, а проблема «деконтекстуализации» легко решается на на­чальном этапе ознакомления испытуемых со стандартными формами конкретных тес­товых ситуаций (см. Приложение).

У каждого ЭФТК, соответствующего по мере трудности фиксированной степени обученности тестируемого, есть свой «ритм», который требует такого размещения на экране дисплея системы знаков (символов, рисунков и т. п.), чтобы задание восприни­малось испытуемым без лишнего напряжения, целостно. Тестируемый не должен ос­танавливаться над анализом формы ПДТЗ, восстанавливать правильное расположение знаков, соответствующих характеру представления того или иного смысла. Разрешение антиномий – проблем подчиняется общему ритму, открытому еще в античности при проведении творческого диалога. Этот процесс взаимного общения Гегель развернул во времени, представил его как обобщенное выражение «внутренне полемического развития духовной культуры».

Каждое ПДТЗ, особенно на этапе промежуточной или итоговой аттестации, должно держать респондента в максимальном напряжении, вести его за собой и не допускать в своем тексте неясных и неритмичных мест, чтобы тестируемый не тратил время на разбор структуры задания. В этом интеллектуальном напряжении, в обладании мыш­лением индивида над содержанием ЭФТК, чтобы заставить его находить корректный вывод одинаково с составителем задания, и состоит задача разработчика и действен­ность композиции ПДТ. Умение выбирать форму, соответствующую наилучшим образом смыслу исходной темы, ритму конкретной тестовой ситуации, составляет сущность деятельности проектировщиков ЭФТК.

Формальное правило представления ПДТЗ связано с применением стандартов. Стан­дартизация предполагает и изыскивает однообразия, закономерности в представлении содержания фрагментов учебною материала в конкретных формах, дающих возможность тестируемому легко узнавать (экстраполировать) предъявляемое ему сообщение и судить по частям о целом. Установление сходных черт предполагает наличие существенных при­знаков у различных строений ПДТЗ и выявление общих структурных закономерностей (форм), близких для многих тестовых ситуаций. В этом смысле содержание ЭФТК образу­ет форму не на аморфном основании, а устанавливает ее соответствие стандартным пред­ставлениям о строениях ПДТЗ, хранящихся в памяти тестируемого. Так разрешаются крайние границы размытости и случайности, достигается некоторая ограниченность путем образования конечного числа разнообразия структур представления ЭФТК.

Для испытуемого важна не просто возможность различения формы ЭФТК, но и узна­вание его структуры. Здесь восприятие строения тестовой ситуации означает постижение гомоморфизма, подобия и связи, обработку и усиление мыслительной деятельности тес­тируемого для формирования им корректного заключения. Например, если индивид дела­ет заключение – «задание открытой формы», то это означает, что идентичность структуры ЭФТК обусловлена тем, что ее части имеют ограниченную возможность строения и что эта возможность конкретным образом влияет на формирование заключения на суждения этого вида. Следовательно, на эту конкретную форму распространяется определенное представление, сложившиеся у объекта нечисловой природы шаблоны, имеющие кон­кретную структуру, отличающие эту организацию тестовой ситуации от других. Таким образом, строение ЭФТК должно быть легко узнаваемым для испытуемого. По Берталанфи, первой ступенью описания любого объекта является установление аналогии, выяв­ление сходных внешних свойств формы и шаблона; второй ступенью считается обнару­жение логичных гомологии и изоморфизмов; третьей ступенью – установление содержа­ния явления или процесса в целом.

В. Лауфбергер утверждает, что нервная система человека производит три типа интег­рирования формы: чувственное, смысловое и целостное. Целостная форма возникает в ре­зультате интегрированного восприятия ЭФТК на экране дисплея и является временной средней из прошлых событий, выраженных в памяти тестируемого соответствующими стандартами. Это дает возможность экстраполяции, позволяющей предвидеть, узнать структуру ПДТЗ. Здесь выражается мысль о том, что запомнившиеся в стандартизирован­ном виде конкретные формы тестовых суждений создают у респондента негативную эн­тропию, обеспечивают начальные условия движения его мысли к формированию вывода. Если восприятие содержания ЭФТК означает приращение энтропии (по Пригожину) у ин­дивида, то узнавание целостной стандартизированной формы связано с отрицательной из­быточностью и с созданием негэнтропии (по Жинкину). При наличии в памяти тестируе­мого внутренней избыточности (стандартных форм представления ЭФТК) негэнтропия выступает как мера организованности целостного тестового утверждения и реализуется в практической деятельности, приводя к упорядоченности индивидом тестового суждения.

Отношения между философскими категориями содержания и формы выражаются за­коном доминирования содержания – «всякая форма имеет особое содержание, опреде­ляющее ее». В диалектической паре содержания и структуры фиксируется, с одной сторо­ны, сущностное единство ПДТЗ и, с другой, способ его организации. Корректная, ясная и явная форма представления конкретного содержания ПДТЗ – это, прежде всего, чувство меры, сопричастность действий разработчика с ожидаемым поведением каждого испы­туемого. Эти принципы соразмерности частей и целого можно наблюдать, вглядываясь на Дворцовой площади в C.–Петербурге в архитектурную тайну Главного штаба. Соразмер­ность, гармонические пропорции строений и отсутствие излишеств делают это четырех­этажное здание гораздо величественнее любого высотного сооружения Москвы.

Исходное содержание посылок о качественных атрибутах тестового суждения структуризовано априорными формами чувственности. Однако источник априорного синтеза представлений тестовых ситуаций скрывается в «единстве деятельности», подводящим эти созерцания под одно из стандартных строений, т. е. в единстве функции, отвечающей за то, чтобы заключение на требование ПДТЗ было синтезом содержания, а не формы. Относительная самостоятельность структуры и содержания ПДТЗ выявляется и в том, что:

·  форма может отставать от контента;

·  не всякое содержание учебного материала может быть представлено в адекват­ной ему форме;

·  одно и то же содержание может облекаться в структуры тестовых утверждений с различной различающей способностью;

·  одно и то же строение ЭФТК способно отражать контент различных по своей природе явлений, понятий или событий.

В процессе компьютерного тестирования движение мысли индивида идет от воспри­ятия внешней формы ПДТЗ к пониманию его внутреннего содержания. Установление внешних свойств и отношений, отражаемых структурой тестового утверждения, является переходом к раскрытию сущности и формированию истинного или ложного утверждения тестируемым.

Критический поиск соединения содержания и формы — сущность творческой деятельности разработчика ПДТЗ. Однако это требование часто выполняется неудовле­творительным образом по той причине, что весьма трудоемкая изобретательская работа по формулированию профессиональных KCT3 подменяется составлением заданий на бо­лее легком бытовом уровне. Примером такого рода подмены могут служить псевдотесты, в которых тестовые утверждения представляются не в виде суждений. В них «форма» фиксирует внимание реципиентов на представлении содержания какой-либо темы без учета новизны и рациональности представления этого содержания именно в наилучшей для данного контента форме краткого суждения. Выбор рациональных форм представле­ния содержания тестовых ситуаций – конструирование цепи валидных моделей кон­кретной области знания.

В профессиональной деятельности тестологов понятие формы тесно связано с закона­ми, упорядочивающими, регулирующими возможные виды строений ПДТЗ. Отношение содержания и структуры ЭФТК отражается в законе: если форма существует, то она обусловлена некоторым содержанием; и наоборот, если имеется некоторое содержа­ние, то оно обязательно должно явиться тестируемому в конкретной форме. В позна­нии индивида содержание и форма выступают как ступени постижения смысла и значения тестового суждения (от явления к сущности). Строение ЭФТК представляет собой суб­станцию чувственно воспринимаемых позиционером свойств знаков и отношений как действительных. Изменение структуры формы представляет собой перестройку связей внутри элементов ПДТЗ. На рис. приведены формы представления контента проблемных тестовых ситуаций [26].

Рис. 1. Схема форм тестовых утверждений

Разработка международных стандартов но компьютерным тестам, которые утвержда­ют обшие для всех разработчиков ПДТЗ регулятивы и ценности, одно из главных куль­турных достижений нашего времени. Так, на основании стандартов корпорации IMS (In­struction Management System) – Question and Test Interoperability (QTI), создается рацио­нальная номенклатура заданий, что обеспечивает технологичность их ввода и узнавае­мость тестируемыми их строения. Разновидность стандартизации, заключающаяся в ра­циональном сокращении числа форм представления ПДТЗ, называется унификацией.

В рекомендациях стандарта IMS и Голландского института CITO предлагается стро­ить ПДТЗ с использованием прямых вопросов. На это указывает и A. H. Майоров: «Хоро­шо сформулированное задание в вопросительной форме ничем не уступает хорошо сфор­мулированному вопросу в форме утверждения» [26]. Мнение авторов по данной пробле­ме представлено в части II. Здесь мы лишь подчеркиваем, что вопрос и тестовое задание – разные формы мышления и смешивать их не следует. Вопрос – это не требование, а тес­товая ситуация всегда связана с требованием от тестируемого вывода. Отказавшись в по­лемике с B. C. Аванесовым [26, стр.117] от представлений тестовых заданий в виде утверждений, A. H. Майоров проектирует задание в форме вопросов, высказываний и задач. В то же время на стр. 30 он же говорит о тесте как инструменте, состоящем из «Квалиметрически выверенной системы тестовых заданий ...» (заданий, а не вопросов).

Важнейшей особенностью (уходящей корнями в классическую теорию тестов) совре­менной культуры представления тестовых утверждений является своеобразное сочетание их гомогенности и фрагментированности. Гомогенная культура продуцирования ПДТЗ заключается в том, что, несмотря на наличие в международных стандартах (например, IMS) различных строений отображения тестовых суждений, большинство проектантов формулируют задания только в закрытой форме. Так, в [34, c.35] предлагается: «Из боль­шого числа реализованных форм тестовых заданий рекомендуем выбрать каноническую форму: ВОПРОС и к нему несколько готовых ОТВЕТОВ». Здесь же утверждается, что «Специальные исследования доказали исключительно слабое влияние осложняющих про­цедуру тестирования «усовершенствования» на валидность и надежность». А. Бигбаум, наоборот, убедительно обосновывает практические преимущества представления тесто­вых заданий в открытой форме. Утверждается, что задания закрытой формы с двумя отве­тами сильно снижают эффективность тестовых оценок [40, c.29], а на с. 21 подчеркивает­ся, что математические модели современной теории тестов «...не рекомендуется использовать в том случае, если в тесте отдано предпочтение заданиям в закрытой форме». По­добного рода суждения являются неправомерными. Здесь форма превалирует над содержанием. Как справедливо отмечено в [2,3], «Часто бывает так, что какое-то содержание адекватно выражается в одной форме и не выражается корректно в другой».

Представление содержания различных фрагментов учебного материала не может по аналогии с лапласовско-ньютоновским детерминизмом жестко привязываться только к одной форме. Философский принцип закономерности устанавливает совместимость кон­тента в зависимости от выбора наилучшей именно для него формы отображения. Это не отрицание, а расширение детерминизма, переход к более богатым, диалектическим моде­лям конструирования ЭФТК, четче и яснее отражающих содержание различных областей знания. При этом следует помнить, что:

·  прежде чем осуществить выбор той или иной формы представления ПДТЗ, надо знать методологические правила (Π1-Π12) и стандарты;

·  проектирование следует начинать от простых форм (открытой и закрытой) к сложным (установлению соответствия и правильной последовательности).

Фрагментированная культура отличается от гомогенной тем, что в ней присутству­ет ограниченное в процессе унификации количество форм представления ЭФТК, что рас­ширяет возможность отображения в ПДТЗ содержания учебного материала и повышает различающую способность проблемных тестовых ситуаций. Вариантность стандартизи­рованных структур ЭФТК — средство для рационального установления их разнооб­разия, интереса к ним со стороны испытуемых и дифференциации тестовых утвер­ждений по мере их трудности.

Значительный вклад в разработку классификации форм тестовых заданий внес B. C. Аванесов. Проанализировав дидактические функции ЭФТК, он выделил четыре их струк­туры: открытую, закрытую, на соответствие и на установление правильной последо­вательности [3]. Эта классификация построена по признаку действий, выполняемых тес­тируемым в процессе формирования заключений. Такой подход, безусловно, сыграл по­ложительную роль в стандартизации ПДТЗ, что обеспечивает распознаваемость («опреде­ленность» по Гегелю) последних объектами нечисловой природы.

Назовем рациональными привычные нам формы тестовых заданий (закрытая, откры­тая, на соответствие и на установление правильного порядка) и рассмотрим их подробнее. Безусловно, что рациональная форма и инертное содержание понимаются сегодня не в ду­хе механизации Лапласа, а как максимальное совпадение контента ПДТЗ с адекватной формой выражения фрагмента учебного материала.

Открытая форма тестового утверждения требует сформулированного самим индиви­дом корректного заключения. Она имеет вид неполного суждения, в котором отсутствует один элемент. Обычно тестируемый подставляет число или слово (допустимо словосоче­тание, состоящее не более чем из двух слов). Ввод заключения может осуществляться с помощью мыши или с клавиатуры (Short text).

Закрытая форма предполагает выбор тестируемым правильного заключения из предложенных (Single Choice – выбор одного верного вывода; Multiple Choice – выбор не­скольких верных заключений из многих, рекомендуется выбор 2 из 5 или 3 из 5). Такое тестовое суждение состоит из неполного утверждения с одной вакансией и совокупности элементов, один или несколько из которых являются истинными. Тестируемый должен выбирать корректные выводы из предложенного множества. Дистракторы в ПДТЗ закры­той формы должны быть корректно подобраны и не содержать подсказок. Содержание дистракторов необходимо семантически согласовывать с исходными посылками тестового суждения.

Задание на установление соответствия предполагает необходимость определения тестируемым истинных пар из двух приведенных множеств объектов. Соответствие из множества А в множество В – произвольное подмножество G декартова произведения AxB, т. е. некоторое множество упорядоченных пар (a, b), где α A,bВ. Множество А называют областью отправления, а множество В – областью прибытия данного соответ­ствия G. Соответствие определяется как тройка (G, А, В) и называется графиком. При A=B G соответствие в А. Если ПДТЗ представлено соответствием «А есть В», где А и В термины, смысл и значение которых известен, а термин В выражает свойство или отно­шение, приписываемое объекту А, то данное утверждение является суждением. Тестируе­мый должен связать каждый элемент первой группы с соответствующим ему элементом из второй группы.

Задание на установление правильной последовательности (порядка) требует от тестируемого определения порядка следования предложенных объектов (символов, слов, формул, рисунков). Дано множество неупорядоченных элементов, необходимо установить заданный в посылках порядок между ними (например, технология производства хлеба).

ПДТЗ на соответствие и порядок являются разновидностями разделительных сужде­ний. Формальный критерий истинности в таких суждениях имеет вид исключения третье­го: каждому субъекту можно приписать только одну разновидность предиката, поскольку в разделительных суждениях признаки координированы – они определяют друг друга вза­имно.

Приводимую иногда форму «фасет» мы принципиально не включаем в данный спи­сок, так как фасет скорее порождение способа формирования тестового утверждения, не­жели сама структура задания. Фасет — одна из форм закрытого или открытого задания. В содержании фасетного ПДТЗ есть один элемент, который меняет свое значение при оче­редном предъявлении тестового задания каждому испытуемому. Изменение может проис­ходить случайным образом, в заданной последовательности или по определенному зако­ну. Таким образом, можно сформировать несколько однотипных по строению, содержа­нию и посылкам тестовых утверждений.

При исследовании форм представления тестовых ситуаций в инструментальной среде тестирования ACT авторы разработали другую систему классификации, которая, на наш взгляд, дает возможность дальнейшего развития структур ПДТЗ. С этой целью предста­вим содержание ПДТЗ как совокупность элементов утверждения, выраженных в виде упорядоченного множества частей задания («обязательных» элементов), и необязательно­го множества «лишних» элементов, которые не входят в истинное суждение (табл.1).

Таблица 1

Примечание: (1) – полностью определено, (2) – частично задано, (3) – не определе­но, (4) – задано, (5) – не задано; синтез – соединение элементов ПДТЗ в единое целое; ана­лиз – расчленение объекта на элементы, уточнение структуры задания.

При предъявлении ЭФТК тестируемому возможны частичное или полное отсутствие некоторых компонент, отражающих содержание задания. Задача индивида состоит в том, чтобы сформировать истинное утверждение путем определения порядка, выделения мно­жества «обязательных» и отсечения «лишних» элементов. В ЭФТК с излишними данными нарочито введены дополнительные сведения, маскирующие формирование истинного су­ждения.

В [10] приведены возможные комбинации формирования содержания заданий, соот­ветствующие им формы и целевая направленность ПДТЗ. Многие из форм в настоящее время не используются скорее по техническим причинам: сложность разработки задания, трудоемкость проверки правильности вывода, невозможность или сложность реализации той или иной формы при компьютерном тестировании.

С учетом части II данной книги и этого раздела можем дать эффективное определение ЭФТК.

Элементарный феномен тестовой культуры стандартизированное краткое тес­товое суждение, представленное в свернутой форме и выполненное по правилам ло­гичного или логического мышления. Для примера составим (или сопоставим) тестовые задания каждой указанной комбинации и опишем действия тестируемого при формирова­нии заключений на них (на примере ACT или идеализированной программной среды).

Из за большого объема эта статья размещена на нескольких страницах:
1 2 3 4 5 6 7 8 9 10 11 12