Текст книги "Тестовый контроль в образовании"

2.3. Тестовый контроль как квалиметрический метод оценки качества обучения

Тестовый контроль в последнее время занимает центральное место во всех школьных контрольно–оценочных системах, являющихся, в свою очередь, составляющими системы оценки качества. Вместе с тем для всей системы образования в целом наиболее важны контроль и оценка качества обучения в целях аттестации выпускников и отбора абитуриентов для профессиональных учебных заведений, оценки качества образовательного процесса и образовательных систем, а традиционные методы контроля для этого непригодны, так как они нацелены исключительно на получение качественных эквивалентов оцениваемых свойств учащихся. На практике педагоги, оценивая результат учебной деятельности обучающихся с помощью порядковой (качественной) пятибалльной шкалы, в большинстве случаев дают оценки, существенно различающиеся не только в разных образовательных учреждениях, но даже у учителей одной и той же школы [157].

Как показали исследования объективности оценивания у нас и за рубежом, разброс отметок в различных ситуациях за один и тот же ответ может быть от «2» до «5» [101]. Это естественно, так как при традиционных методах оценивания неизменно присутствует субъективный фактор. Хотя, без сомнения, в любом контрольно–оценочном процессе всегда присутствуют отдельные элементы педагогических измерений при оценке знаний учащихся. Однако такие оценки не являются сопоставимыми, их свойства различаются и не могут быть приведены к одной и той же шкале. Вместе с тем, чтобы при оценке качества и эффективности образовательных систем на всех иерархических уровнях управления образованием использовались результаты одного и того же свойства, определение качества образования должно базироваться на анализе статистических результатов, задаваемых в терминах измеряемых параметров: уровень трудности тестовых заданий и уровень учебных достижений, приведенных к одной и той же шкале оценок. Таким образом, квалитативизация оценивания качеств личности в первую очередь идет по когнитивной составляющей – уровню учебных достижений как объекту педагогических измерений, так как при всем многообразии показателей качеств личности наиболее значимыми по–прежнему остаются качество усвоенных знаний, развитие определенных навыков и приобретение требуемых умений на каждой стадии обучения, т.е. когнитивно–практический компонент образования.

Предполагается, что именно квалиметрический подход, базирующийся на концептуальных положениях теории педагогических измерений, массовости и независимости процедур тестирования, методах математической статистики и педагогического интерпретационного анализа, может обеспечить строгость, четкость и упорядоченность сведений о подготовленности и степени развития обучающихся. Расширяющиеся объемы независимого тестирования школьников и выпускников включают все большее число субъектов образования в новую контрольно–оценочную деятельность, создаются условия для контроля качества образования по определенным показателям, актуализируется проблема повышения эффективности использования материалов, технологий и результатов тестирования.

Направления более полного использования результатов педагогического тестирования связываются не только с необходимостью оценивания качества образования, но и с возможностью выявления характеристик личностного развития обучающихся, качества образовательного процесса и образовательных систем. Педагогическое тестирование, измеряя когнитивный компонент образования в количественных показателях, позволяет в какой то мере сравнивать и сопоставлять различных субъектов образования по отдельным качественным параметрам, оценивать некоторые характеристики обучающихся, такие, как гибкость мышления, упорство, собранность, целеустремленность, усидчивость, мобилизация на достижение результата, развитие компетенций, навыки самоорганизации, самоподготовки и целеполагания при обучении и аттестации.

Квалиметрический подход к контролю, в отличие от традиционного, позволяет извлекать максимум информации из количественных оценок и качественно оценивать состояние исследуемых объектов. Только использование научно обоснованных и взаимосвязанных методов и технологий обучения, контроля и информационного образовательного мониторинга может обеспечить достижение требуемого качества в образовании.

Важным является тот факт, что каждый более высокий уровень обобщения данных последовательно вбирает в себя результаты нижних уровней, обеспечивая для любой выборки испытуемых статистические характеристики одного и того же свойства (сроки проведения контроля, материалы и процедуры тестирования, методы шкалирования и оценивания). Возможность сравнения с данными генеральной выборки (всего массива испытуемых) в условиях массового тестирования позволяет всем субъектам образования выявлять реальные достижения собственной деятельности, оценивать их относительно других образовательных систем как по вертикали (учащийся, класс, школа, территория, регион, страна), так и по горизонтали в однотипном ряду (на уровне школьников, классов, общеобразовательных учреждений одного типа и т.д.). Системность и независимость различных видов обучающего и аттестационного тестирования создают условия для практической реализации принципов личностно ориентированного и развивающего образования на основе получения объективных оценок, дифференциации уровней подготовленности школьников и индивидуализации обучения. Именно статистические методы анализа результатов массового тестирования дают возможность от индивидуальных отметок учащихся перейти к оценкам самой образовательной системы или подсистемы, оценить ее состояние относительно статистических норм, зафиксировать адекватные состояния всей образовательной системы и ее отдельных подсистем на момент измерения.

Одним из методов, позволяющих получать объективную образовательную информацию, в последнее время является тестовый контроль. Структурные элементы такой системы оценки качества обучения представляют собой совокупность взаимодействующих объектов различной природы, обладающих явно выраженным системным свойством – ориентацией на измерения и измеримость. Осноганный на теории педагогических измерений тестовый контроль позволяет путем многофакторного и многомерного анализа статистических результатов учебных достижений выявить отражение качества процесса в качестве результата, дать количественные показатели качества результатов учебного труда не только обучающихся, но других субъектов образования (педагоги, управленцы и др.). Логика оценки при этом задается на основе использования математических моделей конструирования педагогических измерителей и использования методов статистической обработки результатов.

В последние годы массовое тестирование входит в систему российского образования как современная, самостоятельно функционирующая социально–педагогическая система, которую можно рассматривать как одну из ведущих технологий получения объективной и сопоставимой информации о качестве подготовленности выпускников и школьников для независимой экспертизы качества образования на всей территории страны. Такую систему можно отнести к деятельностной, представляющей собой «…совокупность объектов, взаимодействие которых способствует появлению новых интегральных качеств, не свойственных образующим эту систему частям и компонентам» [168]. Единство целого ряда взаимосвязанных структурно–функциональных компонентов этой системы, от разработки тестовых материалов до подготовки статистического отчета по результатам массового тестирования делает эту систему контроля всеобъемлющей, общедоступной и востребованной многочисленными категориями пользователей.

Деятельностный характер системы тестирования обусловлен активным взаимодействием как составляющих ее компонентов (разработчики тестов, ученые и педагоги, информационные службы, филиалы и представительства), так и спектром пользователей (учащиеся, родители, педагоги, руководители образовательных учреждений и др.). Современные информационные технологии позволяют в значительной степени автоматизировать контрольно–оценочные процедуры и проводить тестирование одновременно на всей территории страны. Новым качеством является массовый характер тестирования, обеспечивающий единство требований к уровню подготовленности учащихся и сопоставимость результатов одинакового свойства по любым выборкам испытуемых.

Высокая результативность и динамичность развития федеральной системы тестирования во многом определяются современными потребностями общества, стремящегося перейти в режим открытого образования в целом и открытости образовательной системы в сфере оценки качества учебных достижений. В свою очередь, потребность массового тестирования в качественной тестовой продукции стимулирует развитие тестологии, техники и технологии разработки новых педагогических измерителей. Интенсивно используются информационные технологии для обеспечения контрольно–оценочных процедур, развиваются коммуникационные связи, совершенствуется система управления качеством образования. Происходит изменение и внедрение в образовательную практику новых взаимодействий ученик – учитель, ученик – родитель, учитель – родитель, учитель – администратор, образовательное учреждение – орган управления образованием.

Независимое тестирование и единый государственный экзамен становятся важнейшими составляющими контрольно–оценочной системы, выполняющими в роли ведущей функцию экспертизы качества образования. При этом системообразующими и активно влияющими на образовательный процесс являются следующие факторы:

• проектировочный, ориентирующий на научно обоснованную формулировку целей деятельности системы, ее функций, конкретизацию ожидаемых результатов и сроков достижения цели, достижимости поставленных целей, определение величины затрачиваемых средств и времени;

• коммуникативный, включающий все иерархические уровни управления образовательной системой, стиль субъектно–объектных и субъектно–субъектных взаимоотношений;

• содержательно–организационный, стандартизирующий содержание, организацию, технологии и процедуры тестирования, задающий единство требований к качеству подготовки;

• аналитико–результативный, включающий способы получения, накопления, обобщения и анализа результатов, методы педагогической интерпретации, технику и технологию оформления и представления результатов, подведения итогов тестирования и обучения.

Как всякая система, независимое тестирование имеет свою организационную структуру, деятельность которой управляется и координируется центральным органом. Последний играет доминирующую роль в функционировании всей системы и имеет свои соподчиненные подсистемы, в том числе на этапе проведения ЕГЭ. Взаимосвязи целей, контрольно–оценочных средств и субъектов тестирования схематично приведены на рис. 5.

К перечисленным выше факторам необходимо добавить теоретико–концептуальный. Деятельность системы массового тестирования во многом обеспечивается уровнем развития всех его компонентов, точностью и научной обоснованностью концептуального аппарата. В процессе развития системы происходит непрерывное укрепление научно–теоретической и материально–технической базы, разрабатывается теория педагогических измерений и мониторинга, совершенствуются педагогические контрольно–измерительные материалы, техника и технология тестирования, подготовка обучающихся, методы обработки статистических данных, формы и способы их представления для пользователей, в контрольно–оценочный процесс включается все большее число общеобразовательных учреждений страны.

Рис. 5. Элементы стандартизированного тестирования

Эффективность функционирования и возможность развития этой системы во многом обусловливаются как раз степенью ее открытости и масштабами взаимодействия с российской социально–образовательной средой. Она включает в образовательный процесс не только образовательные учреждения, педагогов и обучающихся, но и всю общественность – родителей, прессу, органы управления и др. Система тестирования обладает высоким потенциалом саморазвития и самосовершенствования.

На рис. 6 отражены основные взаимосвязи между компонентами системы тестирования.

Условно в этой схеме можно выделить три основных организационно–функциональных модуля:

1. Научно–методический модуль, обеспечивающий идеологию конструирования контрольно–измерительных материалов и технологий независимого массового тестирования, разработку необходимых материалов и инструкций, формирование банка тестовых заданий и банка тестов, отбор и издание образцов тестов для широкого использования их учителями и учащимися при обучении и самоподготовке, подготовку и переподготовку тесто–логов и тестотехников, проведение научных конференций.

2. Сеть представительств или региональных центров оценки качества образования, обеспечивающих проведение и анализ результатов тестирования учащихся на всей территории России, способствующих распространению научно–методической культуры тестирования по всей стране.

Рис. 6. Организационно–функциональная схема федеральной системы тестирования

3. Информационно–аналитический модуль, обеспечивающий разработку и совершенствование современных технологий обработки и передачи информации, осуществляющий автоматизированную проверку материалов тестирования, подготовку оперативной и итоговой информации по результатам тестирования (StatInfo и другая статистическая отчетность), создающий основы для функционирования многоуровневого квалиметрического мониторинга в общем образовании.

Как открытая система, взаимодействующая с большим числом общеобразовательных учреждений, вузов и административных органов управления образованием, система тестирования осуществляет постоянный обмен образовательной информацией между другими системами разного уровня. Для обеспечения учащимся одинаковых условий при итоговой аттестации тестирование (аттестационное и абитуриентское) по всей стране проводится по принципу «один день – один экзамен».

Организационно и методически при такой форме итоговой аттестации достигается наибольшая формализация структуры тестовых материалов и процедур тестирования, проверки и обработки результатов, расчета и представления тестовых баллов. Завершается такая аттестация выдачей сертификатов (свидетельств) общероссийского образца и шкалы перевода тестовых баллов в школьную оценку.

Опыт проведения тестирования, в том числе и ЕГЭ, выявил его востребованность, стремительное развитие, динамизм, способность к включению в свою деятельность новых субъектов, расширение спектра образовательных услуг, способность к совершенствованию и развитию научно–теоретической базы.

Разумеется, независимое тестирование выявило ряд общих проблем как в системе образования, так и в системе итоговой аттестации. К ним относятся подготовка и переподготовка кадров, пересмотр приоритетов в содержании итоговой аттестации, развитие научной школы по проблемам педагогических измерений, изменение правил приема в вузы и ссузы, совершенствование контрольно–оценочных материалов и процедур. В целом перед Россией стоит проблема создания общенациональной системы оценки качества образования [57, 27].

2.4. Функции и принципы тестового контроля

В последнее время в практике диагностики качества общего образования получают распространение такие технологии, как тестирование, диагностика, экспертиза, мониторинг и педагогическая квалиметрия, ставящие целью объективизацию оценок [8, 9]. Становится все более очевидным, что только объективная, всеохватывающая, научно разработанная диагностика усвоенных, преобразованных и практически ориентированных знаний может не только стать индикатором качества подготовленности обучающихся, но и существовать как объективный показатель преимуществ или недостатков той или иной педагогической системы [3].

В этой связи современный тестовый контроль рассматривается как система контрольных измерительных материалов, процедур тестирования, технологий проверки и оценивания результатов учебной деятельности субъектов образовательного процесса. При целенаправленном подборе заданий, соответствующих по своим характеристикам зоне ближайшего развития обучаемого, творческое развитие обучающихся становится доминирующим, самоценным, способствуя активизации познавательной деятельности обучающихся и реализации ряда функций контроля: диагностической, контрольно–оценочной, обучающей, развивающей, мотивационно–побудительной, воспитательной, организационной, стандартизирующей, информационной, управленческой, демократизирующей, социально–экономической, гуманистической.

Диагностическая функция вытекает непосредственно из самой сути любого контроля, но при тестовом она проявляется еще и в том, что он задает требования к получению валидной информации о качестве знаний, умений и навыков, психологических качествах обучаемых; способствует дифференциации обучаемых по уровню подготовки, отделению знания от незнания, выявлению различных видов знаний: предлагаемых, приобретаемых, проверяемых, применяемых, устойчивых и забываемых; обеспечивает широкое использование образовательного мониторинга (педагогического и психологического) для оценки качества образования и возможности содержательного анализа усвоения всего учебного материала и отдельных тем; позволяет проводить экспертизу состояния образования на основе сопоставимости данных образовательной статистики. Благодаря содержательному анализу усвоения учебного материала педагогическая диагностика получает новый инструментарий для выявления индивидуальных затруднений, их причин и направлений корректировок образовательной деятельности учащихся и учителей.

Контрольно–оценочная функция обеспечивает подведение итогов обучения путем осуществления промежуточного или итогового контроля в форме тестов и позволяет количественно измерить показатели учебных достижений аттестуемых. Систематическое применение текущего контроля в образовательной практике приводит к позитивным тенденциям в развитии личности обучающегося, способствуя закреплению установок на самообразование и самоактуализацию. На современном уровне развития тестовых и компьютерных технологий целью текущего контроля становится не принуждение к обучению со стороны педагога, а самосовершенствование, характерное для развивающего обучения, в процессе которого активизируются развивающая и обучающая функции контроля.

Обучающая функция реализуется при проведении различных видов обучающего тестирования для освоения школьниками как учебного материала, так и технологии массового независимого тестирования, использовании заданий в тестовой форме для самоаттестации и самоподготовки; при использовании тестов проявляется взаимосвязь контролирующей и обучающей функций контроля, что в полной мере отвечает современным мировым тенденциям в переосмыслении роли контроля в образовании, когда контроль, оценка и обучение рассматриваются как взаимопроникающие составляющие единого образовательного процесса.

Развивающая функция проявляется в воздействии на испытуемого результатов тестирования при выявлении несовпадающих и правильных ответов на задания теста, развитии памяти, приобретении навыков применения знаний на практике, стремлении улучшить результат и приобрести более устойчивые знания к следующему тестированию, получении опыта подготовки ответа и переноса знаний из других образовательных областей. Формированию этих качеств способствуют и традиционные средства контроля. Однако развивающая функция внутришкольного контроля реализуется лишь при определенных условиях, когда в процессе контроля и самоконтроля у обучающихся возникает потребность в познавательной деятельности, самосовершенствовании и получении опыта творческой деятельности при выполнении учебных заданий. Существенным признаком, обусловливающим доминирование обучающей и развивающей функций тестового контроля, является оптимизация трудности контролирующих заданий применительно к уровню и качеству подготовленности каждого обучающегося.

Мотивационно–побудительная функция проявляется через воздействие тестирования на всех субъектов образовательного процесса. Во–первых, на учащихся: формирование уверенности в объективности оценок и возможности достижения более высоких результатов; повышение учебной мотивации и желания получить более высокий результат; создание атмосферы состязательности и повышение ответственности за результаты учебного труда; ориентация на сотрудничество с педагогом; самоорганизация и самоподготовка. Во–вторых, на учителей: повышение ответственности за результаты образовательной деятельности; совершенствование образовательных программ и использование дополнительной учебной литературы; создание более комфортных условий при обучении и психологической разгрузки при разборе результатов контроля.

Воспитательная функция тестового контроля обусловливает усиление интереса к знаниям, выработку усидчивости и способности работать систематически, приобретение навыков самоконтроля, самооценки и самокоррекции, появление потребности сотрудничать с учителем. Эта функция играет важную роль в формировании мотивационной основы деятельности обучающегося.

Организационная функция выражается в способности тестирования обеспечивать условия самостоятельной работы, самообучения, самоконтроля, индивидуализации обучения на основе разработки и использования новых образовательных технологий, изменение структуры учебного процесса и формы контроля.

Стандартизирующая функция проявляется в обеспечении одинаковых требований к уровню базовой подготовленности учащихся различных образовательных учреждений, что особенно важно при итоговой аттестации выпускников и отборе абитуриентов.

Информационная функция обусловлена широким распространением и развитием образовательных технологий, созданием открытого федерального банка образовательной статистики и формированием системы многоуровневого квалиметрического мониторинга качества образования, возможностью получения статистических норм качества учебных достижений и рейтинга образовательных учреждений по уровню достигнутого качества, доступностью интегральной образовательной информации широкому кругу пользователей.

Демократизирующая функция обеспечивает одинаковые условия прохождения аттестации для всех учащихся, добровольность участия в различных видах тестирования, право на ошибку, вариативность выбора учащимся форм аттестации.

Управленческая функция связана с получением и анализом квалиметрически выверенных результатов учебных достижений учащихся и обеспечением условий для принятия обоснованных решений на основе объективной и достоверной образовательной информации.

Социально–экономическая функция обеспечивает сокращение расходов и времени на проведение итоговых контрольно–оценочных процедур, предоставляет выпускникам возможности поступления в вузы без выезда из дому, с меньшими материальными затратами, частично решает вопросы трудоустройства определенной части педагогических кадров.

Гуманистическая функция проявляется в том, что тестовые технологии создают психологически более комфортные условия при контроле, обеспечивая сохранение здоровья в первую очередь на итоговой аттестации и вступительных испытаниях за счет снижения психологических нагрузок не только учащихся, но и учителей.

Реализация перечисленных выше функций зависит от форм и методов подготовки обучающихся к тестированию, а также от принципов его организации и проведения: научности, эффективности, объективности, валидности и надежности, системности использования в образовательной практике как отражения педагогической адекватности в единстве обучения и контроля.

Некоторые из этих принципов должны быть заложены уже при конструировании тестов как педагогических измерителей. Так, принцип научности как один из важнейших отражает обоснование критериев оценивания подготовленности учащихся за счет использования предварительно апробированных контрольно–оценочных материалов и процедур, повышения надежности и точности педагогического инструментария, достоверности оценок и их устойчивости. Чем качественнее тест, тем меньше ошибка измерения, точнее количественная оценка уровня учебных достижений и ее приближение к латентной характеристике испытуемого – подготовленности. Надежность средства измерения напрямую зависит от его валидности – пригодности измерять то, для чего данный тест создан. Если этот принцип нарушен, то полученные результаты не будут отражать истинного состояния исследуемого объекта, а их анализ может дать ошибочные выводы. Принципы систематичности и эффективности в какой–то степени противоречат друг другу, но их сочетание позволяет достичь обеспечения объективности оценок при минимальных затратах средств, времени и психологических усилий учащихся и педагогов. Наконец, педагогическая адекватность оценок тестового контроля достигается путем выбора из всех элементов контролируемого знания наиболее укрупненных, важных, наиболее полно охватывающих требования стандартов и репрезентативно отражающих содержание подготовки. Этот далеко не полный набор принципов тестового контроля достаточно четко указывает на то, что повышение качества обучения неразрывно связано с совершенствованием систем контроля и созданием условий более тесного сотрудничества учащихся и педагогов в образовательном процессе.