Текст книги "Как использовать анализ данных о добавленной стоимости для улучшения обучения школьников: руководство для школ и лидеров школьных округов"

Тезис 6
Значимость учителя

В противоположность открытиям Коулмана, опубликованным им в 1966 г., исследования с применением анализа данных о добавленной стоимости, проводившиеся более двух десятилетий, позволяют заключить, что учителя являются наиболее значимым фактором, влияющим на успеваемость учеников. Из рис. 1.8 видно, что 65 % изменений в прогрессе ученика может быть напрямую отнесено на счет учителя, 5 % – к вкладу округа, а 30 % изменений в прогрессе – это вклад школы, в которой учится ребенок [Sanders, 2004].

Рис. 1.8. Влияние преподавателя на успехи учеников

Источник: [Sanders, 2004].

Исследователей интересовало влияние учителей на школьников, а также то, как это влияние меняется со временем. Технический отчет, опубликованный в 1997 г. Центром исследования и оценки добавленной стоимости Университета Теннесси, показывает, что разница между самыми эффективными и наименее эффективными преподавателями превышает 80 баллов. В 2000 г. Джун Риверс начала исследование учащихся, сгруппированных в соответствии с их уровнями успеваемости по итогам экзаменов 4-го класса школы [Rivers, 2000]. В ходе исследования Джун изучала вероятность сдачи этими школьниками выпускных экзаменов в средней школе на основании качества преподавания с 5-го по 8-й классы.

В случае низкого уровня преподавания только ученики, окончившие 4-й класс с наивысшими оценками, смогли получить высокие баллы на выпускном экзамене после 8-го класса. Напротив, в классах наиболее эффективных преподавателей, добивающихся от своих учеников прогресса, превышающего ожидания, ученики, даже отстающие на момент окончания 4-го класса, смогли значительно повысить вероятность успешной сдачи выпускного экзамена.

Д. Риверс в своих выводах солидарна с Джордан, Мендро и Уиресингхе Вирейзинге [Jordan, Mendro, Weera-singhe, 1997]. По данным их исследований, у детей одной из школ Далласа, три года подряд оказывавшихся в классах трех самых эффективных учителей, экзаменационные оценки оказались в среднем на 76 процентных пунктов выше, чем их же экзаменационные оценки по итогам 3-го класса. При этом результаты школьников, три года подряд учившихся в классах наименее эффективных преподавателей, оказались в среднем на 27 процентных пункта ниже, чем результаты экзаменов по итогам 3-го класса.

Исследование, проведенное в 1998 г. в Бостонских государственных школах [Boston Public Schools, 1998], показало, что ученики самых эффективных учителей математики в среднем продемонстрировали годовой рост оценок по математике на 14,6 %, а ученики, оказавшиеся в классах наименее эффективных учителей, снизили свои результаты на 0,6 %. Ученики самых эффективных преподавателей литературы прибавили в среднем 5,6 % к своим прошлогодним результатам экзаменов, а те, кто учились у наименее эффективных учителей литературы, смогли улучшить результаты лишь на 0,3 %.

Как пишет о влиянии высокоэффективных преподавателей исследователь Роберт Дж. Марцано, «исключительный профессионализм отдельных учителей компенсирует не только средний уровень учителей в масштабе школы, но и даже низкий профессиональный уровень учителей в масштабе школы» [Marzano, 2000, p. 81]. А Ривкин, Ханушек и Кейн [Rivkin, Hanushek, Kain, 2001] в своей работе предполагают, что пять лет подряд обучения у хороших преподавателей (отличающихся от среднего уровня на одно стандартное отклонение, или соответствующих 85-му процентилю) смогут преодолеть характерную для 7-го класса пропасть между оценками по математике у детей из малообеспеченных семей (имеющих право на льготный школьный обед) и детей из семей с более высоким достатком. Таким образом, хорошие учителя могут компенсировать типичное для детей из неблагополучных семей отставание в учебе.

Изучая продолжительность влияния преподавателей на учеников, Константопулос [Konstantopoulos, 2007] обнаружил, что это влияние носит кумулятивный характер и наблюдается не только в текущем или следующем классе: для младших классов школы это влияние может длиться до трех лет. Впрочем, другие исследования показали, что различия между учениками эффективных и неэффективных преподавателей наиболее заметны в краткосрочной перспективе (например, по результатам экзаменов в конце года), и являются менее выраженными по истечении некоторого времени (например, по результатам экзаменов два года спустя [Jacob, Lefgren, Sims, 2008; Kane, Staiger, 2008].

Исследовательская база в поддержку анализа добавленной стоимости активно развивается, особенно это касается роли преподавателя в качестве образования. Это одна из причин, по которой учителя, те, кто осуществляют политику в образовании, а также исследователи и законодатели сегодня уделяют все больше внимания качеству преподавания. Но самое главное вам уже известно: исследователи доказали, что работа учителя в классе имеет колоссальное значение.

В эпоху контроля и учета, а также принятия решений, принимаемых на основе отчетных данных, мы должны помнить, что прогресс в научении является важнейшим показателем системы школьного образования.

В этой главе мы определили анализ данных о добавленной стоимости и различия между успеваемостью и прогрессом. Данные об успеваемости и данные о прогрессе, собранные вместе, дают нам ясное понимание эффективности школьного округа, школы и отдельного класса. Информация о добавленной стоимости – это измеряемые показатели, которые можно использовать для принятия решений и совершения действий. В эпоху контроля и учета, а также принятия решений на основе имеющихся данных мы должны помнить, что прогресс в научении является важнейшим показателем. в следующей главе мы рассмотрим многочисленные способы применения информации о добавленной стоимости и изучим преимущества ее использования для директоров школ, завучей, педагогов, учеников, родителей, общественности, законодателей и тех, кто принимает решения о политике в области образования.

Выводы

Анализ данных о добавленной стоимости оценивает прогресс в результатах учеников и позволяет измерить долгосрочный вклад учителей, школ и школьных округов в академические успехи учащихся. Тогда как тесная взаимосвязь между успеваемостью и социально-экономическим статусом – это отнюдь не факт в отношении информации о добавленной стоимости. Для измерения эффективности округа, школы и класса следует учитывать как успеваемость, так и динамику развития. Исследования показывают, что то, что учитель делает в классе, влияет на развитие учащегося в самых разных направлениях.

Практические шаги и вопросы для обсуждения

Задание: Уясните, что такое анализ данных о добавленной стоимости и в чем его отличие от данных об успеваемости.

• Дайте определение анализу данных о добавленной стоимости своими словами.

• Чем анализ данных о добавленной стоимости отличается от данных об успеваемости?

• Почему изучение одних лишь показателей успеваемости чревато проблемами?

Задание: Обсудите с вашими сотрудниками «двойную силу».

• Что мы знаем о социально-экономическом статусе, и как он влияет на показатели успеваемости и прогресса? Почему это важно для нашей педагогической миссии?

• Какие новые перспективы открывает перед преподавателями информация о добавленной стоимости?

• Как поможет преподавателям изучение совокупности данных об успеваемости и прогрессе учащихся?

Задание: обратите внимание на исследовательскую базу, лежащую в основе информации о добавленной стоимости.

• Какие из выводов исследований эффективности преподавателей оказались для вас новыми?

• Совпали ли результаты исследований с вашими убеждениями или же удивили вас?

Инструментарий для преподавателей и руководителей

Форма «Двойная сила» (рис. 1.9) для заполнения преподавателями после ознакомления с анализом данных о добавленной стоимости.

Рис. 1.9. «Двойная сила»: форма для заполнения

Источник: © 2011, Battelle for Kids.

2. Шаг I: погружение в анализ данных о добавленной стоимости

Цикл импрувмента на основаниии анализа данных о добавленной стоимости

Источник: © 2011, Battelle for Kids.

Ключевые тезисы главы 2

1. Формирование образовательной культуры, в которой данные о добавленной стоимости являются движущей силой.

2. Обеспечение эффективного профессионального развития.

3. Обеспечение доступа к отчетам по добавленной стоимости.

4. Предоставление преподавателям инструментов для совместного изучения информации о добавленной стоимости.

5. Движение от макро– к микроуровню анализа.

Говорят, что без хорошего начала не бывает хорошего окончания, и в случае анализа данных о добавленной стоимости это действительно так. Чтобы эффективно использовать информацию о добавленной стоимости для школьного импрувмента, педагогов необходимо поощрять к «погружению» в информацию. Погружение не означает безоглядного броска в бездну статистики. Для большинства преподавателей идеи добавленной стоимости и импрувмента школ на основе мониторинга добавленной стоимости представляются новыми и вызывают настороженность, поэтому, чтобы эффективно использовать соответствующую информацию, необходима некоторая подготовка, включающая тщательное планирование и обучение. Основная цель этой главы – представить вам некоторые предварительные шаги и дать рекомендации для:

• формирования образовательной культуры, при которой данные о добавленной стоимости являются движущей силой;

• создания условий эффективного профессионального развития учителей;

• обеспечения преподавателям доступа к касающейся их информации о добавленной стоимости;

• обеспечения преподавателей инструментами для систематического изучения информации о добавленной стоимости относительно своей работы;

и наконец,

• освоения макро– и микроподходов к изучению данных о добавленной стоимости.

Мы покажем на уровне штата, округа, школы и конкретного учителя, как педагоги по всей стране погружались в анализ данных о добавленной стоимости. Некоторые из приведенных историй из практики описывают конкретных людей, другие носят более образный характер, но каждая из них приблизит вас к пониманию того, как начать. Первую часть этого пути мы начнем с рассмотрения важности формирования образовательной культуры, в которой данные о добавленной стоимости являются определяющим фактором для развития.

Тезис 1
Формирование образовательной культуры, основанной на данных о добавленной стоимости

Во время 2009/2010 учебного года руководители Независимого школьного округа Лаббока в западной части Техаса решили вложить ресурсы в анализ данных о добавленной стоимости, видя в нем ключевой компонент плана импрувмента работы округа. Новый руководитель школьного округа доктор Карен Гарза уже ознакомилась с концепцией анализа данных о добавленной стоимости во время своей работы на посту руководителя по образованию Хьюстонского независимого школьного округа. Ей как опытному специалисту отводилась важная роль в разработке стратегии импрувмента работы округа на базе анализа данных о добавленной стоимости. Педагоги Лаббока, за исключением нескольких руководителей округа, практически ничего не знали об анализе данных о добавленной стоимости или о школьном импрувменте, основанном на нем. Однако к концу двухлетнего периода внедрения этого понятия они значительно продвинулись на пути формирования новой культуры ведения преподавания, в которой пониманию и продуктивному использованию информации о добавленной стоимости отводится ключевая роль. Вопрос в том, что эти преподаватели сделали, чтобы понять, где они находятся сегодня?

На следующих нескольких страницах мы обсудим важные первые шаги, предпринятые педагогами этого округа и другими преподавателями.

Придерживайтесь взятых обязательств

Первый шаг в формировании образовательной культуры, в которой данные о добавленной стоимости являются движущей силой, – это полное понимание концепции и готовность действовать со стороны руководителей округа. Для достижения успеха абсолютно необходимы заблаговременное планирование и полная поддержка. Важной частью планирования является поиск ответов на следующие критические вопросы о добавленной стоимости: (а) как планируется использовать информацию о добавленной стоимости и (б) кто будет поставлять вам информацию о добавленной стоимости.

Планируемое использование информации о добавленной стоимости

Когда округ, штат или любая другая административная единица начинает осваивать применение информации о добавленной стоимости в деле импрувмента школьного образования, руководителям особенно важно получить ясные ответы на определенные вопросы: Как планируется использовать информацию о добавленной стоимости? Для чего она будет использоваться – для совершенствования работы школы, для установления дифференцированной оплаты труда, для оценки отчетности в масштабе округа, школы или класса или же для сочетания всех этих видов использования? Независимо от того, что будет выбрано, каждое из этих направлений имеет свои долгосрочные последствия различной степени важности, а также ближайшие последствия, связанные с выбором поставщика информации о добавленной стоимости.

При прочих равных условиях мы рекомендуем начинать внедрение понятия добавленной стоимости с наименее важных направлений использования. Для этого существуют две важные причины. Во-первых, направления использования, имеющие наибольшее значение, обычно перевешивают менее значимые. Если этот подход сразу воспринимается как инструмент для дифференцирования оплаты труда и (или) оценивания успешности учеников – а оба эти варианта использования являются важными, – то велика вероятность того, что только эти сферы применения и будут восприняты всерьез. Во-вторых, с любым вариантом использования этой концепции связана кривая научения: людям нужны время, информация и опыт, чтобы понять преимущества и ограничения этой концепции, прежде чем они смогут считать ее достоверным способом оценки их работы – а доверие, возможно, является самым значимым аспектом успешного использования понятия добавленной стоимости в долгосрочной перспективе.

Выбор поставщика информации о добавленной стоимости

Вторым по важности решением является решение о выборе поставщика информации о добавленной стоимости. В Соединенных Штатах анализом данных о добавленной стоимости занимается несколько организаций, но не все модели добавленной стоимости одинаковы. Например, недорогая и простая в использовании модель добавленной стоимости, которая хорошо справляется с оценкой отчетности учреждений и округов, может не подходить для оценки преподавательского состава. Модель, которая справится с генерацией надежной информации на уровне учителей, по стоимости и сложности может выйти за пределы ожиданий руководителей округа или штата. Есть один ключевой фактор, о котором нужно помнить при выборе поставщика: способность этого поставщика дать вам достоверную информацию, отвечающую выбранным вами целям.

Мы не собираемся критиковать множество доступных сегодня моделей добавленной стоимости, но лишь хотим подчеркнуть, что выбор поставщика – это очень важное решение. За информацией по этому вопросу вы можете обратиться к недавней публикации Фонда Билла и Мелинды Гейтс (Bill and Melinda Gates Foundation, www. edgrowthrneasures.org).

Коммуникация, коммуникация и еще раз коммуникация

Когда лидеры школьных округов сформируют для себя ясную картину, необходимую для движения вперед, следующим шагом становится донесение решений до всех интересантов. Руководители округов должны уметь простым и понятным языком разъяснить педагогам возможности использования анализа данных о добавленной стоимости в масштабах штата, округа или другой административной единицы. Обращаясь ко всем заинтересованным лицам, руководители должны:

• подчеркнуть важность масштабной инициативы по улучшению преподавания;

• показать, как этому может способствовать информация о добавленной стоимости;

• рассказать различным группам участников, что от них потребуется;

• убедить все заинтересованные лица в том, что анализ данных о добавленной стоимости – это не мимолетное увлечение, а серьезная долгосрочная стратегия.

Коммуникация с заинтересованными участниками должна вестись посредством различных каналов, в том числе через новостные бюллетени и другие обыденные инструменты донесения информации, и подкрепляться личными встречами и собраниями. Директора и завучи должны уделить время разъяснению преподавательскому составу возможностей использования анализа данных о добавленной стоимости по всему округу по различным административным структурам. Встречаясь с учителями для обсуждения методов преподавания и оценивания учеников, важно использовать отчеты по добавленной стоимости в сочетании с другими формативными и итоговыми данными по оцениванию учеников, чтобы показать, как этот вид информации отличается от привычных учителям данных и как он их дополняет.

Важно использовать отчеты по добавленной стоимости в сочетании с другими формативными и итоговыми данными по оцениванию учеников, чтобы показать, как этот вид информации отличается от привычных учителям данных и как он их дополняет.

Во время такого начального общения руководители округов и школ должны продемонстрировать, что они

(а) понимают информацию о добавленной стоимости,

(б) ценят ее и (с) прозрачным образом используют ее при принятии важных решений на уровне округа или школы. Например, ссылаются ли руководители на данные о добавленной стоимости во время обсуждения ключевых решений? Используют ли руководители школ эти данные для привлечения внимания к конкретным сильным сторонам школы или к вызовам, с которыми она сталкивается?

Когда Хьюстонский независимый школьный округ (Houston Independent School District – HISD) разработал свою модель совершенствования образования и управления успеваемостью под названием «Ускорение прогресса учащихся, улучшение результатов и ожиданий» (Accelerating Student Progress, Increasing Results & Expectations – ASPIRE), то в качестве ключевого компонента она включала анализ данных о добавленной стоимости. При представлении модели общественности руководители округа использовали все доступные им средства для донесения своей идеи: сайт, письма родителям, новостные рассылки, внутришкольную агитацию. Кроме того, округом была разработана информационная брошюра для родителей, в которой разъяснялись масштабные цели модели ASPIRE, а также было приведено простое определение анализа данных о добавленной стоимости. Пример этой брошюры для родителей приведен в конце данной главы. Перечисленные средства коммуникации в совокупности должны были достичь широкой аудитории, и их неоднократно использовали при каждом удобном случае. Для Хьюстонского школьного округа распространение информации о добавленной стоимости в сфере образования было особенно важно, потому что анализ данных о добавленной стоимости должен был стать важным компонентом в процессе принятия округом ответственных решений с долгосрочными последствиями, в том числе решений для удержания учителей и оплаты их труда.

Департамент образования Огайо предпринял значительные усилия, чтобы сформировать региональную сеть поддержки преподавателей всего штата при обучении их применению анализа данных о добавленной стоимости для улучшения преподавания и повышения эффективности школ. Эта сеть поддержки начала действовать за два года до того, как анализ данных о добавленной стоимости начал применяться в системе контроля Департамента образования штата Огайо.

Важное примечание

В Соединенных Штатах Америки анализ данных о добавленной стоимости получает все большее распространение для аттестации учителей и дифференциации оплаты их труда. Например, ряд школ Северной Каролины подключились к программе «Система прогресса учителя и ученика» (System for Teacher and Student Advancement Program – TAP), о которой мы упомянули во введении. В рамках этой программы школы применяют добавленную стоимость в качестве одного из показателей для дифференциации оплаты учителей. Ряд школ, в частности школы Независимого школьного округа Форт-Уэрта в Техасе, внедрили модель расчета вознаграждения под названием «Учителя школ штата, осуществляющие развивающее обучение детей» (Public Educators Accelerating Kids – PEAK). По программе РЕАК вознаграждение команд преподавателей рассчитывается на основании достигаемых на протяжении учебного года группами преподавателей результатов по отдельным классам и предметным областям. И в этой схеме добавленная стоимость является основным показателем.

Хотя основной фокус этой книги – использование анализа данных о добавленной стоимости для целей импрувмента работы школ, но, очевидно, что он находит применение и при достижении других важных целей. Независимо от того, какое направление его использования выберете вы и ваш округ, мы настоятельно советуем вам сформировать такую культуру преподавания, в которой данные о добавленной стоимости являются основой принятия решений, и только потом применять информацию о ней при принятии важных решений с серьезными долгосрочными последствиями.

Формирование образовательной культуры, при которой данные о добавленной стоимости являются основой для принятия решений, – обязательное условие для успешного применения информации о добавленной стоимости для импрувмента школ. Еще одним ключевым драйвером успешного внедрения в школьную практику анализа данных о добавленной стоимости является эффективное профессиональное развитие.

Мы настоятельно советуем вам сформировать такую культуру преподавания, в которой данные о добавленной стоимости являются основой для принятия решений, и только потом применять информацию о ней при принятии самых важных решений.