Оценка образовательных достижений: системный подход

6 марта состоялся очередной семинар Института развития образования НИУ ВШЭ. С докладом «Разработка эталонов в системе оценки образовательных достижений в разных странах: опыт SABER и READ» выступила специалист Всемирного банка Маргарет Кларк.

Чтобы руководство страны знало, как развивается национальная образовательная система, каково ее место в мировом контексте, необходимо ориентироваться на определенные стандарты учебных достижений. Эксперты Всемирного банка видят свою задачу в том, чтобы предоставить странам такие стандарты — эталоны развития образовательной системы.

Маргарет Кларк, исследовавшая проблемы образования в Эфиопии, Индии, Иордании, Косово, Монголии, представила последние проекты, которыми она занимается — SABER и READ. Их цель — помощь развивающимся странам в совершенствовании национальных систем оценки качества образования.

 

Что оцениваем?

READ, Российская программа содействия образованию в целях развития, была разработана в рамках сотрудничества правительства РФ и Всемирного банка для повышения качества образования и ликвидации пробелов в системе оценки результатов обучения. Участниками программы являются 8 государств — Ангола, Армения, Вьетнам, Замбия, Киргизия, Мозамбик, Таджикистан, Эфиопия. Бюджет программы составляет 32 миллиона долларов.

SABER, System Assessment and Benchmarking for Education Results, — программа Всемирного банка, которая направлена на создание разнообразных информационных ресурсов по всем ключевым направлениям образовательной политики: концептуальные подходы, диагностические инструменты и страновые обзоры, призванные помочь государствам в совершенствовании образовательных систем.

Как пояснила докладчик, «под оценкой образовательных достижений понимается весь процесс сбора, анализа и интерпретации информации о том, что учащийся знает, понимает и умеет. Система оценки представляет собой сочетание государственной образовательной политики, организационной структуры и инструментов, направленных на получение и использование информации об учебных достижениях учащихся».

Концептуальная рамка системы оценки качества образования включает следующие этапы оценивания: внутриклассное оценивание; государственные экзамены; крупномасштабные образовательные обследования: национальные мониторинги и международные исследования.

Внутриклассное оценивание направлено на то, чтобы выяснить, на каком этапе обучения находятся ученики, куда им следует двигаться дальше и как сделать это наиболее эффективно.

Государственные экзамены, выпускные или вступительные, — это и аттестация учащихся, и их отбор: кто способен продолжить свое образование на более высоких ступенях (типичный пример — российский ЕГЭ).

Наконец, крупномасштабное тестирование позволяет узнать, как работает образовательная система страны в целом и как учатся школьники — в сравнении с другими государствами.

Главная задача всех этих методов оценки — получение данных о том, насколько в конкретной стране достигаются цели, предусмотренные государственной политикой, а также выявление факторов, которые могут влиять на учебные достижения школьников. Таким образом, внутриклассное оценивание, экзамены и мониторинги позволяют комплексно оценить качество обучения, включая деятельность образовательных учреждений, работу учителей и образовательные программы.

 

Как оцениваем?

При этом, как отмечает докладчик, исследователи не должны упускать из виду и сами процедуры оценки.

Качество системы оценки образовательных достижений связано с контекстом, в котором она существует. Прежде всего, это факторы, влияющие на способность стабильно и эффективно заниматься оцениванием, — государственная политика, финансовые возможности страны, организационные и человеческие ресурсы, включая квалифицированный персонал и саму систему подготовки кадров в сфере оценки образования.

Также качество системы оценки определяется тем, насколько она вписана в образовательную систему страны, соответствуют ли процедуры оценки целям обучения в данной стране, принятым государственным стандартам.

Наконец, значение имеет технология оценки — все, что имеет отношение к психометрике — дизайн тестирования, процедура проведения тестов и экзаменов, анализ и интерпретация полученных результатов.

Каждому элементу системы оценки соответствуют определенные индикаторы. На основании этих индикаторов можно оценить уровень развития системы оценки в каждом конкретном государстве. Эксперты Всемирного банка выделяют четыре уровня: латентный (latent), растущий (emergent), созданный (established) и продвинутый (advanced).

По словам Маргарет Кларк, «разработанные в рамках программы SABER эталоны — инструменты оценки качества образования — находятся в свободном доступе, и при желании их может использовать любой интересующийся образовательной тематикой».

Использование инструментария предполагает последовательное выполнение исследователями, экспертами Всемирного банка, четырех шагов. Это сбор данных, оценка полученных данных, разработка странового отчета, диалог с руководством страны о путях развития образования.

Сбор данных строится на основании внутриклассового оценивания, экзаменов и мониторингов.

Получив данные, исследователь проводит их тщательный анализ. В зависимости от того, как в стране отвечают на тот или иной вопрос, исследователь присваивает стране тот уровень, на котором, по его мнению, там находится система оценки образования. Например, если в стране нет стратегий развития образования, не определены цели образовательной политики, отсутствуют институты оценки, нет специально подготовленного персонала — это значит, что система оценки образования находится на «латентном» уровне развития. Если же все эти элементы системы оценки в стране есть, и более того, они постоянно совершенствуются, руководство страны поощряет развитие инноваций в оценочных процедурах, то можно говорить о «продвинутом» уровне системы оценки образовательных достижений.

Следующим шагом является подготовка отчета для страны.

Наконец, на основе полученных данных, составленного профиля страны, ее сильных и слабых сторон и сравнения этого профиля с передовыми странами эксперты анализируют возможности дальнейшего развития образования в этой стране.

 

Что имеем в результате?

В качестве примера использования инструментария докладчик привела анализ уровня систем оценки образования в странах — получателях помощи по программе READ.

Наибольшие успехи были достигнуты странами в государственных экзаменах — удалось перейти на «растущий» и даже на «созданный» уровень. В то же время крупномасштабные мониторинги в странах, которые получают помощь от России, особого развития не получили. По словам Маргарет Кларк, это может объясняться тем, что в развивающихся странах «экзамены традиционно использовались, чтобы разделять учеников на сильных и слабых, в то время как дорогостоящие широкомасштабные мониторинги — неизведанная область». Например, в Анголе и Таджикистане такие мониторинги вообще не проводятся, эксперты фактически ничего не знают об уровне достижений школьников в этих странах, соответственно нет данных, которые можно было бы использовать для повышения качества образования и развития государственной образовательной политики.

Внутриклассовое тестирование в странах участницах программы READ также не поднимается выше «растущего» уровня. А в некоторых странах, например, Эфиопии и Киргизии — оно все еще на «латентном уровне», то есть в этих государствах нет тактических и стратегических соображений о том, как и зачем нужно проводить внутриклассное оценивание школьников. Каждый учитель проводит его так, как считает нужным, и никаких педагогических тренингов в данной сфере не организуется.

Таким образом, каждая страна благодаря проведенным исследованиям узнала массу нового о своей образовательной системе, и из Фонда программы READ были выделены средства на развитие тех или иных разделов оценки образования. В основном страны фокусируются на том, что у них и так на относительно неплохом уровне — на совершенствовании государственных экзаменов. По данным за январь 2012 года, все страны-получатели помощи провели самодиагностику уровня своих систем оценки образования, а некоторые уже запустили программы развития, которые будут действовать до 2014 года.

В завершение своего выступления Маргарет Кларк представила перспективы дальнейшего развития проектов, в которых она участвует.

В рамках программы SABER планируется и дальше развивать механизмы и инструменты оценки образовательных достижений, но с учетом связей между оцениванием школьников и другими элементами образовательной системы — прежде всего, оценкой финансовых ресурсов, преподавательских практик и прочего.

Что касается программы READ, Всемирный банк планирует отслеживать ее реализацию в странах получателях помощи и контролировать полученные результаты.

 

Оценка образования в нашей стране

Дискуссант Галина Ковалева, директор Центра оценки качества образования Института содержания и методов обучения Российской академии образования, заметила, что ее переполняет гордость, так как Россия помогает другим странам — содержательно и финансово — в вопросах развития систем оценки качества образования. Что особенно важно, работа в рамках программы READ строится с привлечением квалифицированных экспертов, профессионалов своего дела, а также с применением самых последних разработок в области оценки образования.

В самой России уже давно развивается система оценки качества образования, и наша страна подошла к тому моменту, «когда налицо перегрузка образования различными системами оценки, когда на образование вываливается масса некачественных измерительных инструментов». По мнению дискуссанта, «у нас в стране недостаточно развит системный подход к оценке качества образования, и пока еще не сформированы жесткие рамки самого механизма оценивания».

Вице-президент Российской академии образования Виктор Болотов полагает, что международные исследования учебных достижений бессмысленны без проведения крупномасштабных национальных мониторингов: «Слишком мало информации мы «вытаскиваем» из международных программ оценки». Почему, например, в PIRLS российские школьники стабильно в тройке лучших, а в PISA все далеко не так благополучно? Возможны ли эффективные стратегии управления качеством образования при плохом социально-экономическом статусе многих семей в России? Чтобы ответить на эти вопросы, нужны дополнительные страновые исследования.

Подводя итоги семинара, директор Института развития образования ВШЭ Ирина Абанкина отметила, что представленная методология оценки образования может быть весьма интересной, но основную информацию для размышлений дают все же межстрановые сравнения: «Ведь сама методология существует не для того, чтобы каждая страна могла оценивать только свои шаги. Методология разрабатывается и совершенствуется, чтобы на основе сравнения с другими странами можно было бы идентифицировать сильные и слабые стороны своей системы оценки качества образования».

 

Алина Иванова, специально для новостной службы портала ВШЭ