Украина 2020: насколько хорошо будут учить школьников через 5 лет

В начале 2015 года президент Украины одобрил “Стратегию-2020”. Она содержит 25 ключевых показателей эффективности (KPI). Их можно использовать для оценки прогресса Украины в выполнении программы стратегии. В серии публикаций VoxUkraine оценивает вероятность того, что Украина достигнет запланированных значений некоторых из этих KPI до 2020 года. На этот раз оценивается вероятность достижения цели "попасть в 50 лучших стран в международном рейтинге качества образования PISA".

"Стратегия-2020" предполагает, что Украина займет место среди 50 лучших стран в рейтинге "Международной программы по оценке образовательных достижений учащихся" (The Programme for International Student Assessment, сокращенно PISA). Результат страны в PISA основывается на результатах 15-летних учеников при тестировании их навыков в математике, естественных науках и чтении.

Украина еще не принимала участия в исследовании PISA, и первые результаты тестирования украинских учеников могут быть получены только в 2018 году. Точное количество стран, которые получат результаты исследования PISA в 2018 году, неизвестно, но, согласно информации с сайта PISA, в волне исследований 2015 года участвует более 70 стран, в то время как в волне 2012-го участвовало 65.

Прогресс

Хотя рейтинг PISA пока не охватывает Украину, существует несколько индикаторов, которые могут дать нам представление о качестве украинского образования.

Во-первых, один из индикаторов в опросе руководителей компаний в рамках “Отчета о глобальной конкурентоспособности” - оценка качества образования в начальной (не средней) школе от бизнес-лидеров страны. В Украине было опрошено около 100 бизнес-лидеров. В разные годы данные были доступны для от 131 до 148 стран, а Украина занимала места от 37-го до 52-го.

Рис. 1. Позиция Украины в рейтинге качества начального образования согласно “Отчету о глобальной конкурентоспособности”

Источник: Данные “Отчета о глобальной конкурентоспособности” за 2006-2015. Вопрос: В Вашей стране как Вы оцениваете: а. Качество начального образования [1 = очень плохо - среди худших в мире; 7 = отлично - среди лучших в мире]

Во-вторых, это оценки качества образования в области математики и естественных наук (рис. 2) от бизнес-лидеров страны. По результатам ответов на этот вопрос Украина получала места от 28-го до 45-го. Ни по одному из показателей не наблюдалось устойчивого ухудшения позиции Украины, а значит, цель - попасть в число 50 лучших стран в рейтинге PISA - не так уж амбициозна, особенно учитывая, что рейтинг охватывает только 65-70 стран, тогда как “Отчет о глобальной конкурентоспособности” оценивает более 130 стран.

Рис. 2. Позиция Украины в рейтинге качества математического и естественно-научного образования согласно “Отчету о глобальной конкурентоспособности”

Источник: Данные “Отчета о глобальной конкурентоспособности” за 2006-2015. Вопрос: В Вашей стране как Вы оцениваете качество математического и естественно-научного образования? [1 = очень плохо - среди худших в мире; 7 = отлично - среди лучших в мире]

В-третьих, хотя Украина пока не включена в рейтинг PISA, она стала участником другого международного исследования - "Тенденции в изучении математики и естественно-научных предметов в разных странах" (англ. Trends in International Mathematics and Science Study, сокращенноTIMSS) в 2011 году. Если PISA оценивает результаты 15-летних школьников, тестируя их по математике и естественным наукам, то TIMSS проводит тестирование по этим же предметам среди восьмиклассников (13-14-летних школьников). В 2011 году в TIMSS Украина заняла 19-е место среди 45 стран по математике и 18-е место по естественным наукам.

Разумеется, результаты стран в рейтинге PISA тесно соотносятся с результатами в TIMMS. Ниже мы представляем результаты регрессионного анализа связи результатов PISA с результатами TIMMS для 28 стран, которые участвовали как в исследованиях PISA в 2012 году, так и в TIMMS в 2011-м. Учитывая участие Украины в TIMMS в 2011 году, полученное регрессионное уравнение позволяет нам оценить результат и место в рейтинге, которые Украина получила бы, если бы участвовала в исследовании PISA в 2012 году.

 Табл. 1. Результаты регрессии связи результатов PISA с результатами TIMMS

Таблица показывает, что результат PISA по математике равнялся бы 55,96 + 0,84*результат TIMMS. Результат Украины в математике в TIMMS был равен 479, а значит, предположительный результат Украины в рейтинге PISA по математике составил бы 460 (55,96+0,84*479). В 2012 году этого хватило бы, чтобы занять 42-е место (среди 65 стран) в рейтинге. Аналогично, в естественных науках ожидаемый результат Украины составляет 478,6: достаточно, чтобы занять 39-е место (среди 65 стран). В 2009 году в рейтинге PISA участвовало более 70 стран, но даже тогда этих результатов хватило бы, чтобы занять приблизительно 40-е место, поскольку страны, регулярно участвующие в PISA, являются странами с высокими доходами/высоким качеством образования. Это еще раз подтверждает, что цель занять место среди 50 лучших стран в рейтинге PISA вполне достижима.

Сможет ли Украина достичь этой цели

Вышеприведенный анализ показывает, что стремление занять место среди 50 лучших стран в рейтинге PISA в целом осуществимо. Следовательно, если ориентироваться на рейтинг PISA, Украине лучше нацелиться на место в топ-40 (или даже топ-35), а не топ-50 лучших стран.

Оптимальный ли это способ оценки качества образования

“Стратегия-2020” обосновывает использование позиции в рейтинге PISA в качестве одного из KPI таким образом:

"Украина будет участвовать в международном исследовании качества образования PISA и займет место среди 50 стран мира с лучшим качеством образования. Это будет значить, что выпускники школ будут владеть всеми необходимыми умениями для того, чтобы успешно конкурировать в международной среде, и смогут продолжить образование в вузах".

Как отмечено в некоторых из предыдущих публикаций VoxUkraine (здесь и здесь), украинская система образования не вполне соответствует потребностям экономики. Несмотря на долгую учебу, украинские работники демонстрируют невысокую производительность труда. Относительно неплохой показатель Украины в рейтинге качества математического и естественно-научного образования “Отчета о глобальной конкурентоспособности” не находит подтверждения в показателе соответствия образовательной системы Украины требованиям конкурентоспособной экономики. Это прямо опровергает предположение “Стратегии 2020” о связи рейтинга с конкурентоспособностью на рынке труда. Из рис. 3 видно, что показатель соответствия образовательной системы Украины потребностям конкурентоспособной экономики гораздо хуже ее результатов по другим показателям качества образования и стремительно ухудшался со временем - от приблизительно 50-го где-то до 70-го места.

Рис. 3. Позиция Украины в рейтинге соответствия образовательной системы потребностям конкурентоспособной экономики согласно “Отчету о глобальной конкурентоспособности”

Источник: Данные “Отчета о глобальной конкурентоспособности”. Вопрос: В Вашей стране насколько хорошо система образования соответствует требованиям конкурентоспособной экономики? [1 = очень плохо; 7 = очень хорошо]

Таким образом, хотя PISA - очень полезный инструмент анализа образовательной политики и Украине следует участвовать в этом исследовании, даже если цели занять определенное место в рейтинге не будет, более целесообразным для Украины был бы выбор в качестве KPI цели занять место среди 50 лучших стран в рейтинге соответствия системы образования требованиям конкурентоспособной экономики.

Слабая сторона этого показателя - то, что он основывается на точке зрения достаточно небольшой группы людей, около 100 украинских бизнес-лидеров (Индекс глобальной конкурентоспособности, включающий этот показатель, использован в “Стратегии-2020” как еще один KPI), в то время как показатель в рейтинге PISA отображает результаты тестирования достаточно большой выборки украинских студентов. Субъективными рейтингами (рейтингами восприятия) легче манипулировать, и, особенно учитывая небольшую выборку, они могут неточно отображать реальную ситуацию в стране. С другой стороны, преимуществом рейтингов на основе восприятия является то, что они могут быстро отразить реформы, даже если реально эти реформы повлияют на результаты тестов лишь спустя некоторое время.

Подводя итоги, если использовать позицию в рейтинге PISA как KPI, “Стратегия-2020” могла бы быть более амбициозной и определить в качестве цели позицию среди 40 лучших стран рейтинга, а не среди 50, как сейчас. Стремление занять место среди 50 лучших стран было бы разумной целью в рейтинге соответствия системы образования требованиям конкурентоспособной экономики. Принимая во внимание недостатки обоих показателей, стремление достичь сразу двух этих показателей могло бы стать лучшим KPI. 

Том Купе, доцент, старший экономист в Киевской школе экономики, член Редколлегии VoxUkraine