Министерство образования и науки РФ Федеральная служба по

Министерство образования и науки РФ Федеральная служба по надзору в сфере образования и науки Российская академия образования Институт содержания и методов обучения Центр оценки качества образования Качество и результативность образования 1

Качество образования v Под качеством образования понимается интегральная характеристика системы образования, отражающая степень соответствия реальных достигаемых результатов нормативным требованиям, социальным и личностным ожиданиям.

Современное понимание образовательных достижений Освоение предметных знаний и умений v Умение применять эти знания на практике (в различных ситуациях реальной жизни, не только в контексте учебной дисциплины) v

Современное понимание образовательных достижений Овладение междисциплинарными умениями: v - коммуникативными умениями (умения ясно выражать свои мысли устно или письменно, слушать и понимать других, понимать и анализировать прочитанный текст) v - умениями работать с информацией, представленной в различной виде (таблицы, графики и др. ), v

Современное понимание образовательных достижений - овладение информационными технологиями (умения работать с информацией с помощью компьютера), v - умения сотрудничать и работать в группах; v - умения учиться и самосовершенствоваться; v - умения решать проблемы и др. v

Показатели образовательных достижений Интегральные показатели обученности по отдельным предметам (достижение обязательного и повышенного уровней подготовки по предмету) v Динамика образовательных достижений v Сформированность общеучебных умений v Сформированность коммуникативных умений v

Показатели образовательных достижений (продолжение) сформированность познавательных интересов v Установки и ценностные ориентации v Профессиональное самоопределение v

Требования компании Microsoft к своим сотрудникам Коммуникативные умения и личностные качества v Стратегические перспективы v Креативность v Глубокое понимание глобальных и кросснациональных проблем v Умение обучаться в международном контексте v

Результаты российских школьников в международных сравнительных исследованиях качества образования: TIMSS - математика и естествознание; PISA – чтение, математика и естествознание 10

TIMSS 8 класс Результаты учащихся 4 и 8 классов по математике TIMSS 4 класс 11

Результаты российских учащихся в исследовании TIMSS Математика, 8 класс (46 стран): Естествознание, 8 класс (46 стран): v Выше среднего международного v 9 стран имеют более высокие v 12 стран имеют более высокие результаты v 8 стран - сравнимые результаты v 7 стран - сравнимые результаты v 25 стран – более низкие результаты v 30 стран – более низкие результаты Естествознание, 4 класс (25 стран): Математика, 4 класс (25 стран): v Выше среднего международного v 5 стран имеют более высокие результаты v 8 стран - сравнимые результаты v 5 стран - сравнимые результаты v 11 стран – более низкие результаты v 14 стран – более низкие результаты

Результаты стран по сравнению с Россией TIMSS, математика, 8 класс Выше, чем в России (9 стран) Не отли -чаются от российских Сингапур, Корея, Гонконг, Китай-Тайвань, Япония, Бельгия, Нидерланды, Эстония, Венгрия Малайзия, Латвия, Словацкая республика, Австралия, США, Литва, Англия (7 стран) Ниже, чем в России (30 стран) Швеция, Шотландия, Израиль, Новая Зеландия, Словения, Италия, Болгария, Румыния, Норвегия и др. TIMSS, естествознание, 8 класс Выше, чем в России (12 стран) Не отличаются от российских (8 стран) Ниже, чем в России (25 стран) Сингапур, Тайвань, Республика Корея, Гонконг, Эстония, Япония, Венгрия, Нидерланды, США, Австралия, Швеция, Англия Словения, Новая Зеландия, Литва, Словацкая Республика, Бельгия, Латвия, Шотландия, Малайзия Норвегия, Италия, Израиль, Болгария, Иордания, Молдова, Румыния, Сербия, Армения, Иран, Македония, Кипр и др.

Результаты по всем направлениям исследования PISA Математика Чтение Естествознание Решение проблем

Результаты российских учащихся в исследовании PISA Математика Чтение Естествознание • • Ниже среднего по странам OECD • 31 страна имеет более высокие результаты • 2 страны сравнимые результаты • 6 стран – более низкие результаты • Ниже среднего по странам OECD • 16 стран имеют более высокие результаты • 14 стран - сравнимые результаты • 9 стран – более низкие результаты • • • Ниже среднего по странам OECD 26 стран имеют более высокие результаты 4 страны сравнимые результаты 9 стран – более низкие результаты Решение проблем • Ниже среднего по странам OECD • 21 страна имеет более высокие результаты • 9 стран сравнимые результаты • 9 стран – более низкие результаты

Результаты стран по сравнению с Россией PISA, математика Выше, чем в России (26 стран) Не отличаются от российских Гонконг, Финляндия, Р-ка Корея, Нидерланды, Лихтенштейн, Япония, Канада, Бельгия, Макао, Швейцария, Австралия, Новая Зеландия, Чешская Р-ка, Исландия, Дания, Франция, Швеция, Австрия, Германия, Ирландия, Словацкая Р-ка, Норвегия, Люксембург, Польша, Венгрия, Испания. Латвия, США, Португалия, Италия (4 страны) Ниже, чем в России (9 стран) PISA, чтение Выше, чем в России (31 стран) Не отличаются от российских Гонконг, Финляндия, Р-ка Корея, Лихтенштейн, Япония, Канада, Бельгия, Макао, Швейцария, Австралия, Новая Зеландия, Чешская Р -ка, Исландия, Дания, Франция, Швеция, Австрия, Германия, Ирландия, Словацкая Р-ка, Норвегия, Люксембург, Польша, Венгрия, Испания, Нидерланды, Италия, Греция США, Португалия, Латвия. Турция, Уругвай (2 страны) Греция, Сербия, Турция, Уругвай, Таиланд, Мексика, Индонезия, Тунис, Бразилия. Ниже, чем в России (6 стран) Сербия, Таиланд, Мексика, Индонезия, Тунис, Бразилия.

Результаты ряда стран по математике по сравнению с Россией в динамике 2000 год, PISA 2003 год, PISA Выше российских Япония, Корея, Финляндия, Канада, Англия, Франция Гонконг, Финляндия, Корея, Япония, Канада Чехия, Франция, Германия, Польша, Венгрия Не отличаются от Чехия, США, Германия, российских Венгрия, России, Польша, Латвия, США, Россия, Италия Ниже российских Мексика Бразилия Италия, Мексика, Бразилия

Результаты стран по уровням достижений по математике 18

Результаты ряда стран по уровням образовательных достижений Исследование TIMSS: Распределение учащихся 8 класса ряда стран по уровням образовательных достижений (в%)

Результаты ряда стран по уровням образовательных достижений Исследование PISA: Распределение учащихся ряда стран по уровням образовательных. достижений (в%)

Динамика результатов российских учащихся v v Исследование TIMSS (8 класс, 1995 -2003 годы): Математика – статистически значимое снижение результатов по сравнению с 1995 и 1999 годами Естествознание – статистически значимое снижение результатов по сравнению с 1999 годом v v v Исследование PISA (2000 -2003 годы): Математика – нет изменений Чтение – статистически значимое снижение результатов Естествознание – статистически значимое улучшение результатов 22

Динамика результатов Исследование TIMSS: Изменение процента учащихся с высокими результатами 23

Динамика результатов Исследование TIMSS: Изменение результатов отдельных групп учащихся 8 класса за период с 1995 по 2003 годы Математика, 8 класс Естествознание, 8 класс

Примеры заданий (PISA) Задание по математике ОГРАБЛЕНИЯ В телевизионной передаче журналист показал следующую диаграмму и сказал: «Диаграмма показывает, что по сравнению с 1998 годом в 1999 году резко возросло число ограблений» . 520 Число ограблений за год 1999 год 515 510 1998 год 505 Считаете ли вы, что журналист сделал правильный вывод на основе данной диаграммы? Запишите объяснение своего ответа. Диаграмма является ярким примером манипуляции общественным мнениям. Большой масштаб и изображение только верхней части столбцов целенаправленно наводят на мысль о значительном увеличении числа ограблений. Верно выполнили это задание в 2000 г. – 6%, в 2003 г. – 3% российских учащихся.

Задание по естествознанию ОЗОН С помощью комикса показан процесс образования озона. Предположим, у вас есть дядюшка, который пытается понять, что изображено на рисунках. Однако он не изучал в школе образование озона. Он знает, что в атмосфере нет никаких маленьких человечков, но его интересует, что изображают маленькие человечки комикса, что означают эти странные надписи O 2 и O 3 , и какой процесс представлен на рисунках. Он просит вас объяснить комикс. Предположим, что ваш дядюшка знает, что O – обозначение кислорода. Он знает, что такое атомы и молекулы. Опишите для своего дядюшки, что показано на каждом рисунке комикса. В своем объяснении используйте слова «атомы» и «молекулы» . Задание проверяет умение применять знания в нестандартной ситуации, а также излагать свой ответ с учетом адресата. Полностью правильно выполнили это задание 18% российских учащихся, более 30% не приступили к его выполнению.

Общие тенденции результатов исследований PISA, ЕГЭ и мониторинга образовательных достижений • Низкий уровень сформированности умений работать с различными источниками информации • Низкий уровень сформированности коммуникативных и общеучебных умений

Проявление общих тенденций в результатах исследования PISA, ЕГЭ и мониторинга образовательных достижений v v ЕГЭ (2002, 2004 годы) : v Русский язык Смогли проинтерпретировать текст, аргументированно доказать v свою точку зрения 33% выпускников из 76 тыс. в 2002 году (48% из 541 тыс. в 2004 году) смогли грамотно излажить свои мысли, не нарушая норм литературного языка 40% в 2002 году (33% в 2004 году) v смогли последовательно и логично выстроить свое речевое высказывание 23% в 2002 году (60% в 2004 году). v v v Мониторинг образовательных достижений (2001 год): Более половины десятиклассников (из 43 тыс. ) затрудняются в анализе научно -популярных текстов, а также текстов делового и публицистического стилей. Только треть десятиклассников смогли проанализировать обществоведческий текст, оценить социальные факты и явления, высказать собственное мнение о прочитанном.

Основные выводы 1. Материалы международных сравнительных исследований не соответствуют, а иногда и противоречат традициям российской системы образования. Однако, даже с учетом этого фактора можно сделать следующие выводы: Наметилась тенденция к снижению уровня образовательных достижений учащихся основной школы.

Основные выводы (продолжение) 2. При том, что уровень овладения специальными предметными знаниями и умениями остается довольно высоким, в некоторых значимых областях можно зафиксировать падение качества образования: • Российские школьники резко уступают своим сверстникам во многих странах мира в области функциональной грамотности: • в умении эффективно и грамотно, с опорой на полученные в школе знания и умения, решать практические, социально- и личностно-значимые проблемы;

Основные выводы (продолжение) • • • в умении «увязывать» с приобретаемой в школе системой знаний свой жизненный опыт, дополнительные сведения, полученные из других источников; в умении работать с информацией, читать и анализировать тексты, анализировать и интерпретировать данные, представленные в иной нетекстовой форме; проводить наблюдения, строить на их основе гипотезы, делать выводы и заключения, проверять предположения. Высоких уровней грамотности достигает незначительное по сравнению с лидирующими странами число учащихся, причем их численность падает. Основная школа – наиболее слабое звено российской системы общего образования.

Проблемы в российском образовании 1. Перегруженность программ и учебников фактологическим материалом (загружается память, но не обеспечивается свободный перенос знаний при работе с ситуациями, отличными от учебных) 2. Слабое внимание формированию общеучебных и интеллектуальных умений (особенно в основной школе). Отсутствие целенаправленной работы по формированию умений работать с различными источниками информации

Результаты единого государственного экзамена 33

Распределение выпускников по полученным отметкам, ЕГЭ - 2006 34

Сравнение результатов выполнения части А выпускниками, получившими разные отметки Физика, ЕГЭ 2006 года 35

Сравнение результатов выполнения части А выпускниками, получившими разные отметки Русский язык, ЕГЭ 2006 года 36

Сравнение результатов выполнения части В выпускниками, получившими разные отметки Биология, ЕГЭ 2006 года 37

Описание алгебраической подготовки выпускников (2005 год) Уровень математическо й подготовки участников экзамена Низкий: тестовый балл 1 -37 отметка « 2» . , Процент выпускников 21, 6% Описание алгебраической подготовки выпускников Выпускники этой группы не овладели ни одним из проверяемых элементов содержания на базовом уровне.

Описание алгебраической подготовки выпускников (2005 год) Удовлетвори -тельный: тестовый балл 38 -55 отметка « 3» . Процент выпускников 40, 2% Выпускники этой группы овладели 6 -8 элементами содержания из 13, которые контролировались с помощью заданий базового уровня сложности в каждом варианте КИМ Выпускники на базовом уровне овладели умением проводить преобразования радикалов и степеней, преобразования логарифмов и тригонометрических выражений по ограниченному набору формул. Эта категория выпускников умеет решать простейшие показательные и дробнорациональные неравенства, а также читать по графику свойства функций

Описание алгебраической подготовки выпускников Хороший: тестовый балл 56 -74 отметка « 4» . Процент выпускнико в 31, 3% Выпускники этой группы овладели всеми элементами содержания, проверяемыми на базовом уровне: они умеют преобразовывать все изученные виды выражений, решать все уравнения и неравенства, исследовать свойства функций. Эта группа выпускников овладела (выполняет задания более 50% учащихся) большинством элементов содержания, освоение которых проверялись на повышенном уровне. Они овладели умениями: – преобразовывать выражения, включающие различные их виды, – исследовать свойства функций элементарными методами и с помощью производной, – решать комбинированные уравнения

Описание алгебраической подготовки выпускников Высокий: тестовый балл 75 -100 отметка « 5» . Процент выпускнико в 6, 9% Выпускники этой группы успешно овладели всеми элементами содержания на базовом и повышенном уровнях, вынесенными на проверку в каждый из вариантов КИМ-2005. Эта группа выпускников показала овладение не только методами решения всех математических задач (о чем свидетельствует правильность ответов на задания с выбором ответа и с кратким ответом), но и показала умение математически грамотно и обоснованно записать свое решение при выполнении заданий с развернутым ответом

По результатам ЕГЭ 2006 года По сравнению с 2005 годом значительно увеличилось число регионов, в которых экзамен по математике и русскому языку сдавало более 90% выпускников общеобразовательных учреждений 2006 года (по математике с 22 до 29, по русскому языку с 12 до 24). Результаты этих регионов уже можно сравнивать между собой для выявления качества образования по основным обязательным предметам. В этих регионах можно проводить сравнение качества подготовки выпускников по общеобразовательным учреждениям. 42

Статистически обоснованное сравнение регионов по результатам ЕГЭ 2006 года Математика 29 из 73 регионов (22 из 70) Республики Адыгея, Бурятия, Горный Алтай, Карелия, Марий Эл, Мордовия, Удмуртия, Чувашия, Краснодарский, Хабаровский и Пермский края, Архангельская, Вологодская, Ивановская, Иркутская, Калининградская, Кировская, Костромская, Курганская, Новгородская, Пензенская, Псковская, Самарская, Тверская, Томская, Челябинская, Читинская области, Ярославская области, Еврейский АО Русский язык 24 из 73 регионов (12 из 69) Республики Бурятия, Горный Алтай, Карелия, Мордовия, Саха (Якутия), Краснодарский край, Пермский край, Иркутская, Калининградская, Камчатская, Костромская, Курская, Ленинградская, Магаданская, Новгородская, Псковская, Самарская, Саратовская, Смоленская, Тамбовская, Читинская области, г. Санкт-Петербург, Еврейский АО, Агинский Бурятский 43 АО АО.

Статистически обоснованное сравнение регионов 44

Статистически обоснованное сравнение регионов 45

Мнение граждан страны о качестве образования 46

Удовлетворены Вы или нет системой образования (школами) в районе, где Вы живете? По данным Gallup World Poll (2006)

Верите ли Вы в то, что к детям в Вашей стране относятся с уважением и достоинством? По данным Gallup World Poll (2006)

Имеет ли большинство детей в Вашей стране постоянную возможность для обучения и развития? По данным Gallup World Poll (2006)

Сравнение образовательных учреждений 50

Зависимость результатов по математике образовательного учреждения от его социально-экономического статуса (Россия) исследование PISA

Зависимость результатов по математике образовательного учреждения от его социально-экономического статуса (Финляндия) - исследование PISA

Зависимость результатов по математике образовательного учреждения от его социально-экономического статуса (Япония) - исследование PISA

Предварительные результаты исследования PISA в 2006 году (оценка грамотности 15 -летних учащихся в области чтения, математики и естествознания 54

Результаты российских учащихся по естествознанию (PISA-2006)

Результаты российских учащихся по математике (PISA-2006)

Результаты российских учащихся по чтению (PISA-2006)

Результаты учащихся по образовательным учреждениям (PISA-2006) 58

Предварительные результаты исследования PIRLS (грамотность чтения в начальной школе) в 2006 году 59

Результаты российских учащихся по чтению (PIRLS-2006) 60

Результаты российских учащихся по чтению (PIRLS-2006) 61

Результаты учащихся по образовательным учреждениям (PIRLS в 2006 году) 62

Проблемы, которые требуют дополнительного анализа Примеры: Эффективные школы Проблемы чтения Структура урока 63

v ID ШКОЛЫ 649 Максимальный средний балл = 631 ID ШКОЛЫ 543 Минимальный средний балл = 381 ----------------------------------v Чем отличаются более эффективные школы от менее эффективных?

Под эффективными будем понимать те школы, реальные результаты которых значимо выше результатов, предсказанных для этих школ, исходя из характеристик учащихся.

Определение более эффективных и менее эффективных школ Исключаются школы, для которых нет статистически значимого различия между реальным и предсказанным баллами. Оставшиеся школы делятся на две группы – с положительным и отрицательным различием Группа 1 (различие положительное) более эффективные школы Группа 2 (различие отрицательное) менее эффективные школы

Выявление факторов, отличающих более эффективные школы от менее эффективных Основывается на выявлении значимых различий в ответах на вопросы анкет администрации, учителей и учащихся двух групп школ.

Более эффективные школы в России (по результатам исследований PISA и TIMSS) v Более крупные образовательные учреждения – с хорошей материальной базой, – c укомплектованным штатом учителей, – c хорошими образовательными ресурсами (библиотекой, лабораторным оборудованием, компьютерами и т. д. ), v v v Больше учителей, удовлетворенных своей работой Более мотивированные учащиеся Доброжелательные отношения между учащимися и учителями Хорошая дисциплина Высокие требования к учащимся и др.

Учащиеся в более эффективных школах (по результатам исследований PISA и TIMSS) Выявлено, что учащиеся имеют более высокие v v результаты, если: Они хорошо мотивированы, Не тревожны, Верят в собственные силы и способности, Владеют эффективными стратегиями обучения (включая постановку цели, выбор стратегий, самоконтроль и самооценку процесса обучения)

Проблемы чтения 72

Время, которое учащиеся тратят на чтение для собственного удовольствия, и результаты по грамотности чтения 73

Распределение учащихся всех стран, читающих часто, редко или не читающих совсем каждый вид печатных материалов Группа I (Россия – 11%, OECD – 22%) v читаю часто читаю редко не читаю совсем 74

Распределение учащихся всех стран, читающих часто, редко или не читающих совсем каждый вид печатных материалов Группа II (Россия – 17%, OECD – 27%) v читаю часто читаю редко не читаю совсем 75

Распределение учащихся всех стран, читающих часто, редко или не читающих совсем каждый вид печатных материалов Группа III (Россия – 22%, OECD – 28%) v читаю часто читаю редко не читаю совсем 76

Распределение учащихся всех стран, читающих часто, редко или не читающих совсем каждый вид печатных материалов Группа IV (Россия – 50%, OECD – 22%) v читаю часто читаю редко не читаю совсем 77

Процент учащихся четырех групп, различающихся разнообразием читаемой литературы, в разных странах и средний балл по чтению 78

Эффективность урока 79

Структура урока в разных странах (естественнонаучные предметы, 8 класс) 80

Структура урока в разных странах (естественнонаучные предметы, 8 класс) 81

Характеристика групп стран v Группа 1 v – Время на объяснение нового материала и на деятельность учащихся, среднее по сравнению с другими группами, больше времени на проверку выполнения домашних заданий и на письменный контроль знаний. – Значительное время на объяснение нового материала, мало времени на проверку выполнения домашних заданий и письменный контроль; на деятельность учащихся меньше времени, чем в других группах. v Группа 2 – Значительное время на деятельность учащихся, мало времени на объяснение нового материала, проверку выполнения домашних заданий и контроль знаний. Группа 3 v Россия – Как в странах Группы 3. Письменный контроль и проверка выполнения домашних заданий имеют наибольшее значение по сравнению с другими странами. 82

Выводы и предложения российских экспертов на конференции G 8: Человек обучаемый стал более востребован, чем человек обученный. Важно учить использовать знания и инновации. Достигнуть нового качества образования (решение не востребованных ранее задач) можно только: v v v Найдя новые подходы к отбору содержания образования; Используя принципиально новые образовательные технологии (методы и средства обучения); Разработав принципиально новую систему оценки образовательных достижений и качества образования.

Выводы и предложения российских экспертов: Возможные шаги на пути к новому качеству образования v v v национальный стандарт образовательных технологий; контрольно-измерительные материалы под компетентноориентированный стандарт образования; инновационные учебно-методические комплексы и коллекция цифровых образовательных ресурсов; изменение подходов к образованию учителя; совершенствование и локализация образовательных технологий с учетом мирового опыта и разработка образовательных технологий под отечественные современные образовательные системы

Условия реализации технологии развивающего обучения v v v v Деятельностное содержание Учебная деятельность и моделирование (компьютерное) Учебное сотрудничество Модульное обучение (сетевые образовательные программы) «Портфолио» ( web-cайты детей и учителей) Проектные формы учебной деятельности Контрольно-измерительные материалы компетентностного типа

Что характерно для стран с более высокими результатами? v v Финансирование образования (расходы на одного ученика) положительно влияет на средние результаты страны, но не гарантирует высокие результаты Значительная автономия школ в принятии решений соединяется с обеспечением равных возможностей в получении полноценного образования 86

Что характерно для стран с более высокими результатами? v v Введение образовательных стандартов сопровождается созданием объективной системы оценки результатов обучения (государственных экзаменов и мониторинга качества образования) Реализуются комплексные программы компенсирующих мер, направленные на самые разные слои населения и социальные группы 87

Что характерно для стран с более высокими результатами? v v v Учебный процесс характеризуется высокой степенью индивидуализации В школах оказывается значительная помощь отстающим учащимся Значительно развита внеурочная и внешкольная деятельность (индивидуальная и групповая) 88

Выводы и предложения международных экспертов: Пути достижения нового качества образования: v v v v v Расширение образовательных областей Введение учебного материала, вызывающего интерес у учащихся Введение элективных курсов, отвечающих потребностям и интересам учащихся Ориентация обучения на решение проблем Индивидуализация обучения (выстраивание индивидуальных траекторий) Усиление внимания способным учащимся и учащимся с проблемами Обучение в малых группах Подготовка учителей нового поколения Обучение учителей способам выявления потребностей и интересов учащихся

СПАСИБО ЗА ВНИМАНИЕ! Вопросы и комментарии Ковалева Галина Сергеевна Центр оценки качества образования ИСМО РАО Тел/факс 8 (495) 246 -24 -21 www. centeroko. ru e-mail: centeroko@mail. ru Исследование TIMSS, PIRLS: www. isc. bc. edu Исследование PISA: www. oecd. org ЕГЭ (аналитический отчет): www. fipi. ru