Оценка читательской компетентности, математической и естественнонаучной грамотности

Оценка читательской компетентности, математической и естественнонаучной грамотности PISA-2009 Ковалева Г. С. Центр оценки качества образования ИСМО РАОРАО

PISA «Международная программа по оценке образовательных достижений учащихся» (Programme for International Student Assessment) осуществляется Организацией Экономического Сотрудничества и Развития ОЭСР (OECD – Organization for Economic Cooperation and Development) Основная цель: оценка функциональной грамотности 15 -летних учащихся в области математики, естествознания и чтения Дополнительная инновационная цель : оценка отношений и учебных стратегий Политическая цель : оценка качества и равенства возможностей в образовании Основные задачи: • Оценить, обладают ли учащиеся 15 -летнего возраста, получившие общее обязательное образование, знаниями и умениями, необходимыми им для жизни • Выявить динамику результатов (2000, 2003, 2006 , 2009) • Выявить факторы, позволяющие объяснить различия в результатах

Читательская компетентность (грамотность чтения) в исследовании PISA Грамотность чтения — способность к осмыслению письменных текстов и рефлексии на них, к использованию их содержания для достижения собственных целей, развития знаний и возможностей, для активного участия в жизни общества. Оценивается не техника чтения и буквальное понимание текста, а понимание и рефлексия на текст, использование прочитанного для различных целей.

Форма материалов для чтения «С плошные» тексты ( прозаические произведения, например, описание повествование, объяснение, рассуждение, а также инструкция, документы или записи, гипертексты); « Н есплошные» тексты ( графики, таблицы, диаграммы, формы, информационные бланки, объявления, рекламы, ваучеры, сертификаты, карты )

Шкалы по грамотности чтения Умения – Нахождение информации (25%) – Интерпретация текста (50%) – Рефлексия на содержание или форму текста и его оценка (25%)

Ситуации использования текста Чтение для личных целей (например, личных писем), 25% Чтение для общественных целей (например, официальных документов), 25% Чтение в профессиональной деятельности (например, отчетов), 20% Чтение для получения образования (например, учебной литературы), 30%

Под естественнонаучной грамотностью в исследовании PISA понимается способность: осваивать и использовать естественнонаучные знания для распознания и постановки вопросов, для освоения новых знаний, для объяснения естественнонаучных явлений и формулирования выводов в связи с естественнонаучной проблематикой, основанных на научных доказательствах; понимать основные особенности естествознания как формы человеческого познания и исследований; демонстрировать осведомленность в том, что естественные науки и технология оказывают влияние на материальную, интеллектуальную и культурную сферы; проявлять активную гражданскую позицию при рассмотрении проблем, связанных с естествознанием. Естественнонаучная грамотность предполагает в равной степени понимание естественнонаучных понятий, применение естествен-нонаучных знаний и методов, а также размышления на основе научных доказательств.

Четыре области естественнонаучной грамотности У знавание жизненных ситуаций, апеллирующих к науке и технологии (контекст) Понимание окружающего мира, включая и технику, на основе научных знаний, которые включают знания об окружающем мире и знания о науке (знание) Демонстрирование компетенций, которые включают распознавание научных вопросов, применение научных знаний для объяснения естественнонаучных явлений, формулирование выводов на основе очевидных фактов и доказательств (компетенции)

Четыре области естественнонаучной грамотности И нтерес к естественнонаучному знанию, включение естественнонаучной любознательности в собственную систему ценностей, сложившаяся мотивация действовать ответственно по отношению, например, к природным ресурсам и окружающей среде (аффективный компонент)

Структура естественнонаучной грамотности в исследовании PISA (для разработки заданий) Контекст — личностный — социальный — глобальный Компетентности — распознать научные вопросы (25%) — описывать, предвидеть или объяснять научные явления (35%) — использовать научные факты для принятия решения и сообщения о нем (40%) Знание — знание о мире (60%) — знание о науке (методы научного познания) (40%) Аффективный компонент (интерес, отношения, мотивация)

Математическая грамотность в исследовании PISA определяется как «сочетание математических знаний, умений , опыта и способностей человека» , обеспечивающих успешное решение различных проблем, требующих использования математики. Общие умения, включают: математическое мышление, математическую аргументацию, постановку и решение математической проблемы, математическое моделирование, использование различных математических языков, коммуникативные умения.

— Пространство и форма — это вопросы, относящиеся к пространственным и плоским геометрическим формам и отношениям. — Изменение и отношения – вопросы, связанные с математическим описанием различных процессов, с зависимостями между переменными, в том числе функциональными. Этот материал в основном относится к алгебре. — Количество – эта область включает вопросы, связанные с числами; в программах по математике этот материал чаще всего относится к арифметике. — Неопределенность – включает в себя вероятностные и статистические явления и зависимости, которые являются предметом изучения разделов статистики и вероятности. Четыре содержательных области математической грамотности

УРОВНИ МАТЕМАТИЧЕСКОЙ КОМПЕТЕНЦИИ ПЕРВЫЙ УРОВЕНЬ «ВОСПРОИЗВЕДЕНИЕ» ВТОРОЙ УРОВЕНЬ «СВЯЗИ» ТРЕТИЙ УРОВЕНЬ «РАЗМЫШЛЕНИЯ» Привычные формы представления информации Прямое применение — известных фактов, — стандартных приемов и методов Переход от одной формы информации к другой Создание математи-ческой модели Применение различ-ных известных методов к решению задач, близких к известным Интерпретация полу-ченного решения Сложные проблемы Размышление и интуиция Творческий подход Разработка метода решения Обобщение. Обоснование

Шкала исследования PISA Учащийся А с относительно высоким уровнем грамотности (компетентности) Учащийся B со средним уровнем грамотности (компетентности) Учащийся С с низким уровнем грамотности (компетентности)Задания с относительно высокой трудностью Задания со средней трудностью Задания с низкой трудностью Задание VI Задание V Задание III Задание I

Схема разработки заданий для оценки математической и естественнонаучной грамотности ПРОБЛЕМА И РЕШЕНИЕ СОДЕРЖАНИЕ (разделы, темы) ОБЛАСТЬ ПРЕДМЕТНОГО СОДЕРЖАНИЯ УРОВНИ КОМПЕТЕНЦИИОБЩИЕ ПРЕДМЕТНЫЕ КОМПЕТЕНЦИИ ОСОБЫЕ КОМПЕТЕНЦИИФОНСИТУАЦИЯ ФОРМА ЗАДАНИЯ

Задание по естествознанию КИСЛОТНЫЕ ДОЖДИ На фотографии, приведенной ниже, изображены статуи, называемые Кариатидами, которые были возведены в Акрополе в Афинах более 2500 лет назад. Статуи были изваяны из горной породы, которая называется мрамором. Мрамор состоит из карбоната кальция. В 1980 году подлинные статуи были перенесены в музей Акрополя, а их заменили копиями. Подлинные статуи были разъедены кислотными дождями.

Задание по естествознанию КИСЛОТНЫЕ ДОЖДИКИСЛОТНЫЕ ДОЖДИ Вопрос 1 6 О бычный дождь слегка кислотный, потому что он поглощает некоторое количество диоксида углерода из воздуха. Кислотный дождь более кислый по сравнению с обычным дождем, потому что он поглощает также такие газы, как оксид серы и оксид азота. Откуда эти оксид серы и оксид азота попадают в воздух? ____________________ Компетенция : научное объяснение явлений Знания: Физические системы (естественнонаучные знания) Область применения : Опасности и риски Контекст: Социальный 707, 9 6 633, 3 5 558, 7 4 484, 1 3 409, 5 2 334, 9 1 Ниже 1 уровня. Уровень Трудность задания – 506 (3 уровень – 1 балл).

Задание по естествознанию КИСЛОТНЫЕ ДОЖДИКИСЛОТНЫЕ ДОЖДИ Вопрос 2 До погружения на ночь в уксус кусочек мрамора имел массу 2, 0 г. На следующий день этот кусочек вынимают из уксуса и высушивают. Какова будет масса высушенного кусочка мрамора? A Меньше, чем 2, 0 г B Точно 2, 0 г C Между 2, 0 г и 2, 4 г D Больше, чем 2, 4 г Компетенция : Использование научных данных для принятия решений Знания: Физические системы (естественнонаучные знания) Область применения : Опасности и риски Контекст: Личностный 707, 9 6 633, 3 5 558, 7 4 484, 1 3 409, 5 2 334, 9 1 Ниже 1 уровня. Уровень Трудность задания – 460 (2 уровень – 1 балл).

Задание по естествознанию КИСЛОТНЫЕ ДОЖДИКИСЛОТНЫЕ ДОЖДИ Вопрос 3 Учащиеся, которые проводили этот эксперимент, поместили на ночь кусочки мрамора также в чистую (дистиллированную) воду. Объясните, для чего учащиеся включили этот опыт в свой эксперимент. ____________________ Компетенция : Распознание (постановка) научных вопросов Знания: Естественнонаучные исследования (Знания о науки) Область применения : Опасности и риски Контекст: Личностный 707, 9 6 633, 3 5 558, 7 4 484, 1 3 409, 5 2 334, 9 1 Ниже 1 уровня. Уровень Трудность задания – Полностью верный ответ – 717 (6 уровень – 2 балла) ; частично верный ответ – 513 (4 уровень – 1 балл).

Задание по естествознанию КИСЛОТНЫЕ ДОЖДИКИСЛОТНЫЕ ДОЖДИ Вопрос 10 N: КИСЛОТНЫЕ ДОЖДИ S 485 Q 10 N Насколько вам интересно следующее? Отметьте только одну клетку в каждой строке. Очень интересно Интересно Мало интересно Не интересно a) Узнать, какой из видов деятельности человека более всего влияет на образование кислотных дождей. 1 2 3 4 b) Узнать о технологиях, которые сводят к минимуму выделение газов, которые являются причиной кислотных дождей. 1 2 3 4 c) Понять методы, применяемые для восстановления зданий, пострадавших от воздействия кислотных дождей.

Задание по естествознанию КИСЛОТНЫЕ ДОЖДИКИСЛОТНЫЕ ДОЖДИ Вопрос 10 S: КИСЛОТНЫЕ ДОЖДИ S 485 Q 10 S Насколько вы согласны со следующими высказываниями? Отметьте только одну клетку в каждой строке. Совершенно согласен Согласен Не согласен Совершенно не согласен a) Сохранение древних развалин должно быть основано на научных данных, касающихся причин повреждений. 1 2 3 4 b) Любые высказывания о причинах кислотных дождей должны быть основаны на научных исследованиях.

Технические стандарты исследования PISA Обеспечение качества исследования

Обеспечение качества исследования PISA Процедуры сбора данных Обеспечение качества Полученные в исследовании данные Как это делается? Очень интересно! Policy Maker Как они были получены? Policy Maker Как это проверить? Policy Maker Все, кто использует данные, полученные в исследовании, должны быть уверены, что данные отражают реальную ситуацию в системе образования. Процедура обеспечения качества реализует данное требование.

Что включает система обеспечения качества исследования? План исследования – Руководства по проведению , контроль за адаптацией инструментария – NAF, QAS и др. Данные, подтверждающие обеспечение качества – доказательство того, что намеченный план был реализован таким образом, что было обеспечено качество проведения исследования. Контроль за качеством – Национальные координаторы организуют и контролируют качество большей части исследования. Мониторинг качества – Консорциум контролирует национальные центры и при необходимости требует внести коррективы.

Система обеспечения качества основана на соответствии стандартам качества Консорциум контролирует качество проведения исследования в соответствии с разработанными стандартами качества – Формирование выборки – Язык, на котором проводится тестирование – Участие в проведении апробационного исследования – Адаптация инструментария и руководств – Перевод инструментария и руководств – Проведение тестирования – Реализация национальной части исследования – Мониторинг качества – Тиражирование материалов – Проверка заданий с открытыми ответами – Анализ полученных данных

Источники данных об обеспечении качества проведения исследований – Выборка – Перевод и верификация – Проведение тестирования (MAS) – Мониторинг качества – Мониторинг работы национального центра – Проверка работ (Перепроверка работ , Международная проверка ), – Отправленные данные , – Адаптация (QAS, TAS) – Анализ проведения исследования (подготовка отчета)

В ы борка П еревод П роведение А даптация 1 PQ M N C Q M П роверка Данны е А даптация 2 О тчет. Выборка Язык тестирования Участие в апробации Адаптация Перевод Национальная часть Сохранность материалов Мониторинг качества Тиражирование Проверка работ Отправка данных С т а н д а р т ы к а ч е с т в а. Данные В большинстве случаев данные должны соответствовать стандартам. Подтверждение соответствия стандартам

Что происходит при несоответствии стандартам качества ? Решение зависит от : – Степени несоответствия стандартам – Наличия возможности исправления Чистка данных Проверка данных на соответствие качеству – Анализ данных с целью возможности их исправить – Анализ изменений, внесенных консорциумом – Рекомендации по включению в международный отчет Полная публикация Публикация данных только частичная (в некоторых таблицах) Приложениях к отчету и др.

Структура теста PISA В каждой тетради 4 кластера на 30 мин Тетрадь для коррекцион-ны х школ

3 кластера по естествознанию Структура теста 9 кластеров по чтению 3 кластера по математике 1 кластер по чтению и ½ кластера по математике и 1 / 2 кластера по естествознанию

Сбалансированный подход к структуре теста В каждой тетради не менее 1 кластера по чтению Каждый кластер появляется во всех частях теста

Дополнительная часть: Вопросы о чтении R e a d in g fo r S c h o o l S u rv e y Последняя страница тетради – вопросы о чтении (5 мин)

Два варианта теста PISA-2009 «Легкий» 13 тетрадей, 8 -13 и 21 -27 «Стандартный» тетради 1 —

Некоторые результаты апробации (о качестве дизайна теста PISA) Выполнение теста – 42% ответили на все задания – 92% имели возможность ответить на все задания (дошли до конца тетради) Электронное чтение текстов – 11% ответили на все задания – 88% имели возможность ответить на все задания Основное исследование 2006 года (OECD) – 20% ответили на все задания – 86% имели возможность ответить на все задания

Для дополнительной информации: Центр ОКО ИСМО РАО: centeroko@mail. ru www. centeroko. ru Исследование PISA: www. oecd. org