Оценка качества образования в контексте международного исследования PISA

1. Оценка качества образования в контексте международного исследования PISA

2. Общие характеристики PISA

• проводится Организацией экономического сотрудничества и развития
(ОЭСР) один раз в три года (2000, 2003, 2006, 2009, 2012, 2015, 2018)
• участвуют учащиеся 15-летнего возраста, которые обучаются в
различных типах учреждений образования;
• выборка составляет от 4 500 до 10 000 учащихся;
• в 2015 г. в исследовании приняли участие 72 страны.
• В 2018 г. — уже 79 страны.

3. Члены СНГ, принимавшие участие в PISA

2000 – Российская Федерация
2003 – Российская Федерация
2006 – Азербайджан, Кыргызстан, Российская Федерация
2009 – Азербайджан, Казахстан, Кыргызстан, Молдова, Российская
Федерация
• 2012 – Казахстан, Российская Федерация
• 2015 – Казахстан, Молдова, Российская Федерация
• 2018 – Беларусь, Украина

4. Инструментарий для проведения исследований PISA

1) тесты, на выполнение которых отводится 120 минут.
Тестовые задания предусматривают выбор ответа, краткий ответ,
развернутый ответ.
В качестве дополнительной части в исследовании PISA проводится
компьютерное тестирование учащихся с использованием
интерактивных задач по математической и читательской грамотности.
2) анкеты для учащихся и администрации учреждения образования.

5. Что оценивается в PISA?

В
Грамотность чтения
Математическая грамотность
Естественнонаучная грамотность
каждом исследовании основное внимание (2/3 времени тестирования)
уделяется одному из трех направлений.
С 2012 г. оценивается финансовая грамотность учащихся.
С 2015 г. оценивается умение совместно решать проблемы.
В 2018 году основным направлением исследования была читательская
грамотность.

6. Грамотность чтения

«Грамотность чтения – способность к пониманию
письменных текстов и рефлексии на них, к использованию их
содержания для достижения собственных целей, развития знаний
и возможностей, для активного участия в жизни общества».

7. Особенности заданий PISA для оценки читательской грамотности

При составлении заданий:
1)учитываются различные жизненные ситуации, в которых читаются письменные
тексты: чтение для личных целей (личные письма, художественная
литература, биографии, научно-популярные тексты); чтение для
общественных целей (официальные документы, информация о событиях
общественного значения), чтение для рабочих целей (тексты-инструкции),
чтение для получения образования (учебная литература);
2)используются тексты разных жанров и стилей (научно-популярные,
публицистические, художественные, биографии, личные письма, документы,
статьи из газет и журналов, инструкции, рекламные объявления, географические
и исторические карты, графики, схемы, расписания, таблицы, заявления о
приеме на работу, анкеты, билеты, квитанции, сертификаты (аттестаты,
дипломы), приглашения, повестки, диаграммы и др.);

8. Особенности заданий PISA для оценки читательской грамотности

При составлении заданий:
3) используется разный формат представления информации (сплошные и
несплошные, смешанные и составные тексты);
4) предусматриваются разные способы чтения: ознакомительный, поисковый, с
ориентацией на отбор нужной информации и т.д.;
5) объектом оценки являются умения:
•находить информацию в тексте (25% вопросов);
•интегрировать и интерпретировать сообщения текста (50% вопросов);
•размышлять о содержании и форме текстового сообщения, оценивать его (25%
вопросов);
6) используются дихотомическая и политомическая шкалы для оценки
результатов выполнения заданий.

9. Умения, проверяемые заданиями PISA (читательская грамотность)

Умения
Задания
Нахождение
информации
Найти в тексте ответ на сформулированный вопрос (необходимая единица
информации в тексте может быть представлена в явном виде или в
синонимической форме; в одной или нескольких частях текста);
Наряду с нужной информацией текст может включать «отвлекающую»
информацию.
Общая
ориентация в
содержании
текста,
понимание его
смысла
Выбрать из текста или придумать заголовок, сочинить вступление к тексту
Сформулировать тезис, выражающий общий смысл текста;
Восстановить названия осей на графике или столбиков в таблице или
диаграмме;
Объяснить назначение карты или рисунка;
Определить главную идею текста;
Установить соответствие между частью текста и сноской, данной автором,
между частью текста и сформулированной в вопросе общей идеей текста
Отделить основные идеи от второстепенных
Сформулировать идею текста по заголовку текста

10. Умения, проверяемые заданиями PISA (читательская грамотность)

Умения
Задания
Интерпретация
текста
Найти в тексте доводы в подтверждение выдвинутых тезисов;
Сделать выводы из сформулированных в тексте посылов;
Сделать заключение о намерении автора или о концепции текста;
Пояснить значение слова или эпизода, которые придают общему значению
текста особые оттенки
Рефлексия и
оценка
содержания
текста
Оценить утверждения, сделанные в тексте, исходя из своих представлений о
мире, собственных нравственных и эстетических представлений, собственного
опыта;
Высказать свое мнение о качестве приведенных в тексте доказательств;
Высказать и обосновать свою точку зрения на предмет, обсуждаемый в тексте
Рефлексия и
оценка формы
текста
Оценить соответствие текста его назначению;
На основе анализа авторского стиля определить авторские задачи или его
отношение к герою повествования;
Высказать и обосновать суждение о том, достиг ли автор той или иной цели,
использовав конкретный прием построения текста.

11. Математическая грамотность

«Математическая грамотность – способность определять и
понимать роль математики в мире, в котором он живет; высказывать
обоснованные математические суждения; распознавать в реальной
действительности проблемы, решаемые средствами математики,
формулировать их на языке этой науки и решать; интерпретировать
окончательные результаты с учетом проблемы и записывать их».

12. Особенности заданий PISA для оценки математической грамотности

При составлении заданий учитываются следующие аспекты:
•«фундаментальные математические идеи» (случайность, изменение и
рост (отношения), пространство и форма, неопределенность, зависимость и
связи, количество);
•«математическая компетентность» (математические способности:
математическое мышление, письменная и устная математическая аргументация,
постановка и решение проблемы, математическое моделирование);
•основные разделы и темы курса математики (числа, измерения, оценка,
алгебра, функции, геометрия, вероятность, статистика, элементы теории
чисел);
•ситуации, в которых используются математические знания (личная
жизнь, обучение и профессиональная деятельность, общественные события
и явления и др.).

13. Особенности заданий PISA для оценки математической грамотности

При
составлении
заданий
выделяются
3
уровня
математической
компетентности:
•первый уровень – воспроизведение математических фактов, методов, выполнение
вычислений (предлагаются традиционные учебные задачи);
•второй уровень – установление связей и интеграция материала из различных тем
курса, необходимых для решения поставленной задачи (предлагаются несложные
жизненные задачи);
•третий уровень – математические размышления, требующие обобщения и
интуиции
(разрабатываются
сложные
задания,
в
которых
требуется
«математизировать» предложенную жизненную ситуацию – выделить в ситуации
проблему,
которая
решается
средствами
математики,
и
разработать
соответствующую ей математическую модель; размышлять над решением
поставленной задачи, используя математические рассуждения и обобщения; решить
ее и интерпретировать решение с учетом особенностей рассмотренной в задании
ситуации).

14. Особенности заданий PISA для оценки математической грамотности

• Используются задания, в которых требуется дать качественный
ответ (а не точный, выраженный числом или знаком);
• Используются задания, которые требуют догадки, интуиции, а
не только традиционных (научных) методов решения задач,
стандартных (стереотипных) схем действий.

15. Естественнонаучная грамотность

«Естественнонаучная грамотность – способность использовать
естественнонаучные знания для выделения в реальных ситуациях
проблем, которые могут быть исследованы и решены с помощью
научных методов, для получения выводов, основанных на
наблюдениях и экспериментах. Эти выводы необходимы для понимания
окружающего мира и тех изменений, которые вносит в него
деятельность человека, и для принятия соответствующих решений».

16. Особенности заданий PISA для оценки естественнонаучной грамотности

Задания для оценки естественнонаучной грамотности проверяют:
•умение распознавать вопросы, идеи, проблемы, которые могут быть
исследованы научными методами;
•умение выделять информацию (объекты, факты, экспериментальные данные и
др.), необходимую для доказательства или подтверждения выводов при
проведении научного исследования;
•умение формулировать вывод (заключение) или давать оценку уже сделанного
вывода с учетом предложенной ситуации;
•умение аргументировать свои выводы;
•знание и понимание естественнонаучных понятий, актуальных для
повседневной жизни отдельного человека и общества.

17. Естественнонаучная грамотность: конструирование заданий для оценки умения распознавать вопросы, идеи, проблемы, которые могут

быть исследованы научными методами
Что дано в задании
Что нужно определить
Описание исследования или процедуры
сбора и сравнения данных
Выбрать из (предложенных) или
сформулировать гипотезу или идею,
которая проверялась (или могла
проверяться)
Описание ситуации, в которой можно
получить ответы на поставленные
вопросы (проблемы), используя
научное исследование.
Сформулировать вопрос (проблему), на
который можно получить ответ,
используя
научное исследование.
Несколько вопросов (гипотез),
вытекающих из представленной
ситуации или соответствующих данной
ситуации.
Выбрать вопрос или вопросы, на
которые
можно получить ответ, используя
научное

18. Естественнонаучная грамотность: конструирование заданий для оценки умения выделять информацию, необходимую для нахождения

доказательств или подтверждения выводов при проведении научного
исследования
Что дано в задании
Что нужно определить
Идея или гипотеза, которая
должна
быть проверена
Выбрать или представить информацию о
том,
что нужно для проверки данной идеи, гипотезы
или прогноза, основанного на ней.
Информация может включать следующее:
а) что должно сравниваться;
б) какие переменные следует менять, а
какие
оставить постоянными (контролируемыми);
в) какая дополнительная информация
необходима;
г) что нужно сделать, чтобы собрать
необходимые сведения.

19. Естественнонаучная грамотность: конструирование заданий для оценки умения делать вывод (заключение) или оценивать уже сделанный

вывод с
учетом предложенной ситуации
Что дано в задании
Что нужно определить
Данные (результаты эксперимента
или наблюдения), на основе
которых можно сформулировать
вывод
Сделать вывод, соответствующий имеющимся
данным
Данные (результаты эксперимента
или наблюдения) и выводы,
которые могли быть
сформулированы на их основе
Выбрать один из выводов, который
соответствует имеющимся данным, и дать
обоснование или объяснение
Данные (результаты эксперимента
или наблюдения) и вывод на их
основе
Привести причину или причины, объясняющие,
почему имеющиеся данные подтверждают или
опровергают вывод или сделать заключение
о
том, в какой степени можно доверять данному

20. Естественнонаучная грамотность: конструирование заданий для оценки умения аргументированно, четко и ясно формулировать выводы,

доказательства и др.
Что дано в задании
Что нужно определить
1. Ситуация, в которой могут быть
сделаны (различные) выводы или
заключения или которая требует
интегрированного анализа информации
для подтверждения вывода или
предложенных рекомендаций.
2. Описание группы людей, конкретной
аудитории, для которой предназначены
эти выводы или рекомендации.
Привести аргумент, который ясно
выражен и предназначен для данной
аудитории, и который подтверждается
соответствующими фактами/данными,
представленными в задании.

21. Естественнонаучная грамотность: конструирование заданий для оценки умения демонстрировать знание и понимание естественнонаучных

понятий
Что дано в задании
Что нужно определить
Ситуация, в которой требуется
прогноз,
объяснение или дополнительная
информация
Дать объяснение, прогноз или
дополнительную информацию, основанные
на понимании
естественнонаучных понятий или
дополнительной информации, не имеющейся
в
задании.

22. Особенности заданий PISA для оценки естественнонаучной грамотности

Темы, на материале которых составляются задания для оценки естественнонаучной
грамотности:
•структура и свойства вещества (теплопроводность, электрическая проводимость);
•атмосферные изменения (излучение, передача давления);
•химические и физические изменения (состояния вещества, скорость реакции, распад);
•преобразования энергии (сохранение энергии, рассеяние энергии, фотосинтез);
•силы и движение (уравновешенные/неуравновешенные силы, скорость, ускорение, инерция);
•строение и функция (клетка, скелет, адаптация);
•биология человека (здоровье, гигиена, питание);
•физиологические изменения (гормоны, нейроны);
•биологическое разнообразие (виды, гены, эволюция);
•генетический контроль (доминантность, наследственность);
•экосистемы (пищевая цепь, устойчивость);
•Земля и ее место во Вселенной (солнечная система, суточные и сезонные изменения);
•геологические изменения (континентальные течения, выветривание).

23. Особенности заданий PISA для оценки естественнонаучной грамотности

1. Учащимся предлагаются реальные ситуации, связанные с актуальными
проблемами, которые должен понимать и решать «научно грамотный
человек» сегодняшнего и завтрашнего дня.
Это ситуации, возникающие в:
•личной жизни человека (использование продуктов при соблюдении
некоторой диеты);
•жизни коллектива или общества (расположение электростанции вблизи
города);
•жизнедеятельности мира (осмысление последствий глобального
потепления).
2. К каждой ситуации предлагается группа вопросов (от 2 до 8). Каждый
вопрос проверяет овладение отдельным знанием или умением.

24. Оценка умений совместно решать проблемы

Для оценки умений совместно решать проблемы предлагаются интерактивные
задания, требующие следующих компетенций:
1) компетенции совместного взаимодействия:
•установление и поддержание общего понимания проблемы
•принятие соответствующего действия для решения проблемы
•организация деятельности группы
2) компетенции решения проблем:
•изучение проблемы
•представление и формулирование проблемы
•планирование и выполнение действий
•мониторинг и рефлексия