какие способы оценки глобальной компетентности используются в исследовании pisa
PISA — тест на компетентность
Международные тесты
Международная программа по оценке качества обучения PISA (Programme for International Student Assessment) проводится раз в 3 года, начиная с 2000 г., и проходит под патронажем Организации экономического сотрудничества и развития. Цель этого масштабного тестирования — провести оценку грамотности 15-летних школьников в разных видах учебной деятельности: естественнонаучной, математической, компьютерной и читательской.
«PISA позволяет понять, какая страна будет более конкурентоспособной в будущем за счёт потенциала подрастающего поколения»
Помимо PISA существуют и другие международные мониторинговые исследования, имеющие более узкую направленность. Тестирование TIMSS (Trends in Mathematics and Science Study), например, нацелено на проверку качества математического и естественнонаучного образования учеников четвёртых и восьмых классов. Проводится оно при поддержке Международной ассоциации по оценке учебных достижений IEA. Помимо мониторинга качества знаний TIMSS призвано ещё и выявить различия в национальных системах образования разных стран.
А тестирование PIRLS (Progress in International Reading Literacy Study) Направлено на то, чтобы оценить качество чтения и понимания текста у ребят начальной школы. Так же, как и TIMSS, оно показывает различия в национальных системах образования. Исследование PIRLS проводится раз в пять лет, и проходило уже четыре раза: в 2001, 2006, 2011 и 2016 годах.
PISA и функциональная грамотность
В исследование PISA включены задания разного типа. Почти половину из них составляют вопросы, предполагающие свободные ответы. А есть вопросы с определённым, нерасширяемым списком ответов. Это значит, что ученик должен выдать самостоятельный ответ, который будет ограничен конкретными словами или числами. Почти треть всех заданий в тесте составляют вопросы с готовыми вариантами ответов.
Главное отличие программы PISA от ЕГЭ, ОГЭ и других российских тестов заключается в том, что она, в первую очередь, оценивает возможность школьников руководствоваться здравым смыслом и логикой при выполнении нестандартных задач. В этом отношении можно сказать, что PISA следует современным образовательным трендам, ведь способность учеников применять школьные знания в жизни — это важнейший аспект функциональной грамотности и навыков XXI века.
Задания PISA проверяют не заученный материал по биологии, географии, физике и обществознанию, а владение учеников компетенциями в различных контекстах этих предметов и межпредметного взаимодействия: здоровье человека, природные ресурсы, окружающая среда, экология, открытия в области науки и технологии. Существуют интерактивные задания, направленные на наблюдение за каким-то объектом, в которых нужно сделать вывод о том, как функционирует этот объект. Есть задания с аналитическим решением, в которых стоит задача предусмотреть дальнейшее развитие событий или действие каких-то предметов. В 2015 году появились в PISA и задания для коллективного выполнения — коллаборативные. В таких задачах предусмотрено совместное решение проблем. В качестве партнёров выступают виртуальные помощники, с которыми можно обсуждать, анализировать и решать заданную проблему: что-то организовать, создать, придумать, переделать или наладить. Такие задания показывают, как ученик взаимодействует с партнёром, как распределяет обязанности, и умеет ли договариваться.
Примеры заданий PISA разных лет:
Позиции России и мнения экспертов
Показатели России в международном рейтинге стран, ученики которых проходили тестирование PISA, из года в год остаются невысокими. Но надо признать, что в последнее время нашей стране всё-таки удалось их немного улучшить. Российское Министерство образования решило сделать приоритетными другие направления учебной деятельности и объявило, что коммуникация, совместная работа и умение выстраивать свою деятельность станут ключевыми навыками, развитию которых должно способствовать обучение в школе.
Ну а самыми хорошими результатами в международном рейтинге могут похвастаться страны Азии: Китай, Тайвань, Сингапур, Южная Корея, Япония. После них по уже сложившейся традиции расположились Финляндия, Лихтенштейн, Швейцария и Нидерланды.
Профессор департамента психологии факультета социальных наук НИУ ВШЭ Александр Поддьяков считает, что тесты PISA имеют и некоторые недочёты: многие интерактивные творческие задания, по его мнению, должны иметь более гибкую систему ответов. В нескольких заданиях подобного типа эксперт заметил ошибки: разработчики попросту не смогли предвидеть другие (тоже правильные!) варианты решения тестов.
А вот американский профессор педагогики Университета Аризоны Дэвид Берлинер заявляет, что результаты теста PISA связаны вовсе не с уровнем образования, а с качеством жизни в стране. В США, кстати, тестирование PISA ученики проходят не блестяще: в 2015 году страна заняла 28-е место по математике, 24-е место по чтению и 25-е — по естественным наукам. Позиции России тогда были такими: 23-е, 26-е и 33-е места по тем же дисциплинам.
Галина Ковалёва, координатор PISA в России, отмечает: низкие результаты теста в нашей стране связаны с тем, что учителя превосходно обучают предмету, однако не замечают, как знания по этому предмету усваивают отдельные ученики в классе. Кроме того, Ковалёва говорит, что российская система образования заметно отличается, например, от финской (а Финляндия почти всегда лидирует в PISA). У нас существуют целые школы для способных детей, но при этом отстающие ученики оказываются совершенно «заброшенными». В Финляндии же нет «лицейских» классов и школ «с уклоном»: одарённым школьникам разрешено заниматься самостоятельно, а для отстающих разрабатываются специальные индивидуальные программы обучения.
Читайте другие материалы по теме:
К PISA можно относиться по-разному. Конечно, в этой системе есть свои нюансы, просчёты и даже ошибки. Как и большинство систем оценки знаний, тестирование PISA несовершенно, и слепо гнаться за топовыми позициями в международном рейтинге было бы не самым умным решением для нашей страны. Но игнорировать итоги тестирования и вовсе глупо, ведь изначально исследования PISA направлены не просто на оценку достижений учеников, а на выявление слабых мест в системе школьного образования страны в целом. Результаты PISA — это результаты владения новыми важными компетенциями, ставшими не просто трендами международного образования, а ключевыми навыками современного человека, от которых зависит успех, реализация творческого потенциала и полноценное взаимодействие с обществом.
PISA — тест на компетентность
Международные тесты
Международная программа по оценке качества обучения PISA (Programme for International Student Assessment) проводится раз в 3 года, начиная с 2000 г., и проходит под патронажем Организации экономического сотрудничества и развития. Цель этого масштабного тестирования — провести оценку грамотности 15-летних школьников в разных видах учебной деятельности: естественнонаучной, математической, компьютерной и читательской.
«PISA позволяет понять, какая страна будет более конкурентоспособной в будущем за счёт потенциала подрастающего поколения»
Помимо PISA существуют и другие международные мониторинговые исследования, имеющие более узкую направленность. Тестирование TIMSS (Trends in Mathematics and Science Study), например, нацелено на проверку качества математического и естественнонаучного образования учеников четвёртых и восьмых классов. Проводится оно при поддержке Международной ассоциации по оценке учебных достижений IEA. Помимо мониторинга качества знаний TIMSS призвано ещё и выявить различия в национальных системах образования разных стран.
А тестирование PIRLS (Progress in International Reading Literacy Study) Направлено на то, чтобы оценить качество чтения и понимания текста у ребят начальной школы. Так же, как и TIMSS, оно показывает различия в национальных системах образования. Исследование PIRLS проводится раз в пять лет, и проходило уже четыре раза: в 2001, 2006, 2011 и 2016 годах.
PISA и функциональная грамотность
В исследование PISA включены задания разного типа. Почти половину из них составляют вопросы, предполагающие свободные ответы. А есть вопросы с определённым, нерасширяемым списком ответов. Это значит, что ученик должен выдать самостоятельный ответ, который будет ограничен конкретными словами или числами. Почти треть всех заданий в тесте составляют вопросы с готовыми вариантами ответов.
Главное отличие программы PISA от ЕГЭ, ОГЭ и других российских тестов заключается в том, что она, в первую очередь, оценивает возможность школьников руководствоваться здравым смыслом и логикой при выполнении нестандартных задач. В этом отношении можно сказать, что PISA следует современным образовательным трендам, ведь способность учеников применять школьные знания в жизни — это важнейший аспект функциональной грамотности и навыков XXI века.
Задания PISA проверяют не заученный материал по биологии, географии, физике и обществознанию, а владение учеников компетенциями в различных контекстах этих предметов и межпредметного взаимодействия: здоровье человека, природные ресурсы, окружающая среда, экология, открытия в области науки и технологии. Существуют интерактивные задания, направленные на наблюдение за каким-то объектом, в которых нужно сделать вывод о том, как функционирует этот объект. Есть задания с аналитическим решением, в которых стоит задача предусмотреть дальнейшее развитие событий или действие каких-то предметов. В 2015 году появились в PISA и задания для коллективного выполнения — коллаборативные. В таких задачах предусмотрено совместное решение проблем. В качестве партнёров выступают виртуальные помощники, с которыми можно обсуждать, анализировать и решать заданную проблему: что-то организовать, создать, придумать, переделать или наладить. Такие задания показывают, как ученик взаимодействует с партнёром, как распределяет обязанности, и умеет ли договариваться.
Примеры заданий PISA разных лет:
Позиции России и мнения экспертов
Показатели России в международном рейтинге стран, ученики которых проходили тестирование PISA, из года в год остаются невысокими. Но надо признать, что в последнее время нашей стране всё-таки удалось их немного улучшить. Российское Министерство образования решило сделать приоритетными другие направления учебной деятельности и объявило, что коммуникация, совместная работа и умение выстраивать свою деятельность станут ключевыми навыками, развитию которых должно способствовать обучение в школе.
Ну а самыми хорошими результатами в международном рейтинге могут похвастаться страны Азии: Китай, Тайвань, Сингапур, Южная Корея, Япония. После них по уже сложившейся традиции расположились Финляндия, Лихтенштейн, Швейцария и Нидерланды.
Профессор департамента психологии факультета социальных наук НИУ ВШЭ Александр Поддьяков считает, что тесты PISA имеют и некоторые недочёты: многие интерактивные творческие задания, по его мнению, должны иметь более гибкую систему ответов. В нескольких заданиях подобного типа эксперт заметил ошибки: разработчики попросту не смогли предвидеть другие (тоже правильные!) варианты решения тестов.
А вот американский профессор педагогики Университета Аризоны Дэвид Берлинер заявляет, что результаты теста PISA связаны вовсе не с уровнем образования, а с качеством жизни в стране. В США, кстати, тестирование PISA ученики проходят не блестяще: в 2015 году страна заняла 28-е место по математике, 24-е место по чтению и 25-е — по естественным наукам. Позиции России тогда были такими: 23-е, 26-е и 33-е места по тем же дисциплинам.
Галина Ковалёва, координатор PISA в России, отмечает: низкие результаты теста в нашей стране связаны с тем, что учителя превосходно обучают предмету, однако не замечают, как знания по этому предмету усваивают отдельные ученики в классе. Кроме того, Ковалёва говорит, что российская система образования заметно отличается, например, от финской (а Финляндия почти всегда лидирует в PISA). У нас существуют целые школы для способных детей, но при этом отстающие ученики оказываются совершенно «заброшенными». В Финляндии же нет «лицейских» классов и школ «с уклоном»: одарённым школьникам разрешено заниматься самостоятельно, а для отстающих разрабатываются специальные индивидуальные программы обучения.
Читайте другие материалы по теме:
К PISA можно относиться по-разному. Конечно, в этой системе есть свои нюансы, просчёты и даже ошибки. Как и большинство систем оценки знаний, тестирование PISA несовершенно, и слепо гнаться за топовыми позициями в международном рейтинге было бы не самым умным решением для нашей страны. Но игнорировать итоги тестирования и вовсе глупо, ведь изначально исследования PISA направлены не просто на оценку достижений учеников, а на выявление слабых мест в системе школьного образования страны в целом. Результаты PISA — это результаты владения новыми важными компетенциями, ставшими не просто трендами международного образования, а ключевыми навыками современного человека, от которых зависит успех, реализация творческого потенциала и полноценное взаимодействие с обществом.
PISA – Международная программа по оценке образовательных достижений обучающихся
Ищем педагогов в команду «Инфоурок»
I. PISA – Международная программа по оценке образовательных достижений обучающихся
Исследование PISA вызвало широкий общественный резонанс в мире, который свидетельствует о том, что намеченное в нем направление оценки качества образования оказалось адекватным не только назревшим проблемам образования, но и современным попыткам их осмысления. В последние десятилетия активизирован интерес к международным проектам по оценке качества образования и расширение масштабов практико-ориентированных исследований, что вызвано возрастающим спросом на информацию о деятельности образовательных систем разных стран. Знания о состоянии и качественном уровне образования стали необходимыми для создания единого мирового образовательного пространства. Значительное расширение политического, экономического и социального сотрудничества между странами изменило вектор развития национальных образовательных систем и предъявило к ним ряд новых требований. Очевидно, что эти требования не могут быть реализованы без проведения сравнительного анализа качества образовательных достижений обучающихся.
Международная программа по оценке образовательных достижений обучающихся PISA ставит своей целью определить образовательные достижения 15-летних обучающихся в области чтения, математики и естествознания всех организаций образования. Отличительной характеристикой настоящего исследования является его направленность на практические умения обучающихся применять теоретические знания и навыки в жизненных ситуациях, на оценку компетентности в решении проблем, несвязанных непосредственно с конкретными учебными предметами или образовательными областями. Инструментарий исследования нацелен на установление степени сформированности общеучебных умений в решении проблем, с которыми обучающиеся могут встретиться в жизни, для того, чтобы эффективно функционировать в современном обществе.
Объектом исследования PISA являются образовательные достижения обучающихся 15-летнего возраста. Выбор данной возрастной категории объясняется тем, что во многих зарубежных странах образовательные программы имеют общую направленность, и освоение их к данному возрастному периоду завершается. В этой связи, представляется возможным на данном этапе определение уровня знаний и умений, полезных обучающимся в будущем, оценка способностей обучающихся к самостоятельному приобретению знаний, необходимых для успешной адаптации в современном мире.
Исследование осуществляется Консорциумом, в состав которого входят ведущие международные научные организации при участии национальных центров и организаций ОЭСР. В частности:
— Нидерландский Национальный институт измерений в области образования (Netherlands National Institute for Educational Measurement, CITO);
— Служба педагогического тестирования США (Educational Testing Service, ETS);
— Японский Национальный институт исследований в области образования (National Institute for Educational Research, NIER);
— Американская организация ВЕСТАТ (WESTAT), выполняющая различные исследования по сбору статистической информации.
Работа Консорциума координируется Австралийским Советом педагогических исследований (The Australian Council for Educational Research, ACER).
Исследование проводится в строгом соответствии с едиными правилами, разработанными международным координационным центром (Центр) для стандартизации проведения исследования во всех странах-участницах. Каждый этап исследования (формирование выборки, перевод и адаптация инструментария, процедура тестирования и анкетирования, проверка и обработка данных) контролируется Центром.
Исследование PISA начато в 2000 году и проводится трехгодичными циклами. Цикличность исследования представляет странам-участницам возможность отслеживать динамику результатов образовательных достижений обучающихся, изменения, происходящие в образовательной системе; формулировать основные направления реформирования общего среднего образования и выявляет препятствия, мешающие их осуществлению; проводить аналитическую работу в международном контексте, способствуя каждой стране-участнице в определении стратегических целей системы образования. В 2009 году завершился четвертый цикл исследования.
В Казахстане координационную работу по проведению исследования PISA выполняет Национальный центр оценки качества образования Министерства образования и науки Республики Казахстан (Национальный центр), совместно с Управлениями и организациями образования.
1.1. Цели и задачи исследования PISA
Цель исследования PISA – это установление и оценка степени владения обучающимися, получившими общее среднее образование, знаниями и умениями, необходимыми для полноценного функционирования в обществе.
Исследование направлено на проверку понимания сути изучаемых объектов, причинно-следственных связей; на степень сформированности умения учиться: навыков решения творческих задач и навыков поиска, анализа и интерпретации информации. Обучающиеся вовлекаются в проблемы, с которыми они встречаются в реальной жизни, выполняют задания, требующие от них комплексного мышления, планирования и оценки, решают проблемы, аргументируют выбор их решения и т.д.
В исследовании PISA оценка образовательных достижений обучающихся проводится по следующим трем основным направлениям: «грамотность чтения», «математическая грамотность», «естественнонаучная грамотность», а также по дополнительным направлениям «финансовая грамотность» и «решение проблем», в рамках которых особое внимание уделяется оценке овладения обучающимися общеучебными и интеллектуальными умениями.
В каждом цикле исследования основное внимание (две трети объема времени тестирования) уделяется одному из трех основных направлений. В 2000 году основным направлением исследования определена «грамотность чтения», в 2003 году – «математическая грамотность», в 2006 году – «естественнонаучная грамотность». Определяющей областью оценки образовательных достижений 2009 года стала «грамотность чтения».
Смена приоритетной области оценивания в каждом цикле исследования PISA представляет возможность получения полной информации по основному направлению и сравнительного анализа достижений в данной области.
Оценка образовательных достижений изучается в контексте различных факторов, влияющих на степень их достижения: социально-экономические условия, преподавание и среда обучения, различные аспекты деятельности организации образования, содержание образования, формы и методы обучения, материально-техническая база, кадровый состав и т.д., которые в совокупности обеспечивают формирование и развитие компетентности. Как уже было отмечено, подростки в возрасте 15 лет заканчивают ступень основного образования и готовятся к взрослой жизни. В связи с этим, исследование нацелено на выявление знаний, умений и навыков у 15-летних обучающихся, необходимых им в самостоятельной жизни.
На сегодняшний день в Казахстане разработана своя внутренняя система мониторинга оценки качества образования – промежуточный государственный контроль (ПГК), который оценивает учебные достижения обучающихся 9 классов согласно образовательным программам.
Данный мониторинг ведется в целях проверки знаний, полученных в рамках образовательных программ соответствующего уровня, но не умения применять полученные знания в жизни. Международное исследование PISA отличается от ПГК изучением отношений, интересов, мотиваций и учебных стратегий, оцениванием функциональной грамотности обучающихся этого возраста.
ОСНОВНЫЕ РЕЗУЛЬТАТЫ ИССЛЕДОВАНИЯ PISA-2009
Результаты исследования по грамотности чтения
Результаты исследования по математической грамотности
Результаты исследования по естественнонаучной грамотности
Результаты исследования по гендерному принципу
Результаты по математической грамотности
В исследовании PISA особое внимание уделяется содержанию тестовых заданий по математике, которые определяют индивидуальные умственные способности. Это включает в себя математическое мышление и использование математических концепций, процедур, фактов и заданий, чтобы описать, объяснить и прогнозировать явление. Математические задания в тестировании PISA также помогают обучающимся признать, какую роль в их жизни играет математика. В тестировании PISA математические задания демонстрируют обучающимся возможность анализировать, размышлять, решать и истолковывать математические проблемы, которые содержат квантитативные, пространственные, вероятные и другие математические концепции. Таким образом, в PISA приоритетным является определение способности 15-летних обучающихся использовать полученные знания и умения для решения широкого круга проблем, возникающих в повседневной жизни, и выявление тенденции развития этой способности.
Содержание проверки математической подготовки 15-летних обучающихся основано на понятии математической грамотности, которое определяется, как «способность человека определять и понимать роль математики в мире, в котором он живет, высказывать хорошо обоснованные математические суждения и использовать математику так, чтобы удовлетворять в настоящем и будущем потребности, присущие созидательному, заинтересованному и мыслящему гражданину».
Под математической грамотностью понимается способность обучающихся:
— распознавать проблемы, которые возникают в окружающей действительности и могут быть решены посредством математики;
— формулировать эти проблемы на языке математики;
— решать эти проблемы, используя математические факты и методы;
— анализировать использованные методы решения;
— интерпретировать полученные результаты с учетом поставленной проблемы;
— формулировать и записывать результаты решения.
В исследовании PISA обучающимся предлагаются не типичные учебные математические задачи, характерные для казахстанских мониторинговых исследований, близкие к реальным проблемным ситуациям, связанные с разнообразными аспектами окружающей жизни и требующие для своего решения большей и меньшей математизации, а предлагается информация о жизни школы, общества, личной жизни обучающегося, профессиональной деятельности, спорте и др.
В исследовании PISA-2009 математика не являлась основным направлением исследования, в связи, с чем было выделено меньше времени для тестирования.
За это время обучающимся нужно было ответить на тестовые задания, составленные по «приоритетным» блокам математики. В соответствии с концепцией исследования каждое задание соответствует одной из четырех содержательных областей, которые по согласованному решению стран-участниц, были выбраны в качестве базы для сравнения математической подготовки обучающихся в разных странах:
— пространство и форма – 25%;
— изменения и отношения – 25%;
— неопределенность – 19% от общего числа заданий .
Состояние математической грамотности обучающихся, кроме владения материалом выделенных содержательных областей, характеризуются уровнем развития «математической компетентности». Математическая компетентность обучающихся определяется в исследовании как «сочетание математических знаний, умений, опыта и способностей человека», обеспечивающих успешное решение различных проблем, требующих использования математики. В исследовании выделяются три уровня математической компетентности: уровень воспроизведения, уровень установления связей, уровень рассуждений.
Больше половины тестовых заданий направлены на проверку умения установить связи (53%) между разными формами представления информации в ситуации, описанной в задаче. На проверку знаний применения известных фактов, стандартных приемов, умения работать знакомыми выражениями и формулами, было выделено 25% заданий, а также на проверку умения рассуждать, объяснять и обобщать выводы – 22% заданий.
Содержание заданий, предлагаемых в тестах, связано с традиционными разделами или темами, составляющими основу программ обучения в большинстве стран мира, в том числе и в
В проверке используются вопросы различных типов: со свободно-конструируемым ответом (22,2%), с кратким ответом (22,2%), комплексные с выбором ответа (19,4%), с закрытым конструируемым ответом (8,3%), с выбором ответа (27,9%) (таблица 2.5.).
В PISA-2009 были использованы шесть уровней знаний математики, такие же, как и были установлены в предыдущих циклах исследования, когда математика была основным направлением.
Таблица 3.5. Распределение заданий по разделам математики
в процентном соотношении Разделы математики