Разработка средств измерения и оценки образовательных результатов занимает видное место в актуальной педагогической тематике. Однако быстрое и во многом успешное прогрессирование данного направления, показателем которого могут служить набирающие глубину и размах международные мониторинговые исследования, не должно заслонять тот факт, что указанная проблема на сегодня решается, во-первых, преимущественно на эмпирических основаниях, а во-вторых, с заметным уклоном в количественную сторону вопроса.
Такой подход имеет несомненные плюсы и диктуется самой практикой. Особенность современного этапа в деятельности образовательных систем состоит в необходимости «поспеть» за стремительными сдвигами в общественной жизни. В этой ситуации бега наперегонки со временем новаторский порыв в освоении горизонтов не может дожидаться результатов углубленных психолого-педагогических исследований. Свою несомненную продуктивность здесь демонстрирует оперативно действующая эмпирическая стратегия, опирающаяся на широкую экспертизу и математический аппарат статистики. Однако осваивая новые реалии и уходя вперед, практика постепенно отрывается от теории, и с какого-то момента ее дальнейшее продвижение становится все менее продуктивным, приводя к необходимости обновления системы содержательных качественных ориентиров.
Так, новый педагогический объект который с завидным чутьем был выявлен практиками и задал вектор модернизации образовательных систем, на данный момент явно нуждается в более тщательном осмыслении. Слово «компетенция», взятое напрокат из обиходного словаря и безусловно сыгравшее важную роль на современном этапе развития образования, должно быть преобразовано в научное понятие, т.е. занять место в системной психолого-педагогической картине, чтобы выступить основой дальнейших шагов в определении современных образовательных целей и соответствующей системы педагогической диагностики.
Попыткой продвинуться в этом направлении и стала наша работа в области оценки школьных достижений. Был очерчен теоретический подход к проблеме, намечен объект тестирования (учебно-предметные компетенции), определен его предмет (мера присвоения культурных средств и соответствующих им способов действия) и разработаны пробные образцы тестовых заданий, в которых количественный аспект показателей не подминал качественный. В ходе работы над этими образцами были сформулированы принципы построения тестовых материалов и уточнены критерии оценки их качества.
Созданный в рамках проекта тестовый комплект носит экспериментальный характер и пока не полностью отвечает требованиям, предъявляемым к средствам измерения школьной успешности. В перспективе планируется несколько линий его доработки, связанных с дальнейшим повышением надежности и технологичности инструмента, а также проведение более тщательной апробации и всесторонней экспертизы.
Вместе с тем можно констатировать, что поставленная нами задача создания инструментария содержательно-нормативной педагогической диагностики находится на пути к решению. При этом мы полагаем, что данная разработка удерживает существенный аспект компетентностного подхода, который воплощают прогрессивные тестовые инструменты международного употребления.
Апробация показала, что разработанный трехуровневый измерительный инструмент вносит в картину результатов тестирования объемность, дающую важную фактическую информацию для учителя и администратора школы. Так, профили успешности, вскрывающие внутреннюю, скрытую динамику освоения детьми учебного материала, можно трактовать как одну из возможных конкретизаций широко употребляемого понятия «индивидуальной образовательной траектории». Как бы то ни было, но именно в «профильном» развороте, где персональные достижения учащихся обнаружили качественное разнообразие, акт присвоения культурного содержания выступил в своей индивидуализированной форме.
Предлагаемая в работе система тестирования обладает достаточной гибкостью и потенциально предназначается как для итоговой констатации результатов образовательного процесса, так и для мониторинга прогресса учащихся на протяжении учебы в начальной школе. При этом результаты тестирования можно будет использовать как для оценки индивидуальной успешности учащихся, так и для определения групповых итогов обучения. В свою очередь, указанные возможности, позволяющие объективным образом и в существенных определениях фиксировать и рефлектировать педагогический опыт, представляют главное условие совершенствования образовательного процесса, т.е. его превращение в развивающееся образование.
Важно отметить, что описанный подход к измерению школьной успешности оставляет возможности свертывания объемной картины результатов тестирования в точку, которой может быть приписано количественное значение. На данный момент мы не ставили перед собой задачу подбора или создания математического аппарата, позволяющего интегрировать результаты тестирования в балльной оценке: нас прежде всего интересовал вопрос отнесения этих результатов к нормативному качественному критерию (культурной норме). Однако интегральный взгляд на школьную успешность также важен, и при первой возможности мы обратимся к поиску соответствующего метода обработки данных. Одномерная характеристика, отнесенная к статистической норме, может оказаться удобной для решения некоторых управленческих задач и, возможно, окажется полезной в контексте аттестации школьных успехов. Кроме того, интегрирование получаемых результатов открыло бы перспективу их сопоставления с данными международных исследований, проводимых на той же выборке, а в итоге - возможность прогнозировать результаты международных срезов на основе использования собственного инструментария.
Проблема применимости средств тестирования имеет еще один важный ракурс, как правило игнорируемый тестологами. А именно, применение тестового инструмента характеризуется еще тем, в каком отношении к нему находятся те, кто прямо или косвенно оказываются объектом измерения и оценки. Здесь следует прежде всего назвать учащихся, которые могут понимать, а могут не понимать, с каким инструментом они имеют дело и как это соотносится с акцентами их учебной практики. То же можно сказать об учителе и администраторе школы, которые могут представлять, а могут и не представлять, как устроен тест и чего им ожидать от очередного обследования.
Напомним, что в обследованиях TIMSS, PIRLS и PISA ситуация для учителей была крайне неопределенной. Даже теперь, когда участие России в этих проектах насчитывает несколько лет, результаты очередного обследования ожидаются так, как ждут итогов розыгрыша лотереи. И в свете этого опыта отечественная разработка, основанная на заявленной модели образовательного процесса, обнаруживает определенные преимущества перед международными образцами. Так, учителя воспринимают ее как понятный инструмент организации образовательного процесса и, примерно представляя будущие результаты, не опасаются его, более того - заинтересованы в тестировании, поскольку могут осмысленно воспользоваться полученными данными.
Что касается школьников, то весьма обнадеживающим представляется любопытный факт, касающийся реакции детей на уровневое представление учебного материала. Так, в одном из начальных классов учитель явным для детей образом ввел различение задач в соответствии с трехуровневой схемой и давал на дом задачи с обозначением их уровня, т.е. объективной трудности. Ответом на это было неожиданное для педагога резкое усиление у детей мотивации к решению задач и к занятию математикой вообще. Этот факт лишний раз свидетельствует о том, что любые моменты, обеспечивающие ориентацию ребенка в существенных условиях учебного процесса, выступают опорой для проявлений его субъектности и как следствие актуализируют дотоле скрытые источники мотивации к учению.
Подводя итог, следует еще раз подчеркнуть, что на данный момент разработанная нами измерительная методика не является диагностической, а всего лишь несет в себе потенцию стать таковой. Так, ключевой вопрос - об определении принципов психолого-педагогической интерпретации получаемых профилей – остается пока практически не решенным. Очевидно, что ответ на него потребует обращения к проблеме становления компетенций в возрастном аспекте и проведения соответствующих психолого-педагогических исследований. Выступая средством объективной фиксации результатов исследовательской и педагогической деятельности, насыщаясь опытом этой деятельности, инструмент и получит реальную возможность превратиться в средство содержательно-нормативной диагностики.
Литература
Ахутин А.В. История принципов физического эксперимента. М., 1976
Бахтин М.М. Эстетика словесного творчества. М., 1979
Беспалько В.П. Образование и обучение с участием компьютеров (педагогика
третьего тысячелетия). Москва–Воронеж, 2002
Болотов В.А., Сериков В.В. Компетентностная модель: от идеи к образовательной
программе // Педагогика. 2003. № 10
Бугрименко Е.А., Микулина Г.Г., Савельева О.В., Цукерман Г.А. Руководство
по оценке качества математических и лингвистических знаний школьников. М., 1989
Валлон А. Психическое развитие ребенка. М., 1967
Венгер А.Л. и др. Программа «Развитие» (Основные положения). М., 1994
Выготский Л.С. Собр. соч.: В 6 т. М., 1982–1984
Гальперин П.Я. К исследованию интеллектуального развития ребенка // Вопросы психологии. 1969, № 1
Гальперин П.Я. Психология как объективная наука. М., 1998
Гузеев В.В. Планирование результатов образования и образовательная технология. М., 2001
Гуружапов В.А. К вопросу о предметной диагностике теоретического мышления детей в развивающем обучении (система Д.Б.Эльконина – В.В.Давыдова) // Психологическая наука и образование. 1997. №4
Давыдов В.В. Теория развивающего обучения. М., 1996
Давыдов В.В., Андронов В.П. Психологические условия происхождения идеальных действий //Вопросы психологии, 1979, № 5
Дахин А.Н. Педагогический мониторинг: концепция и применение // Школьные технологии. 1997. № 3
Дидактика средней школы. М., 1982
Зеер Э.Ф. Психологодидактические конструкты качества профессионального образования // Образование и наука. 2002. № 2(14)
Зимняя И.А. Ключевые компетенции — новая парадигма результата образования // Высшее образование сегодня. 2003. № 5
Знаменская О.В. и др. Мониторинг индивидуального прогресса учащихся — новый подход к диагностике достижений // Как узнать, что происходит в образовании. М. 2006
Исаев Е.И. Психологическая характеристика способов планирования у младших школьников // Вопросы психологии, 1983, № 2
Исследования IAEPII. International Assessment of Educational Progress. 1991 <centeroko.ru/iaep/iaep.htm>.
Кальней В.А., Шишов С.Е. Мониторинг качества образования в школе. Шишов С.Е. // Стандарты и мониторинг в образовании. 1999. № 4
Каспржак А.Г. и др. Новые требования к содержанию и методике обучения в российской школе в контексте результатов международного исследования PISA2000. М.: Университетская книга, 2005
Каспржак А.Г. Российская школа: от PISA2000 к PISA2003 / Под ред.
К.Н. Поливановой. М., 2006
Качество знаний учащихся и пути его совершенствования / Под ред. М.Н. Скаткина, В.В.Краевского. М.: Педагогика, 1978
Ковалева Г.С. Основные тенденции изменения подходов к оценке результатов обучения в странах мира // На пути к 12летней школе. М., 2000
Краснянская К.А., Денищева Л.О. Международное исследование по оценке качества математической подготовки (TIMSS) // Школьные технологии. 1997. № 3–4
Ковалева Г.С. и др. Изучение знаний и умений учащихся в рамках Международной
программы PISA. Общиеподходы // ИОСО РАО, 1999
Ковалева Г.С. и др. Основные результаты международного исследования образовательных достижений учащихся PISA2000 (краткий отчет). М., 2002а
Ковалева Г.С. и др. Оценки знаний и умений. Международная программа PISA. Педагогическая диагностика. 2002б. № 1
Кудина Г.Н., Новлянская З.Н. Курс «Литература как предмет эстетического цикла» в системе развивающего обучения. «Вопросы психологии». № 4. 2005.
Кудина Г.Н., Новлянская З.Н. Методическое пособие к учебнику «Литературное чтение» для 2-го класса начальной школы. М.: ОНИКС21 век. Дом педагогики. 2002 г.
Кудина Г.Н., Новлянская З.Н. Основные принципы и методы экспериментального курса «Литература как предмет эстетического цикла» // Психологическая наука и образование. 1996. № 4.
Куревина Щ.Ф., Петерсон Л.Г. Концепция образования: современный взгляд. М., 1999
Левин К. Динамическая психология: Избранные труды. М., 2001
Леднев В.С., Никандров Н.Д., Рыжаков М.В. Государственные образовательные
стандарты в системе общего образования: теория и практика. М., 2002
Леонтьев А.Н., Запорожец А.В. Восстановление движений. Психофизиологическое исследование восстановления функций руки после ранения. М., 1945
Лернер И.Я. Качества знаний учащихся. Какими они должны быть. М., 1978
Лернер И.Я. Процесс обучения и его закономерности. М., 1980
Лернер И.Я. Прогностическая концепция целей и содержания образования / Под ред. И.К. Журавлева. М.: 1994
Магкаев В.Х. Теоретические предпосылки построения метода исследования и объективно-нормативной диагностики развития основ рефлексивного мышления // Развитие основ рефлексивного мышления школьников в процессе учебной деятельности // Под. ред. В.В.Давыдова, В.В.Рубцова. Новосибирск, 1995.
Магкаев В.Х. Экспериментальное изучение планирующей функции мышления в младшем школьном возрасте // Вопросы психологии, 1974, № 5
Майоров А.Н. Теория и практика создания тестов для системы образования. М., 2000.
Макарова Т.Д. и др. Итоговое тестирование. Дидактика 2000. М.: Педагогическое
общество России. 1999
Максимов Л.К. Формирование математического мышления у младших
школьников. М., 1987.
Мальцев А.В. Тестовая технология контроля знаний. Екатеринбург,
Микулина Г.Г., Савельева О.В. К психологической оценке качества знаний у младших школьников // Психологическая наука и образование. 1997. № 2
Микулина Г.Г., Савельева О.В. Способы проверки качества усвоения математических знаний // Руководство по оценке качества математических и лингвистических знаний школьников. Методические разработки. М., 1989
Михайленко Н.Я., Короткова Н.А. Модель организации образовательного процесса в старших группах детского сада // Дошкольное воспитание. 1995. № 9.
Михайлычев Е.А. Моделирование дидактического теста. Проблемы технологии // Школьные технологии. 1996. № 6
Нежнов П.Г. Опосредствование и спонтанность в теоретической картине развития: Педагогика развития: образовательные интересы и их субъекты // Материалы 11й научно-практической конференции. Красноярск, 2005
Нежнов П.Г. Опосредствование и спонтанность в модели «культурного развития» //
Вестн.Моск.Ун-та. Серия 14. Психология. 2007, № 1 (Специальный выпуск: 40 лет факультету психологии МГУ)
Нежнов П.Г. Функциональное поле как целевой ориентир в развивающем обучении // Материалы Всерос. научно-практич. конф. «Культ.-ист. теория Л.С.Выготского и основания современной психологии развития» (Москва 14-16 апреля 2005). М., 2005
Нежнов П.Г., Медведев А.М. Метод исследования содержательного анализа у школьников // Вестник Моск. Ун-та. Серия 14, Психология. 1988, № 2
Основные результаты международного исследования качества математического и естественнонаучного образования TIMSS 2003. М., 2004
Оценка результатов в области образования. СИТО. Национальный институт по оценке достижений в области образования. Амхем, Нидерланды, 1995
Пиаже Ж. Избранные психологические труды. М., 1969
Поливанова К.Н. Психология возрастных кризисов. М., 2000
Полуаршинова Е.Г. Тесты как средство контроля качества подготовки учащихся: Автореф. дисс. канд. пед. наук. М., 1998
Равен, Джон. Педагогическое тестирование: проблемы, заблуждения, перспективы. М., 2001
Рыжаков М.В. Ключевые компетенции в стандарте: возможности реализации // Стандарты и мониторинг в образовании. 1999. № 4
Савельева О.В. Психологические критерии качества знаний младших школьников // Автореф… дисс. канд. пед. наук. М., 1989
Селезнева Н.А. Размышления о качестве образования: международный аспект // Высшее образование сегодня. 2004. № 4
Симонов В.П. Диагностика степени обученности учащихся: Учебно-справочное пособие. М., 1999
Симонов В.П. Директору школы об управлении учебно-воспитательным процессом. М., 1987
Современная дидактика: теория — практике // Под ред. И.Я. Лернера, И.К. Журавлева. М., 1994
Стоунс Э. Психопедагогика. Психологическая теория и практика обучения. М., 1984
Талызина Н.Ф. Теоретические проблемы программированного обучения. М., 1969
Талызина Н.Ф. Управление процессом усвоения знаний. М., 1975
Фрумин И.Д. Компетентностный подход как естественный этап обновления содержания образования // Педагогика развития: ключевые компетентности и их становление. Красноярск, 2003
Фрумин И.Д., Башев В.В. Проблемно рефлексивный подход в изучении обществознания. М., 2002
Фрумин И.Д. и др. Оценка качества образования: обзор международных подходов и тенденций. М., 2005
Холстед М., Орджи Т. Ключевые компетенции в системе оценки Великобритании: Современные подходы к компетентностно ориентированному образованию // Материалы семинара. Самара, 2001
Хуторской А.В. Ключевые компетенции и образовательные стандарты. // Доклад на отделении философии образования и теории педагогики РАО 23 апреля 2002. Центр «Эйдос». www/eidos.ru/news/compet/htm
Цукерман Г.А. Виды общения в обучении. Томск, 1993
Цукерман Г.А. Переход из начальной школы в среднюю как психологическая проблема // Вопросы психологии, 2001. № 5
Цукерман Г.А. Развивающие эффекты системы Б.Д. Эльконина–В.В. Давыдова // Психологическая наука и образование. 2003. № 4
Шишов С.Е. Образовательные стандарты в странах Западной Европы и США: В сб.: Актуальные проблемы стандартизации образования // Под ред. Ю.И. Кривова. Пенза, 1997
Шишов С.Е. Понятие компетенции в контексте качества образования // Стандарты и мониторинг в образовании. 1999. № 2
Шишов С.Е., Кальней В.А. Школа: мониторинг качества образования. М., 2000
Эльконин Б.Д. Педагогика развития: проба как конструкт образовательной системы // В кн.: Педагогика развития: ключевые компетентности и их становление. Красноярск, 2003
Эльконин Б.Д. Избранные психологические труды. М., 1989
Anderson, L.W., & Krathwohl (Eds.). (2001). A Taxonomy for Learning, Teaching, and Assessing: A Revision of Bloom’s Taxonomy of Educational Objectives. New York: Longman
Ashman A., Ashman A.F., Conway R.N.F. An Introduction to Cognitive Education: Theory and Applications. London: Routledge, 1997
Bamett R. (1994). The limits of Competence. Knowledge, Higher Education and Society. Buckinham, UK: Open University Press
Bloom, Benjamin (Ed.) A Taxonomy of Educational Objectives, Handbook 1: Cognitive Domain. New York: David McKay, 1956
Bloom, B., Englehart, M. Furst, E., Hill, W., & Krathwohl, D. (1956). Taxonomy of educational objectives: The classification of educational goals. Handbook I: Cognitive domain. New York, Toronto: Longmans, Green
Bloom B.S., Hasting J.T. & Madaus G.F. Handbook on Formative and Summative Evaluation of Student Learning. New York: McGrawHill, 1971
Bredecamp Sue, Copple Carol (Ed.) Developmentally Appropriate Practice in Early Childhood Programs. NAEYC. Washington, 1997
Commission Staff Working Paper. New Indicators on Education and Training // Commission of the European Communities // Brussels, 2004
Definition and Selection of Competencies (DeSeCo): Theoretical and Conceptual Foundations. Strategy Paper. (2002) www.deseco.admin.ch
Holmes L. Decontaminating the concepts of “learning” and “competence”: education and modalities of emergent identity // Second International Conference on Critical Management Studies. Manchester, 2001
Huitt, W. (1992). Problem solving and decision making: Consideration of individual differences using the Myers Briggs Type Indicator. Journal of Psychological Type, 24, 33–44. Retrieved June 2004, from <https://chrion. valdosta.edu/whuitt//papers/prbsmbti.html>
Hutmacher Walo. Key competencies for Europe // Report of the Symposium Berne, Switzerland 27–30 March, 1996. Council for Cultural Cooperation (CDCC) a // Secondary Education for Europe. Strasburg. 1997
OCR Recognising Achievement. Oxford Cambridge and RSA Examinations. Key Competences 2000 Program (2000)
Martin M.O., MullisI.V.S., Gonzalez,E.J., Kennedy A.M. Trends in Children’s Reading Literacy Achievement 1991–2001. Timss & PIRLS International Study Center, 2003
Mullis I.V.S., Kennedy A.M., Martin M.O., Sainsbury M. PIRLS 2006. Assessment
Framework and Specifications. Progress in International Reading Literacy Study. TIMSS & PIRLS International Study Center, 2004a
Mullis I.V.S., Martin M.O., Gonzalez E.J., Chrostovski S.J. TIMSS 2003 International Mathematics Report. TIMSS & PIRLS International Study Center, 2004b
Qualitative study of schools with outstanding results in seven Latin American countries. UNESCO. Santiago de Chile, 2002
Knowledge and skills for life. First results from PISA 2000. Executive summary. OECD, 2001
Measuring student knowledge and skills. A new Framework for Assessment. OECD, 1999
Reinikainen P. (2003). Brief Presentation of Science in TIMSS and PISA. <www.pisa.oecd.org>
Rychen D.S., Salganik L. (Eds.). Defining and Selecting Key Competencies. Bern,
2001.
Rychen D.S., Salganik L.H. Definition and Selection of Competencies (DeSeCo): Theoretical and Conceptual Foundations. Strategy Paper: an Overarching Frame of Reference for a Coherent Assessment and Research Program on Key Competencies. — <www.deseco.admin.ch>
The Definition and Selection of Competencies // Executive Summary. (2005). <www.deseco.admin.ch>
Westera W. (2001). Competence in Education // J. Curriculum Studies. Vol. 33. № 1
ПРИЛОЖЕНИЕ 1