Страница:
К основным принципам отбора показателей для оценки качества образования можно отнести следующие:
• ориентация на требования внешних пользователей;
• учет потребностей системы образования;
• минимизация системы показателей с учетом потребностей разных уровней управления системой образования;
• инструментальность и технологичность используемых показателей (с учетом существующих возможностей сбора данных, методик измерений, анализа и интерпретации данных, подготовленности потребителей к их восприятию);
• оптимальность использования источников первичных данных для определения показателей качества и эффективности образования (с учетом возможности их многократного использования и экономической обоснованности);
• иерархичность системы показателей;
• сопоставимость системы показателей с международными аналогами;
• соблюдение морально–этических норм в отборе показателей [28].
Важным является такой показатель, как эффективность во всем образовательном процессе, он представляет собой интегрированную меру качества в образовании, в том числе и качества его контроля. Для оценки эффективности системы можно все показатели разделить на три группы, тесно взаимосвязанные между собой.
К первой группе относятся показатели, отражающие информацию о финансировании образования, его кадровом, информационном, материально–техническом (учебные помещения, лаборатории, оборудование, расходные материалы), методическом (учебная литература, наглядные пособия, макеты, тренажеры и т.д.) и другом обеспечении. Сюда же входят структура и содержание образовательных программ, формы организации учебного процесса, методы реализации целей обучения и воспитания, стабильность и адаптация при взаимодействии с внешней средой, педагогические технологии, подготовка и переподготовка педагогических кадров. Эти показатели более всего различаются в образовательных системах одного уровня и достаточно быстро изменяются с течением времени и требуют стандартизации.
Показатели второй группы отражают доступность и дифференциацию обучения, организацию образовательного процесса (назначение, принципы, методы, планирование), гуманистическую и культурно–познавательную направленность, стандарти–зированность и вариативность программ, использование традиционных и информационных технологий обучения и контроля, соответствие структуры и содержания актуальным тенденциям теории и практики образования, деятельность образовательного учреждения в основное (урочное) и неосновное (внеурочное) время, внедрение инновационных методов обучения, использование современных средств и методов контроля за процессом и результатами обучения, способность к модификации форм и методов контроля.
Третью группу составляют показатели, характеризующие результаты контрольно–оценочной деятельности и ожидаемые позитивные изменения в процессе управления качеством обучения. В эту группу включены показатели, определяющие качественный состав обучаемых, условия и атмосферу преподавания, качество получаемых знаний, умений, навыков и компетенций, результаты учебных достижений, информацию о дальнейшей общественной судьбе обучавшихся. Сюда относятся увеличение динамики прироста качества знаний учащихся, личностных достижений учащихся и учителей, рациональность организационной структуры учебного процесса и гибкость использования контрольно–оценочной системы, сбалансированность пропорций контроля и самоконтроля, адаптивность образовательной системы применительно к запросам пользователей и качеству подготовки обучающихся.
Суждения, выводы, доводы и оценки, сделанные в результате анализа и оценивания состояния объекта, должны способствовать его совершенствованию. Вместе с тем, какой бы уровень сбора и анализа информации о деятельности учебного заведения ни рассматривался, на практике всегда в центр внимания ставятся данные о результатах учебных достижений или подготовленности обучающихся. Для рассмотрения подготовленности учащихся показатели качества образования можно разделить на две основные группы: качество условий для осуществления образовательного процесса, обеспечиваемое со стороны органов управления образованием (стандарты, учебные программы, кадры, материально–техническое и информационно–технологическое обеспечение и др.) и уровень учебных достижений как результат овладения обучающимися определенной суммой знаний, умений, навыков и компетенций. При оценке качества образования, несмотря на то, что оно является многообразным и комплексным показателем, в конечном счете, важнейшей является оценка достижений обучающихся как результата осуществленного учебного процесса. Остальная информация о размерах вложений в образование, кадровом обеспечении, методических системах обучения, социально–экономическом статусе семей и многое другое являются условиями, влияющими на результаты обучения и степень усвоения знаний и позволяющими оценивать комплексно качество образования.
Для объективного оценивания качества образовательной системы внутренние критерии и оценки должны дополняться внешними, так как результаты работы одних учебных заведений существенно отражаются на результатах других, особенно в условиях преемственности (например, школа – вуз). При традиционных методах оценивания объективная, единая и стандартизированная база оценки для различных звеньев системы образования отсутствует, в большинстве случаев оценочный процесс носит спонтанный характер. Только в последнее время предпринята попытка путем разработки и реализации государственных образовательных стандартов и образовательных программ, а также различных технологий задать уровни оценок учебных достижений. Для этого используются различные педагогические оценочные средства, лицензирование и аттестация образовательных учреждений, а к квалификации специалистов добавились более широкие и жесткие требования компетентности и ответственности.
В последнее время в качестве внешних используются оценки стандартизированного тестирования. К числу показателей результатов контрольно–оценочной деятельности и подготовленности обучающихся в системе тестирования можно отнести:
• первичный тестовый балл испытуемого (число или процент выполненных заданий теста);
• сертификационный или тестовый балл, полученный в результате шкалирования и учета статистического уровня трудности тестовых заданий;
• средний тестовый балл исследуемой выборки;
• средний тестовый балл генеральной выборки испытуемых;
• проценты правильно выполненных заданий теста для разных категорий и групп испытуемых;
• индивидуальный рейтинг участника тестирования;
• рейтинг общеобразовательного учреждения;
• рейтинг территории региона.
Показатели этой группы могут подразделяться на непреоб–разованные, первичные результаты обследований и вторичные, обработанные определенным образом.
Комплекс необходимых показателей способен обеспечить целостное, качественное и количественное представление о состоянии объекта исследований и динамике его изменений.
Для понимания качества образования вводятся дополнительные показатели:
• образовательные достижения по отдельным предметам;
• динамика образовательных достижений;
• отношение к учебным предметам;
• ключевые (внепредметные) компетентности (познавательные, социальные, информационные и др.);
• удовлетворенность образованием;
• степень участия в образовательном процессе (активная работа на уроке, участие во внеурочной работе, пропуски занятий и др.);
• дальнейшее образование и карьера выпускника; выделение в таксономии образовательных достижений по отдельным предметам уровней грамотности и компетентности.
При этом важную роль играют используемые методы и способы педагогического анализа результатов экзамена и их интерпретация; регулярность и периодичность предоставления итогов контроля для мониторинговых исследований.
Критерии оценивания состояния объекта исследования зависят от задач и целей мониторинга. В обобщенном виде к таковым можно отнести:
• соответствие тестового балла эталону, статистической норме или заданному уровню;
• достижение требований образовательных стандартов как степень совпадения фактического и запланированного результатов;
• соответствие достигнутого уровня подготовленности запросам и ожиданиям потребителей образовательных услуг (учащихся, родителей, вузов, сузов и др.).
Именно в педагогической оценке отражаются уровень учебных достижений обучаемого, уровень профессионализма педагога, надежность методов и технологий оценивания. При этом степень совпадения или расхождения оценок и самооценок определяет многие стороны образовательного процесса. А следовательно, оценка качества учебных достижений школьников позволяет опосредованно делать выводы о качестве предоставляемых образовательных услуг. По анализу результатов контрольно–оценочной деятельности, как правило, делаются выводы о качестве образовательного процесса. Однако качество результата по ряду причин не всегда соответствует качеству процесса, хотя последнее, безусловно, во многом его определяет, так как в значительной степени подготовленность обучающихся обусловлена качеством образовательной системы, в котором выделяют:
• качество учебного процесса;
• качество кадрового состава;
• качество подготовленности обучающихся;
• качество научной и инновационной деятельности при обучении;
• показатели, характеризующие вложения в образование;
• качество управления образовательной системой [81].
Критерии качества обучения соотносятся с критериями эффективности функционирования образовательной системы:
• ценностью и приоритетами образования в современных условиях;
• модернизацией содержания образования на основе гуманизации, фундаментализации, информатизации, вариативности, личностно ориентированного и компетентностного подходов;
• введением независимой системы аттестации выпускников в форме и по материалам единого государственного экзамена;
• созданием технологий контроля и оценки состояния и результатов образовательного процесса и др.
Однако на сегодня невозможно установить единый ряд критериев и стандартов для оценки качества учебных достижений и образовательных систем. Каждая заинтересованная в результатах учебного процесса сторона имеет свои собственные нормы и критерии качества. Нередко, если представления о критериях расходятся, подвергаются сомнению оценки качества, вплоть до полного отрицания правомерности самого оценочного процесса. Примером такой ситуации является единый государственный экзамен. В дискуссии по ЕГЭ развернулась полемика двух сторон. С одной стороны, подчеркивается важность использования результатов единого экзамена при аттестации выпускников школ и отборе абитуриентов, адекватность результатов ЕГЭ задачам оценивания. С другой – существует сдержанно–скептическое отношение к возможности трактовки результатов ЕГЭ как оценок вступительных испытаний в вузы, многие вообще не приемлют процедуру, измерительные материалы, технологии и даже саму идею такого экзамена. Иногда это связано с сомнениями в том, существует ли прямая связь между результатами экзамена и качеством подготовки выпускников по тем критериям, которые позволяют одновременно как оценивать уровень подготовленности выпускников, так и прогнозировать успешность их дальнейшего обучения в вузах.
Эти и другие факторы, в той или иной мере проявляемые в практике отечественного и зарубежного образования, обусловливают потребность в совершенствовании теории и технологии тестового контроля, необходимость повышения эффективности использования результатов контроля путем оперативного реагирования на индивидуальные особенности подготовленности обучающихся, использование статистических результатов единого государственного экзамена и других форм тестирования для мониторинга качества образовательного процесса и образовательных систем, внедрение информационных методов экспертизы и диагностики на всех иерархических уровнях управления качеством образования.
1.5. Учебные достижения как измеряемый показатель качества в образовании
Вопросы и задания
Глава 2
2.1. Многоуровневый подход к контролю как средству управления качеством образования
• ориентация на требования внешних пользователей;
• учет потребностей системы образования;
• минимизация системы показателей с учетом потребностей разных уровней управления системой образования;
• инструментальность и технологичность используемых показателей (с учетом существующих возможностей сбора данных, методик измерений, анализа и интерпретации данных, подготовленности потребителей к их восприятию);
• оптимальность использования источников первичных данных для определения показателей качества и эффективности образования (с учетом возможности их многократного использования и экономической обоснованности);
• иерархичность системы показателей;
• сопоставимость системы показателей с международными аналогами;
• соблюдение морально–этических норм в отборе показателей [28].
Важным является такой показатель, как эффективность во всем образовательном процессе, он представляет собой интегрированную меру качества в образовании, в том числе и качества его контроля. Для оценки эффективности системы можно все показатели разделить на три группы, тесно взаимосвязанные между собой.
К первой группе относятся показатели, отражающие информацию о финансировании образования, его кадровом, информационном, материально–техническом (учебные помещения, лаборатории, оборудование, расходные материалы), методическом (учебная литература, наглядные пособия, макеты, тренажеры и т.д.) и другом обеспечении. Сюда же входят структура и содержание образовательных программ, формы организации учебного процесса, методы реализации целей обучения и воспитания, стабильность и адаптация при взаимодействии с внешней средой, педагогические технологии, подготовка и переподготовка педагогических кадров. Эти показатели более всего различаются в образовательных системах одного уровня и достаточно быстро изменяются с течением времени и требуют стандартизации.
Показатели второй группы отражают доступность и дифференциацию обучения, организацию образовательного процесса (назначение, принципы, методы, планирование), гуманистическую и культурно–познавательную направленность, стандарти–зированность и вариативность программ, использование традиционных и информационных технологий обучения и контроля, соответствие структуры и содержания актуальным тенденциям теории и практики образования, деятельность образовательного учреждения в основное (урочное) и неосновное (внеурочное) время, внедрение инновационных методов обучения, использование современных средств и методов контроля за процессом и результатами обучения, способность к модификации форм и методов контроля.
Третью группу составляют показатели, характеризующие результаты контрольно–оценочной деятельности и ожидаемые позитивные изменения в процессе управления качеством обучения. В эту группу включены показатели, определяющие качественный состав обучаемых, условия и атмосферу преподавания, качество получаемых знаний, умений, навыков и компетенций, результаты учебных достижений, информацию о дальнейшей общественной судьбе обучавшихся. Сюда относятся увеличение динамики прироста качества знаний учащихся, личностных достижений учащихся и учителей, рациональность организационной структуры учебного процесса и гибкость использования контрольно–оценочной системы, сбалансированность пропорций контроля и самоконтроля, адаптивность образовательной системы применительно к запросам пользователей и качеству подготовки обучающихся.
Суждения, выводы, доводы и оценки, сделанные в результате анализа и оценивания состояния объекта, должны способствовать его совершенствованию. Вместе с тем, какой бы уровень сбора и анализа информации о деятельности учебного заведения ни рассматривался, на практике всегда в центр внимания ставятся данные о результатах учебных достижений или подготовленности обучающихся. Для рассмотрения подготовленности учащихся показатели качества образования можно разделить на две основные группы: качество условий для осуществления образовательного процесса, обеспечиваемое со стороны органов управления образованием (стандарты, учебные программы, кадры, материально–техническое и информационно–технологическое обеспечение и др.) и уровень учебных достижений как результат овладения обучающимися определенной суммой знаний, умений, навыков и компетенций. При оценке качества образования, несмотря на то, что оно является многообразным и комплексным показателем, в конечном счете, важнейшей является оценка достижений обучающихся как результата осуществленного учебного процесса. Остальная информация о размерах вложений в образование, кадровом обеспечении, методических системах обучения, социально–экономическом статусе семей и многое другое являются условиями, влияющими на результаты обучения и степень усвоения знаний и позволяющими оценивать комплексно качество образования.
Для объективного оценивания качества образовательной системы внутренние критерии и оценки должны дополняться внешними, так как результаты работы одних учебных заведений существенно отражаются на результатах других, особенно в условиях преемственности (например, школа – вуз). При традиционных методах оценивания объективная, единая и стандартизированная база оценки для различных звеньев системы образования отсутствует, в большинстве случаев оценочный процесс носит спонтанный характер. Только в последнее время предпринята попытка путем разработки и реализации государственных образовательных стандартов и образовательных программ, а также различных технологий задать уровни оценок учебных достижений. Для этого используются различные педагогические оценочные средства, лицензирование и аттестация образовательных учреждений, а к квалификации специалистов добавились более широкие и жесткие требования компетентности и ответственности.
В последнее время в качестве внешних используются оценки стандартизированного тестирования. К числу показателей результатов контрольно–оценочной деятельности и подготовленности обучающихся в системе тестирования можно отнести:
• первичный тестовый балл испытуемого (число или процент выполненных заданий теста);
• сертификационный или тестовый балл, полученный в результате шкалирования и учета статистического уровня трудности тестовых заданий;
• средний тестовый балл исследуемой выборки;
• средний тестовый балл генеральной выборки испытуемых;
• проценты правильно выполненных заданий теста для разных категорий и групп испытуемых;
• индивидуальный рейтинг участника тестирования;
• рейтинг общеобразовательного учреждения;
• рейтинг территории региона.
Показатели этой группы могут подразделяться на непреоб–разованные, первичные результаты обследований и вторичные, обработанные определенным образом.
Комплекс необходимых показателей способен обеспечить целостное, качественное и количественное представление о состоянии объекта исследований и динамике его изменений.
Для понимания качества образования вводятся дополнительные показатели:
• образовательные достижения по отдельным предметам;
• динамика образовательных достижений;
• отношение к учебным предметам;
• ключевые (внепредметные) компетентности (познавательные, социальные, информационные и др.);
• удовлетворенность образованием;
• степень участия в образовательном процессе (активная работа на уроке, участие во внеурочной работе, пропуски занятий и др.);
• дальнейшее образование и карьера выпускника; выделение в таксономии образовательных достижений по отдельным предметам уровней грамотности и компетентности.
При этом важную роль играют используемые методы и способы педагогического анализа результатов экзамена и их интерпретация; регулярность и периодичность предоставления итогов контроля для мониторинговых исследований.
Критерии оценивания состояния объекта исследования зависят от задач и целей мониторинга. В обобщенном виде к таковым можно отнести:
• соответствие тестового балла эталону, статистической норме или заданному уровню;
• достижение требований образовательных стандартов как степень совпадения фактического и запланированного результатов;
• соответствие достигнутого уровня подготовленности запросам и ожиданиям потребителей образовательных услуг (учащихся, родителей, вузов, сузов и др.).
Именно в педагогической оценке отражаются уровень учебных достижений обучаемого, уровень профессионализма педагога, надежность методов и технологий оценивания. При этом степень совпадения или расхождения оценок и самооценок определяет многие стороны образовательного процесса. А следовательно, оценка качества учебных достижений школьников позволяет опосредованно делать выводы о качестве предоставляемых образовательных услуг. По анализу результатов контрольно–оценочной деятельности, как правило, делаются выводы о качестве образовательного процесса. Однако качество результата по ряду причин не всегда соответствует качеству процесса, хотя последнее, безусловно, во многом его определяет, так как в значительной степени подготовленность обучающихся обусловлена качеством образовательной системы, в котором выделяют:
• качество учебного процесса;
• качество кадрового состава;
• качество подготовленности обучающихся;
• качество научной и инновационной деятельности при обучении;
• показатели, характеризующие вложения в образование;
• качество управления образовательной системой [81].
Критерии качества обучения соотносятся с критериями эффективности функционирования образовательной системы:
• ценностью и приоритетами образования в современных условиях;
• модернизацией содержания образования на основе гуманизации, фундаментализации, информатизации, вариативности, личностно ориентированного и компетентностного подходов;
• введением независимой системы аттестации выпускников в форме и по материалам единого государственного экзамена;
• созданием технологий контроля и оценки состояния и результатов образовательного процесса и др.
Однако на сегодня невозможно установить единый ряд критериев и стандартов для оценки качества учебных достижений и образовательных систем. Каждая заинтересованная в результатах учебного процесса сторона имеет свои собственные нормы и критерии качества. Нередко, если представления о критериях расходятся, подвергаются сомнению оценки качества, вплоть до полного отрицания правомерности самого оценочного процесса. Примером такой ситуации является единый государственный экзамен. В дискуссии по ЕГЭ развернулась полемика двух сторон. С одной стороны, подчеркивается важность использования результатов единого экзамена при аттестации выпускников школ и отборе абитуриентов, адекватность результатов ЕГЭ задачам оценивания. С другой – существует сдержанно–скептическое отношение к возможности трактовки результатов ЕГЭ как оценок вступительных испытаний в вузы, многие вообще не приемлют процедуру, измерительные материалы, технологии и даже саму идею такого экзамена. Иногда это связано с сомнениями в том, существует ли прямая связь между результатами экзамена и качеством подготовки выпускников по тем критериям, которые позволяют одновременно как оценивать уровень подготовленности выпускников, так и прогнозировать успешность их дальнейшего обучения в вузах.
Эти и другие факторы, в той или иной мере проявляемые в практике отечественного и зарубежного образования, обусловливают потребность в совершенствовании теории и технологии тестового контроля, необходимость повышения эффективности использования результатов контроля путем оперативного реагирования на индивидуальные особенности подготовленности обучающихся, использование статистических результатов единого государственного экзамена и других форм тестирования для мониторинга качества образовательного процесса и образовательных систем, внедрение информационных методов экспертизы и диагностики на всех иерархических уровнях управления качеством образования.
1.5. Учебные достижения как измеряемый показатель качества в образовании
Для того чтобы система контроля эффективно воздействовала на образовательный процесс, необходимо выявление роли контроля в обучении и развитии личности. Поэтому понимание того, что мы измеряем и оцениваем, как анализируем и интерпретируем результаты педагогических измерений, является одним из важных аспектов совершенствования образовательной системы, управления ее качеством и развитием контрольно–оценочного процесса.
Среди большого числа показателей качества образовательной системы основным по–прежнему является подготовленность обучающихся, а комплексным показателем их подготовленности в теории педагогических измерений признаются учебные достижения в той или иной предметной области. Однако появившиеся в связи с развитием тестирования термины «подготовленность», «учебные достижения», «уровень учебных достижении» и «качество учебных достижений» иногда используются как синонимы, что вводит в заблуждение многочисленных пользователей статистической образовательной информации. Отсутствие единого подхода значительно затрудняет понимание того, что мы измеряем, а также делает неоднозначной интерпретацию характеристик личности и результатов учебного труда.
Структура учебных достижений достаточно сложна. К учебным достижениям относятся в первую очередь знания, умения, навыки и общеучебные компетенции испытуемых. В какой–то степени по количественным оценкам учебных достижений (тестовым баллам) опосредованно можно судить и о степени личностного развития обучающихся (полнота и глубина знаний, конкретность и обобщенность ответов, гибкость мышления, системность и систематичность учебной работы, формирование общеучебных компетенций, опыт практической и творческой деятельности, адекватность и осознанность обучения, упорство, собранность, целеустремленность, усидчивость, целеполагание, мотивация, ценностно–смысловое отношение к обучению и контролю) [70].
Комплекс необходимых показателей обеспечивает целостное, качественное и количественное представление о состоянии объекта исследований и динамике его изменений. При всем многообразии показателей качества современного образования наиболее значимыми по–прежнему остаются качество усвоенных знаний, развитие определенных навыков и приобретение требуемых умений на каждой стадии обучения, т.е. когнитивно–практический компонент образования. Именно поэтому квалитати–визация оценивания качеств личности идет в первую очередь по когнитивной составляющей – уровню учебных достижений как объекту педагогических измерений. Подготовленность является интегральной характеристикой состояния обучающегося (латентным параметром) на момент контроля. Количественной мерой подготовленности по когнитивной составляющей образования является уровень учебных достижений (измеряемый параметр) в данной предметной области, получаемый путем педагогических измерений, шкалирования (того или иного преобразования количества правильно выполненных заданий теста) и выставления определенного количества баллов.
Уровень учебных достижений по совокупности учебных дисциплин определяет степень развития обучающегося как интегрированного показателя, в котором отображена концентрация достижений всех этапов и составляющих учебного процесса, в сложной форме суммированы качества учебной деятельности всех его субъектов и качества самой образовательной системы. А так как в объективной педагогической оценке отражаются не только уровень учебных достижений и степень развития обучающегося, но и уровень профессионализма педагога, надежность методов и технологий обучения, интегральные показатели независимого контроля позволяют делать в ы воды о качестве образовательного процесса и образовательных систем, осуществлять прогнозирование их дальнейшего развития, создания новых средств и методов управления качеством образования.
Однако, как и при любом измерительном процессе, при педагогическом измерении всегда имеет место некоторое различие между истинной подготовленностью обучающегося и уровнем его учебных достижений. Это обусловлено тем, что на субъекты контроля и его результаты могут в той или иной степени оказывать влияние различные внешние и внутренние факторы (рис. 1).
Рис. 1. Факторы, влияющие на уровень учебных достижений
К ним можно отнести образовательную политику в стране (стандарты, программы, учебники и др.); условия образовательного процесса (профессиональная компетентность, педагогическая культура и психологические установки педагогов); опыт учебной деятельности и общепредметную подготовленность учащегося на момент контроля; степень сформированности общеучебных компетенций; навыки самообразования, самоконтроля, самоидентификации и умение мобилизоваться на достижение максимально возможного результата.
Нельзя не учитывать и такие факторы, как социально–педагогические условия развития личности и влияние семьи, уровень физического и психического здоровья, психологическое состояние обучающегося на момент контроля, состояние тревожности; личностные и педагогические установки на достижение результата при тестировании, ценностно–мотивационное отношение к обучению и приобретению профессии; стремление быть конкурентоспособным на рынке труда и др. Важными являются качество тестовых материалов, точность и надежность педагогических измерителей, используемых технологий, организация и условия контрольно–оценочного процесса; методы шкалирования и оценивания; свойства генеральной выборки испытуемых и др.
Некоторые из указанных выше факторов оказывают одинаковое влияние на результат всех участников тестирования (образовательная политика в стране, стандарты, содержание и качество контрольного измерительного материала (КИМ) и др.), а часть из них носят случайный характер и оказывают разное воздействие на индивидуальный результат испытуемых. Влияние случайных факторов сказывается на результате малых выборок. Однако при рандомизации и статистически достаточном числе испытуемых влияние случайных факторов на общий результат выборки (генеральную выборку) исключается.
Отметим, что потребность в достижениях является одной из наиболее значимых в структуре ценностных ориентаций обучающихся, что в первую очередь связано с особенностями социально–психологического развития личности и возможностью реализовать себя в различных сферах деятельности.
Среди большого числа показателей качества образовательной системы основным по–прежнему является подготовленность обучающихся, а комплексным показателем их подготовленности в теории педагогических измерений признаются учебные достижения в той или иной предметной области. Однако появившиеся в связи с развитием тестирования термины «подготовленность», «учебные достижения», «уровень учебных достижении» и «качество учебных достижений» иногда используются как синонимы, что вводит в заблуждение многочисленных пользователей статистической образовательной информации. Отсутствие единого подхода значительно затрудняет понимание того, что мы измеряем, а также делает неоднозначной интерпретацию характеристик личности и результатов учебного труда.
Структура учебных достижений достаточно сложна. К учебным достижениям относятся в первую очередь знания, умения, навыки и общеучебные компетенции испытуемых. В какой–то степени по количественным оценкам учебных достижений (тестовым баллам) опосредованно можно судить и о степени личностного развития обучающихся (полнота и глубина знаний, конкретность и обобщенность ответов, гибкость мышления, системность и систематичность учебной работы, формирование общеучебных компетенций, опыт практической и творческой деятельности, адекватность и осознанность обучения, упорство, собранность, целеустремленность, усидчивость, целеполагание, мотивация, ценностно–смысловое отношение к обучению и контролю) [70].
Комплекс необходимых показателей обеспечивает целостное, качественное и количественное представление о состоянии объекта исследований и динамике его изменений. При всем многообразии показателей качества современного образования наиболее значимыми по–прежнему остаются качество усвоенных знаний, развитие определенных навыков и приобретение требуемых умений на каждой стадии обучения, т.е. когнитивно–практический компонент образования. Именно поэтому квалитати–визация оценивания качеств личности идет в первую очередь по когнитивной составляющей – уровню учебных достижений как объекту педагогических измерений. Подготовленность является интегральной характеристикой состояния обучающегося (латентным параметром) на момент контроля. Количественной мерой подготовленности по когнитивной составляющей образования является уровень учебных достижений (измеряемый параметр) в данной предметной области, получаемый путем педагогических измерений, шкалирования (того или иного преобразования количества правильно выполненных заданий теста) и выставления определенного количества баллов.
Уровень учебных достижений по совокупности учебных дисциплин определяет степень развития обучающегося как интегрированного показателя, в котором отображена концентрация достижений всех этапов и составляющих учебного процесса, в сложной форме суммированы качества учебной деятельности всех его субъектов и качества самой образовательной системы. А так как в объективной педагогической оценке отражаются не только уровень учебных достижений и степень развития обучающегося, но и уровень профессионализма педагога, надежность методов и технологий обучения, интегральные показатели независимого контроля позволяют делать в ы воды о качестве образовательного процесса и образовательных систем, осуществлять прогнозирование их дальнейшего развития, создания новых средств и методов управления качеством образования.
Однако, как и при любом измерительном процессе, при педагогическом измерении всегда имеет место некоторое различие между истинной подготовленностью обучающегося и уровнем его учебных достижений. Это обусловлено тем, что на субъекты контроля и его результаты могут в той или иной степени оказывать влияние различные внешние и внутренние факторы (рис. 1).
Рис. 1. Факторы, влияющие на уровень учебных достижений
К ним можно отнести образовательную политику в стране (стандарты, программы, учебники и др.); условия образовательного процесса (профессиональная компетентность, педагогическая культура и психологические установки педагогов); опыт учебной деятельности и общепредметную подготовленность учащегося на момент контроля; степень сформированности общеучебных компетенций; навыки самообразования, самоконтроля, самоидентификации и умение мобилизоваться на достижение максимально возможного результата.
Нельзя не учитывать и такие факторы, как социально–педагогические условия развития личности и влияние семьи, уровень физического и психического здоровья, психологическое состояние обучающегося на момент контроля, состояние тревожности; личностные и педагогические установки на достижение результата при тестировании, ценностно–мотивационное отношение к обучению и приобретению профессии; стремление быть конкурентоспособным на рынке труда и др. Важными являются качество тестовых материалов, точность и надежность педагогических измерителей, используемых технологий, организация и условия контрольно–оценочного процесса; методы шкалирования и оценивания; свойства генеральной выборки испытуемых и др.
Некоторые из указанных выше факторов оказывают одинаковое влияние на результат всех участников тестирования (образовательная политика в стране, стандарты, содержание и качество контрольного измерительного материала (КИМ) и др.), а часть из них носят случайный характер и оказывают разное воздействие на индивидуальный результат испытуемых. Влияние случайных факторов сказывается на результате малых выборок. Однако при рандомизации и статистически достаточном числе испытуемых влияние случайных факторов на общий результат выборки (генеральную выборку) исключается.
Отметим, что потребность в достижениях является одной из наиболее значимых в структуре ценностных ориентаций обучающихся, что в первую очередь связано с особенностями социально–психологического развития личности и возможностью реализовать себя в различных сферах деятельности.
Вопросы и задания
1. Чем в мире вызвано усиление внимания к качеству образования?
2. Какие причины привели к необходимости модернизации отечественного образования?
3. Что такое компетенция, чем компетенция отличается от компетентности?
4. Какие компетенции называют ключевыми?
5. Что включает в себя понятие «качество образования»?
6. Какие показатели характеризуют качество образования?
7. Какие критерии используются для определения подготовленности учащихся?
8. Что принято понимать под учебными достижениями?
2. Какие причины привели к необходимости модернизации отечественного образования?
3. Что такое компетенция, чем компетенция отличается от компетентности?
4. Какие компетенции называют ключевыми?
5. Что включает в себя понятие «качество образования»?
6. Какие показатели характеризуют качество образования?
7. Какие критерии используются для определения подготовленности учащихся?
8. Что принято понимать под учебными достижениями?
Глава 2
КОНТРОЛЬ КАЧЕСТВА В ОБРАЗОВАНИИ
Конечно, будем учиться доказывать, но
будем также учиться догадываться.
Дж. Пойа
2.1. Многоуровневый подход к контролю как средству управления качеством образования
Требование оперативного и целенаправленного воздействия на всех субъектов образования подводит к необходимости использования объективной образовательной информации, а контрольно–оценочная деятельность становится одной из важнейших составляющих системы управления качеством образования, охватывающей стандарты, образовательный процесс, инструментарий, технологии и результаты педагогических измерений.
В последнее время обязательными звеньями системы управления качеством образования являются сертификация или стандартизация образовательных услуг и требований к результатам учебной деятельности; внешний контроль, основанный на педагогических измерениях учебных достижений для выявления личностных характеристик обучающихся; оценка результатов обучения на соответствие стандартным показателям или статистическим нормам. Получение объективных оценок результатов учебного труда обеспечивает надежную обратную связь, указывающую на соответствие функционирования системы достижению конечных целей, другими словами, контроль связан с оценкой степени реализации целей. В связи с этим наиболее востребованным и оптимальным в современных условиях становится независимый контроль, основанный на теории и технике педагогического измерения уровня учебных достижений обучающихся [69, 181].
В педагогической теории оценка качества и структуры усвоенного представляется важной составляющей экспертизы развития обучающихся и качества образования в целом, а контроль рассматривается как «средство получения учителем информации о качестве усвоения, продвижении в развитии обучающихся, эффективности применения тех или иных средств. Для учащихся это сигнал об уровне усвоения той или иной темы; для администрации – средство оценки эффективности педагогической деятельности учителей, результат работы школы» [87].
Педагогические основы обучения и связи его с контролем представлены в трудах отечественных ученых: С.И. Архангельского, Ю.К. Бабанского, В.П. Беспалько, В.В. Давыдова, В.В. Краевско–го, Н.В. Кузьминой, И.Я. Лернера, Г.И. Михалевской, Е.И. Перовского, В.М. Полонского, С.И. Руковского, М.Н. Скаткина,
B. П. Стрезикозина, В.Т. Фоменко, В.А. Якунина и других.
Разработке современных средств и методов контроля, позволяющих количественно выразить качество подготовленности школьников, посвящено большое число работ у нас в стране и за рубежом. Из иностранных наиболее известны работы таких авторов, как D. Bateson, A. Binet, A. Birnbaum, B.S. Bloom, K.A. Bollen, C. V. Bunderson, L.J. Cronbach, R.M. Gagne, R.K. Hambleton,
D. K. Inouye, J.P. Keeves, T.L. Kelley, G.G. Kingsbury, F.M. Lord, C. Nikol, J.B. Olsen, G. Rasch, T. Schroeder, T.H. Simon, D.J. Weiss, A.R. Zara, B.D.Wright и др. Основой современной контрольно–оценочной системы у нас в стране стали работы отечественных ученых и практиков: В.С. Аванесова, Т.И. Батуриной, Н.О. Биль–чаевой, В.А. Болотова, М.Б. Гузаирова, С.И. Высоцкой, Н.Ф. Ефремовой, М.И. Зарецкого, В.А. Качалова, Г.С. Ковалевой, Н.А. Кулемина, А.Н. Майорова, В.И. Нардюжева, А.И. Севрука, А.И. Субетто, Г.К. Селевко, А.О. Татура, В.А. Хлебникова, М.Б. Челышковой, В.Д. Шадрикова, С.Е. Шишова, В.А. Шухара–диной, А.Г. Шмелева. Процессы педагогических измерений и шкалирования в этих работах представляются последовательностью действий: выявление и качественное описание предмета измерения (объекта или явления), разработка измерителей и соответствующих им шкал, получение первичных результатов, математико–статис–тическая обработка и преобразование первичных результатов, систематизация окончательных данных и представление их в виде матриц, таблиц и графиков, содержательная интерпретация результатов педагогических измерений.
Функции оценки качества образования (диагностическая, контролирующая, обучающая, развивающая, мотивационно–по–будительная, организационная, стандартизирующая, информационная, социально–экономическая, управляющая и др.) представляют целостную совокупность, способствующую достижению синергетического эффекта в научной организации процесса управления образованием. Связи между компонентами системы оценки качества и обучения создают циркулирующие потоки информации. Действительно, каждая подструктура испытывает на себе управленческие воздействия со стороны других структур, а поэтому в случае неполной реализации связей и функций управление на основе обратной связи может оказаться неэффективным, что неминуемо приведет к снижению качества образования. Определить структуру системы оценки и управления качеством – значит выявить компоненты этой структуры, указать их положение друг относительно друга, установить взаимосвязь компонентов, разработать схемы их взаимодействия, обеспечивающие развитие системы в наиболее перспективных направлениях.
Принципиально новые инновационные возможности в аттестации выпускников школ, педагогических кадров и самих учебных заведений открывает единый государственный экзамен [149, 151]. Основанная на нем государственная аттестация выпускников средней школы призвана обеспечивать:
• единство требований к знаниям выпускников;
• равные возможности получения объективной оценки для всех выпускников;
• высокое качество оценок с позиций теории педагогических измерений;
• доверие к аттестационным результатам выпускников со стороны самих выпускников, их родителей и педагогической общественности школ и вузов;
В последнее время обязательными звеньями системы управления качеством образования являются сертификация или стандартизация образовательных услуг и требований к результатам учебной деятельности; внешний контроль, основанный на педагогических измерениях учебных достижений для выявления личностных характеристик обучающихся; оценка результатов обучения на соответствие стандартным показателям или статистическим нормам. Получение объективных оценок результатов учебного труда обеспечивает надежную обратную связь, указывающую на соответствие функционирования системы достижению конечных целей, другими словами, контроль связан с оценкой степени реализации целей. В связи с этим наиболее востребованным и оптимальным в современных условиях становится независимый контроль, основанный на теории и технике педагогического измерения уровня учебных достижений обучающихся [69, 181].
В педагогической теории оценка качества и структуры усвоенного представляется важной составляющей экспертизы развития обучающихся и качества образования в целом, а контроль рассматривается как «средство получения учителем информации о качестве усвоения, продвижении в развитии обучающихся, эффективности применения тех или иных средств. Для учащихся это сигнал об уровне усвоения той или иной темы; для администрации – средство оценки эффективности педагогической деятельности учителей, результат работы школы» [87].
Педагогические основы обучения и связи его с контролем представлены в трудах отечественных ученых: С.И. Архангельского, Ю.К. Бабанского, В.П. Беспалько, В.В. Давыдова, В.В. Краевско–го, Н.В. Кузьминой, И.Я. Лернера, Г.И. Михалевской, Е.И. Перовского, В.М. Полонского, С.И. Руковского, М.Н. Скаткина,
B. П. Стрезикозина, В.Т. Фоменко, В.А. Якунина и других.
Разработке современных средств и методов контроля, позволяющих количественно выразить качество подготовленности школьников, посвящено большое число работ у нас в стране и за рубежом. Из иностранных наиболее известны работы таких авторов, как D. Bateson, A. Binet, A. Birnbaum, B.S. Bloom, K.A. Bollen, C. V. Bunderson, L.J. Cronbach, R.M. Gagne, R.K. Hambleton,
D. K. Inouye, J.P. Keeves, T.L. Kelley, G.G. Kingsbury, F.M. Lord, C. Nikol, J.B. Olsen, G. Rasch, T. Schroeder, T.H. Simon, D.J. Weiss, A.R. Zara, B.D.Wright и др. Основой современной контрольно–оценочной системы у нас в стране стали работы отечественных ученых и практиков: В.С. Аванесова, Т.И. Батуриной, Н.О. Биль–чаевой, В.А. Болотова, М.Б. Гузаирова, С.И. Высоцкой, Н.Ф. Ефремовой, М.И. Зарецкого, В.А. Качалова, Г.С. Ковалевой, Н.А. Кулемина, А.Н. Майорова, В.И. Нардюжева, А.И. Севрука, А.И. Субетто, Г.К. Селевко, А.О. Татура, В.А. Хлебникова, М.Б. Челышковой, В.Д. Шадрикова, С.Е. Шишова, В.А. Шухара–диной, А.Г. Шмелева. Процессы педагогических измерений и шкалирования в этих работах представляются последовательностью действий: выявление и качественное описание предмета измерения (объекта или явления), разработка измерителей и соответствующих им шкал, получение первичных результатов, математико–статис–тическая обработка и преобразование первичных результатов, систематизация окончательных данных и представление их в виде матриц, таблиц и графиков, содержательная интерпретация результатов педагогических измерений.
Функции оценки качества образования (диагностическая, контролирующая, обучающая, развивающая, мотивационно–по–будительная, организационная, стандартизирующая, информационная, социально–экономическая, управляющая и др.) представляют целостную совокупность, способствующую достижению синергетического эффекта в научной организации процесса управления образованием. Связи между компонентами системы оценки качества и обучения создают циркулирующие потоки информации. Действительно, каждая подструктура испытывает на себе управленческие воздействия со стороны других структур, а поэтому в случае неполной реализации связей и функций управление на основе обратной связи может оказаться неэффективным, что неминуемо приведет к снижению качества образования. Определить структуру системы оценки и управления качеством – значит выявить компоненты этой структуры, указать их положение друг относительно друга, установить взаимосвязь компонентов, разработать схемы их взаимодействия, обеспечивающие развитие системы в наиболее перспективных направлениях.
Принципиально новые инновационные возможности в аттестации выпускников школ, педагогических кадров и самих учебных заведений открывает единый государственный экзамен [149, 151]. Основанная на нем государственная аттестация выпускников средней школы призвана обеспечивать:
• единство требований к знаниям выпускников;
• равные возможности получения объективной оценки для всех выпускников;
• высокое качество оценок с позиций теории педагогических измерений;
• доверие к аттестационным результатам выпускников со стороны самих выпускников, их родителей и педагогической общественности школ и вузов;