Традиционные и инновационные средства оценки результатов обучения

ТРАДИЦИОННЫЕ И ИННОВАЦИОННЫЕ СРЕДСТВА ОЦЕНКИ РЕЗУЛЬТАТОВ ОБУЧЕНИЯ

План

Введение в дисциплину «Современные средства оценивания результатов обучения».

Понятие о качестве образования.

Оценка как элемент управления качеством.

Традиционные и новые средства оценки результатов обучения.

Введение в дисциплину «Современные средства оценивания результатов обучения»

 

Проблема измерения и оценивания результатов обучения является одной из самых важных в педагогической теории и практике. Решение этой проблемы необходимо для оценки эффективности педагогических инноваций и технологий.

Сложность педагогических явлений, а также наличие большого числа факторов, в том числе случайных, которые влияют на педагогический процесс и его результаты, приводят к тому, что педагогический процесс нельзя рассматривать как полностью детерминированный. При самой совершенной организации педагогического процесса мы не можем однозначно предсказать, каковы будут результаты обучения для каждого отдельного ученика.

В связи с этим современная система образования выдвигает требование: каждый педагог должен стремиться к повышению объективности оценивания, использованию наряду с традиционными средствами контроля и инновационные достижения педагогической науки.

Цель дисциплины «Современные средства оценивания результатов обучения» – познакомить студентов с современными средствами оценки результатов обучения, методологическими и теоретическими основами тестового контроля, порядком организации и проведения единого государственного экзамена (ЕГЭ).

Задачи дисциплины:

1. рассмотреть методы конструирования и использования гомогенных педагогических тестов; методы шкалирования и интерпретации полученных результатов; компьютерные технологии, используемые в тестировании;

2. определить психологические и педагогические аспекты использования тестов для контроля знаний учащихся;

3. развить умение составления и оценивания результатов тестовых заданий по своему предмету.

Изучив дисциплину, вы узнаете:

· историю и современное состояние системы тестирования в России и за рубежом;

· традиционные и современные подходы к оценке учебных достижений;

· особенности тестовых технологий, виды и типы тестов, формы предтестовых заданий;

· различные методы оценивания результатов тестирования;

· нормативные документы, регламентирующие проведение ЕГЭ,

· структуру и содержание контрольно-измерительных материалов для ЕГЭ по своему предмету;

· процедуру проведения тестирования;

научитесь:

· давать экспертную оценку предтестовым заданиям, использовать на практике тесты разных видов;

· проводить тестирование и анализировать полученные данные в рамках классической и современной теории создания тестов;

овладеете:

· методами разработки занятий по подготовке учащихся к ЕГЭ по своему предмету;

· навыками обработки результатов тестирования.

Понятие «качество образования»

 

Слово «качество» производно от слов «как», «какой», «обладающий какими свойствами». В практике обычно пользуются одной из двух трактовок этого понятия – философской или производственной.

Понятие «качество образования» в его философской интерпретации может быть применено и к различным моделям образовательной практики и не несет никаких оценок (что хуже, что лучше), она фиксирует разное качество, разные свойства. В философии эта категория не носит оценочного характера, а потому философской трактовке качества бессмысленно ставить вопрос об измерении или иной оценке качества, низкого, высокого и т.д.

Как педагогическая проблема качество образования рассматривается с позиций квалитологии – триединой науки, включающей теорию качества, теорию оценки качества (квалиметрию) и теорию управления качеством. Качество образования как сложная категория и многоаспектная проблема может быть раскрыто через категории свойства, структуры, системы, количества, эффективности, оценки, управления и др. В этом случае В. Панасюк предлагает раскрывать категорию «качество» через следующие определения:

а) качество есть совокупность свойств (аспект свойства);

б) качество структурно: оно есть система свойств или качеств частей объекта или процесса (аспект структурности);

в) качество динамично (аспект динамичности);

г) качество есть существенная определенность объекта или процесса, внутренний момент, выражается в закономерный связи составляющих частей, элементов (аспект определенности);

д) качество – основа существования объекта или процесса. В этом аспекте оно раскрывается через категории свойства, структуры, системы, границы, целостности, изменчивости, количества (аспект внешневнутренней обусловленности);

е) качество создаваемых человеком объектов и процессов обладает ценностью (аксиологический аспект).

С учетом приведенных определений, качество образования может быть представлено как совокупность свойств, которая обусловливает приспособленность образования к реализации социальных целей по формированию и развитию личности в аспектах ее обученности, воспитанности, выраженности социальных, психических и физических свойств.

Концепция качества образования появляется уже на этапе формирования религиозных образовательных систем. Именно в эту эпоху происходит формирование представлений об образовании как особого рода духовной практике, достоинства которой определяются мерой присутствия духовного первоначала в образовательной среде. Соответственно, качество религиозного образования определялось степенью соответствия индивидуальной духовной практики – зафиксированным в тех или иных метафизических текстах представлениям о религиозном идеале. Средством выявления этого соответствия становились испытания, делавшие получение признания в новом качестве не только престижным, но и опасным делом.

Постепенно, развитие общества и государства сопровождалось постепенной десакрализацией и, в определенном смысле, «демократизацией» религиозного знания. Эти процессы многократно ускорились после череды расколов Церкви, произошедших в XIV – XVII веках, одним из результатов которых стало утверждение Реформации. Именно в контексте этого общественного и культурного процесса, индивидуальная способность к чтению, пониманию и толкованию Библии оказалась всеобщей и обязательной нормой. В это же время в европейском общественном сознании формируются ставшие столь привычными для нас идеи всеобщности и обязательности образования.

Феномен «качества образования» в тот период может быть представлен понятием «грамотность». Вне зависимости от происхождения и предполагаемого рода занятий, умения читать, писать, выполнять простейшие математические действия становятся обязательным условием любой профессиональной карьеры. Таким образом, «грамотность» связывается не столько с «простейшим» уровнем образованности, но – с достижением общественного согласия относительно «образовательного ценза» каждого правоспособного гражданина.

Именно в этот период возникает пятибалльная система, ориентированная на оценку индивидуальных достижений по отдельным предметам.

Параллельно с этой линией развития образования в Средневековье складывается целый ряд относительно самостоятельных образовательных практик, обеспечивающих воспроизводство цеховой и сословной организации общества. В современном понимании, мы можем говорить о «профессиональном образовании», понимая, что само понятие «профессия» принадлежит гораздо более позднему историческому периоду (не ранее XIX века).

Если попытаться определить наиболее значимый аспект качества образовательной практики в условиях цехового разделения труда, то мерилом качества образования такого рода выступает «мастерство» как особого рода сплав духовных традиций, секретов успешной и эффективной деятельности, индивидуальных способностей и общественной необходимости в сохранении соответствующего производства.

Категория мастерства оказывается системообразующей и в отношении методов диагностики качества образования: наиболее адекватной формой профессиональных испытаний оказывается специально организованный конкурс, в рамках которого идеал не познается, но создается в условиях соперничества между представителями цеха.

Все перечисленные подходы к определению качества образования в той или иной степени участвовали в формировании современных представлений о качестве образования в системе профессионального педагогического образования.

Понятие «качество образования» носит динамический характер: оно изменчиво во времени, различно по уровням образования, типам и видам образовательных учреждений, по-разному понимается субъектами образовательной деятельности, потребителями и заказчиками.

В педагогической теории исследованы различные аспекты качества образования: качество знаний, качество обучения, результаты образовательной деятельности; даны трактовки данного понятия с точки зрения дидактики, педагогики, психологии, методологии; вводятся новые категории, определяющие качество, – функциональная грамотность, образованность, компетенция.

Таким образом, можно говорить о многоаспектности этого понятия как применительно к образованию человека, так и применительно к уровням управления качеством.

Обсуждение понятия «качество образования» ведется на протяжении многих лет. Итогом всех этих дискуссий стал вывод о том, что дать однозначное определение понятию «качество образования» просто невозможно. Однако для практических целей под качеством образования решили понимать изменения в учебном процессе и в среде, окружающей обучаемого, которые можно идентифицировать как улучшение знаний, умений и ценностей, приобретаемых обучаемым по завершению определенного этапа.

Существующие подходы к определению качества образования Г.В. Гутник предлагает классифицировать следующим образом:

- эмпирическое определение качества образования (им пользуются, например, родители при выборе образовательного учреждения для своего ребенка);

- формально-отчетное определение процента успевающих на «4» и «5» при общем уровне успеваемости (такое определение часто фигурирует во многих показательных данных образовательного учреждения);

- дидактическое (определение уровня обученности на основе тестовых технологий);

- психолого-дидактическое (к предметным тестам добавляются психологические);

- педагогическое (определение качества образования включает в себя оценку уровня воспитанности);

- процессуальное (оценка качества образования по параметрам учебного процесса);

- комплексное (в оценку качества образования включаются материальная база, кадровый состав, программы, формы и методы работы и т.д.);

- многопараметрическое определение качества образования (используется для оценки вузовского образования и региональных образовательных систем);

- методологическое определение (качество образования – это соотношение операционально заданной цели и результата).

По мнению А.Г. Бермуса, качество результатов образования предполагает наличие нескольких систем представлений о результативности. Качество может быть определено с точки зрения

- государства (соответствие результатов образования – нормативным документам);

- общества (соответствие результата образования – потребностям рынка труда);

- личности (соответствие результата образования – ожиданиям).

Некоторое непонимание значения качества усиливается из-за того, что оно может использоваться как абсолютное, так и относительное понятие. Качество в обыденном, житейском понимании используется главным образом как понятие абсолютное. Люди используют его, например, при описании дорогих ресторанов (качество услуг) и роскошных вещей (качество продукции).

При использовании в бытовом контексте предметы, которым дается качественная оценка с точки зрения абсолютного понятия, представляют собой наивысший стандарт, который невозможно, как негласно предполагается, превзойти. К качественной продукции относятся совершенные предметы, выполненные без ограничения затрат на них. Редкость и дороговизна – две отличительные черты этого определения. В этом смысле качество используется для отражения статуса и превосходства. Владение предметами «качества» выделяет их владельцев среди тех, кто не может себе позволить обладать ими.

При использовании в образовательном контексте понятие «качество» приобретает существенно иной смысл. Абсолютное понятие «высокого качества» не имеет ничего общего с системой управления качеством в образовании. Тем не менее, в ходе дискуссий по управлению качеством часто возникает вопрос о его абсолютном значении, имеющем ауру роскоши и высокого статуса. Это идеализированное использование понятия может оказаться полезным для общественных связей, может содействовать образовательному учреждению в улучшении его имиджа. Оно также демонстрирует значение повышения качества как стремление к наивысшим стандартам.

Качество также используется как понятие относительное. В этом случае качество не является атрибутом продукции или услуги. Оно является чем-то, что приписано ему. О качестве можно судить, когда продукция или услуга отвечает требованиям соответствующих ей стандартов или спецификации.

Качество как понятие относительное имеет два аспекта: первый – соответствие стандартам или спецификации, второй – соответствие запросам потребителя.

Первое «соответствие» часто означает «соответствие цели или применению». Иногда его называют качеством с точки зрения производителя. Под качеством продукции или услуги производитель понимает постоянно отвечающую требованиям стандартов или спецификации производимую им продукцию или оказываемую им услугу. Качество демонстрируется производителем в виде системы, известной как система гарантии качества, которая дает возможность постоянно производить продукцию, услуги, соответствующие определенному стандарту или спецификации. Продукция демонстрирует качество столько времени, сколько этого от нее требует производитель.

В связи с тем, что взгляды производителя и потребителя не всегда совпадают, возникает вопрос о том, кто должен решить, являются ли услуги вуза качественными. Часто случается, что превосходная и полезная продукция или услуги не воспринимаются потребителями как обладающие качеством. Особенно остро эта проблема стоит в области образования. Отказ от единой государственной системы обучения, от многих давно устоявшихся традиций и введение новых (тестирование при приеме в вузы вместо традиционных экзаменов, удлинение времени обучения в школе, интенсивное развитие системы негосударственного образования и т.д.) выводит проблему качества образования в ряд приоритетных государственных и общественных проблем.

Каждому вузу необходимо планировать качество образования. Планирование качества образования связано с разработкой долгосрочного направления деятельности образовательного учреждения. Мощное стратегическое планирование – один из наиглавнейших факторов успеха любого учреждения в системе образования.

 

Таблица 1

ТРАДИЦИОННЫЕ И ИННОВАЦИОННЫЕ СРЕДСТВА ОЦЕНКИ РЕЗУЛЬТАТОВ ОБУЧЕНИЯ

План

Введение в дисциплину «Современные средства оценивания результатов обучения».

Понятие о качестве образования.

Оценка как элемент управления качеством.

Традиционные и новые средства оценки результатов обучения.

Введение в дисциплину «Современные средства оценивания результатов обучения»

 

Проблема измерения и оценивания результатов обучения является одной из самых важных в педагогической теории и практике. Решение этой проблемы необходимо для оценки эффективности педагогических инноваций и технологий.

Сложность педагогических явлений, а также наличие большого числа факторов, в том числе случайных, которые влияют на педагогический процесс и его результаты, приводят к тому, что педагогический процесс нельзя рассматривать как полностью детерминированный. При самой совершенной организации педагогического процесса мы не можем однозначно предсказать, каковы будут результаты обучения для каждого отдельного ученика.

В связи с этим современная система образования выдвигает требование: каждый педагог должен стремиться к повышению объективности оценивания, использованию наряду с традиционными средствами контроля и инновационные достижения педагогической науки.

Цель дисциплины «Современные средства оценивания результатов обучения» – познакомить студентов с современными средствами оценки результатов обучения, методологическими и теоретическими основами тестового контроля, порядком организации и проведения единого государственного экзамена (ЕГЭ).

Задачи дисциплины:

1. рассмотреть методы конструирования и использования гомогенных педагогических тестов; методы шкалирования и интерпретации полученных результатов; компьютерные технологии, используемые в тестировании;

2. определить психологические и педагогические аспекты использования тестов для контроля знаний учащихся;

3. развить умение составления и оценивания результатов тестовых заданий по своему предмету.

Изучив дисциплину, вы узнаете:

· историю и современное состояние системы тестирования в России и за рубежом;

· традиционные и современные подходы к оценке учебных достижений;

· особенности тестовых технологий, виды и типы тестов, формы предтестовых заданий;

· различные методы оценивания результатов тестирования;

· нормативные документы, регламентирующие проведение ЕГЭ,

· структуру и содержание контрольно-измерительных материалов для ЕГЭ по своему предмету;

· процедуру проведения тестирования;

научитесь:

· давать экспертную оценку предтестовым заданиям, использовать на практике тесты разных видов;

· проводить тестирование и анализировать полученные данные в рамках классической и современной теории создания тестов;

овладеете:

· методами разработки занятий по подготовке учащихся к ЕГЭ по своему предмету;

· навыками обработки результатов тестирования.

Понятие «качество образования»

 

Слово «качество» производно от слов «как», «какой», «обладающий какими свойствами». В практике обычно пользуются одной из двух трактовок этого понятия – философской или производственной.

Понятие «качество образования» в его философской интерпретации может быть применено и к различным моделям образовательной практики и не несет никаких оценок (что хуже, что лучше), она фиксирует разное качество, разные свойства. В философии эта категория не носит оценочного характера, а потому философской трактовке качества бессмысленно ставить вопрос об измерении или иной оценке качества, низкого, высокого и т.д.

Как педагогическая проблема качество образования рассматривается с позиций квалитологии – триединой науки, включающей теорию качества, теорию оценки качества (квалиметрию) и теорию управления качеством. Качество образования как сложная категория и многоаспектная проблема может быть раскрыто через категории свойства, структуры, системы, количества, эффективности, оценки, управления и др. В этом случае В. Панасюк предлагает раскрывать категорию «качество» через следующие определения:

а) качество есть совокупность свойств (аспект свойства);

б) качество структурно: оно есть система свойств или качеств частей объекта или процесса (аспект структурности);

в) качество динамично (аспект динамичности);

г) качество есть существенная определенность объекта или процесса, внутренний момент, выражается в закономерный связи составляющих частей, элементов (аспект определенности);

д) качество – основа существования объекта или процесса. В этом аспекте оно раскрывается через категории свойства, структуры, системы, границы, целостности, изменчивости, количества (аспект внешневнутренней обусловленности);

е) качество создаваемых человеком объектов и процессов обладает ценностью (аксиологический аспект).

С учетом приведенных определений, качество образования может быть представлено как совокупность свойств, которая обусловливает приспособленность образования к реализации социальных целей по формированию и развитию личности в аспектах ее обученности, воспитанности, выраженности социальных, психических и физических свойств.

Концепция качества образования появляется уже на этапе формирования религиозных образовательных систем. Именно в эту эпоху происходит формирование представлений об образовании как особого рода духовной практике, достоинства которой определяются мерой присутствия духовного первоначала в образовательной среде. Соответственно, качество религиозного образования определялось степенью соответствия индивидуальной духовной практики – зафиксированным в тех или иных метафизических текстах представлениям о религиозном идеале. Средством выявления этого соответствия становились испытания, делавшие получение признания в новом качестве не только престижным, но и опасным делом.

Постепенно, развитие общества и государства сопровождалось постепенной десакрализацией и, в определенном смысле, «демократизацией» религиозного знания. Эти процессы многократно ускорились после череды расколов Церкви, произошедших в XIV – XVII веках, одним из результатов которых стало утверждение Реформации. Именно в контексте этого общественного и культурного процесса, индивидуальная способность к чтению, пониманию и толкованию Библии оказалась всеобщей и обязательной нормой. В это же время в европейском общественном сознании формируются ставшие столь привычными для нас идеи всеобщности и обязательности образования.

Феномен «качества образования» в тот период может быть представлен понятием «грамотность». Вне зависимости от происхождения и предполагаемого рода занятий, умения читать, писать, выполнять простейшие математические действия становятся обязательным условием любой профессиональной карьеры. Таким образом, «грамотность» связывается не столько с «простейшим» уровнем образованности, но – с достижением общественного согласия относительно «образовательного ценза» каждого правоспособного гражданина.

Именно в этот период возникает пятибалльная система, ориентированная на оценку индивидуальных достижений по отдельным предметам.

Параллельно с этой линией развития образования в Средневековье складывается целый ряд относительно самостоятельных образовательных практик, обеспечивающих воспроизводство цеховой и сословной организации общества. В современном понимании, мы можем говорить о «профессиональном образовании», понимая, что само понятие «профессия» принадлежит гораздо более позднему историческому периоду (не ранее XIX века).

Если попытаться определить наиболее значимый аспект качества образовательной практики в условиях цехового разделения труда, то мерилом качества образования такого рода выступает «мастерство» как особого рода сплав духовных традиций, секретов успешной и эффективной деятельности, индивидуальных способностей и общественной необходимости в сохранении соответствующего производства.

Категория мастерства оказывается системообразующей и в отношении методов диагностики качества образования: наиболее адекватной формой профессиональных испытаний оказывается специально организованный конкурс, в рамках которого идеал не познается, но создается в условиях соперничества между представителями цеха.

Все перечисленные подходы к определению качества образования в той или иной степени участвовали в формировании современных представлений о качестве образования в системе профессионального педагогического образования.

Понятие «качество образования» носит динамический характер: оно изменчиво во времени, различно по уровням образования, типам и видам образовательных учреждений, по-разному понимается субъектами образовательной деятельности, потребителями и заказчиками.

В педагогической теории исследованы различные аспекты качества образования: качество знаний, качество обучения, результаты образовательной деятельности; даны трактовки данного понятия с точки зрения дидактики, педагогики, психологии, методологии; вводятся новые категории, определяющие качество, – функциональная грамотность, образованность, компетенция.

Таким образом, можно говорить о многоаспектности этого понятия как применительно к образованию человека, так и применительно к уровням управления качеством.

Обсуждение понятия «качество образования» ведется на протяжении многих лет. Итогом всех этих дискуссий стал вывод о том, что дать однозначное определение понятию «качество образования» просто невозможно. Однако для практических целей под качеством образования решили понимать изменения в учебном процессе и в среде, окружающей обучаемого, которые можно идентифицировать как улучшение знаний, умений и ценностей, приобретаемых обучаемым по завершению определенного этапа.

Существующие подходы к определению качества образования Г.В. Гутник предлагает классифицировать следующим образом:

- эмпирическое определение качества образования (им пользуются, например, родители при выборе образовательного учреждения для своего ребенка);

- формально-отчетное определение процента успевающих на «4» и «5» при общем уровне успеваемости (такое определение часто фигурирует во многих показательных данных образовательного учреждения);

- дидактическое (определение уровня обученности на основе тестовых технологий);

- психолого-дидактическое (к предметным тестам добавляются психологические);

- педагогическое (определение качества образования включает в себя оценку уровня воспитанности);

- процессуальное (оценка качества образования по параметрам учебного процесса);

- комплексное (в оценку качества образования включаются материальная база, кадровый состав, программы, формы и методы работы и т.д.);

- многопараметрическое определение качества образования (используется для оценки вузовского образования и региональных образовательных систем);

- методологическое определение (качество образования – это соотношение операционально заданной цели и результата).

По мнению А.Г. Бермуса, качество результатов образования предполагает наличие нескольких систем представлений о результативности. Качество может быть определено с точки зрения

- государства (соответствие результатов образования – нормативным документам);

- общества (соответствие результата образования – потребностям рынка труда);

- личности (соответствие результата образования – ожиданиям).

Некоторое непонимание значения качества усиливается из-за того, что оно может использоваться как абсолютное, так и относительное понятие. Качество в обыденном, житейском понимании используется главным образом как понятие абсолютное. Люди используют его, например, при описании дорогих ресторанов (качество услуг) и роскошных вещей (качество продукции).

При использовании в бытовом контексте предметы, которым дается качественная оценка с точки зрения абсолютного понятия, представляют собой наивысший стандарт, который невозможно, как негласно предполагается, превзойти. К качественной продукции относятся совершенные предметы, выполненные без ограничения затрат на них. Редкость и дороговизна – две отличительные черты этого определения. В этом смысле качество используется для отражения статуса и превосходства. Владение предметами «качества» выделяет их владельцев среди тех, кто не может себе позволить обладать ими.

При использовании в образовательном контексте понятие «качество» приобретает существенно иной смысл. Абсолютное понятие «высокого качества» не имеет ничего общего с системой управления качеством в образовании. Тем не менее, в ходе дискуссий по управлению качеством часто возникает вопрос о его абсолютном значении, имеющем ауру роскоши и высокого статуса. Это идеализированное использование понятия может оказаться полезным для общественных связей, может содействовать образовательному учреждению в улучшении его имиджа. Оно также демонстрирует значение повышения качества как стремление к наивысшим стандартам.

Качество также используется как понятие относительное. В этом случае качество не является атрибутом продукции или услуги. Оно является чем-то, что приписано ему. О качестве можно судить, когда продукция или услуга отвечает требованиям соответствующих ей стандартов или спецификации.

Качество как понятие относительное имеет два аспекта: первый – соответствие стандартам или спецификации, второй – соответствие запросам потребителя.

Первое «соответствие» часто означает «соответствие цели или применению». Иногда его называют качеством с точки зрения производителя. Под качеством продукции или услуги производитель понимает постоянно отвечающую требованиям стандартов или спецификации производимую им продукцию или оказываемую им услугу. Качество демонстрируется производителем в виде системы, известной как система гарантии качества, которая дает возможность постоянно производить продукцию, услуги, соответствующие определенному стандарту или спецификации. Продукция демонстрирует качество столько времени, сколько этого от нее требует производитель.

В связи с тем, что взгляды производителя и потребителя не всегда совпадают, возникает вопрос о том, кто должен решить, являются ли услуги вуза качественными. Часто случается, что превосходная и полезная продукция или услуги не воспринимаются потребителями как обладающие качеством. Особенно остро эта проблема стоит в области образования. Отказ от единой государственной системы обучения, от многих давно устоявшихся традиций и введение новых (тестирование при приеме в вузы вместо традиционных экзаменов, удлинение времени обучения в школе, интенсивное развитие системы негосударственного образования и т.д.) выводит проблему качества образования в ряд приоритетных государственных и общественных проблем.

Каждому вузу необходимо планировать качество образования. Планирование качества образования связано с разработкой долгосрочного направления деятельности образовательного учреждения. Мощное стратегическое планирование – один из наиглавнейших факторов успеха любого учреждения в системе образования.