Организация проверки развернутых ответов

 

3.1. Методика оценивания развернутых ответов

3.1. Развернутые ответы участников экзаменов оцениваются двумя экспертами ПК (первая и вторая проверки).

3.2. По результатам первой и второй проверок эксперты ПК, независимо друг от друга, выставляют баллы за каждый ответ на задания экзаменационной работы ЕГЭ с развернутым ответом, за каждый ответ на задания экзаменационной работы ГВЭ. Результаты каждого оценивания вносятся в протокол проверки развернутых ответов участников экзаменов. Протоколы проверки экзаменационных работ после заполнения передаются в РЦОИ для дальнейшей обработки.

3.3. В случае установления существенного[3] расхождения между баллами, выставленными двумя экспертами ПК, работа направляется на третью проверку.

3.4. Эксперт ПК, который будет осуществлять третью проверку экзаменационной работы, оцененной двумя экспертами ПК с существенной разницей, назначается автоматизированно (с использованием специализированных аппаратно-программных средств РЦОИ) из числа экспертов ПК, которым в текущем году присвоен статус «ведущий эксперт ПК» или «старший эксперт ПК», ранее не проверявших данную экзаменационную работу.

3.5. Эксперту ПК, осуществляющему третью проверку, предоставляется информация о баллах, выставленных экспертами ПК, ранее проверявшими экзаменационную работу.

3.6. Эксперт ПК, осуществляющий третью проверку, проверяет и выставляет баллы за выполнение всех заданий с развернутым ответом, позиции оценивания по которым в бланке-протоколе не заполнены автоматизированно при распечатке бланка-протокола.

3.7. Распределение работ участников экзаменов  между экспертами ПК, расчет баллов по каждому заданию экзаменационной работы ЕГЭ с развернутым ответом, а также определение необходимости направления экзаменационной работы на третью проверку осуществляются автоматизированно с использованием специализированных аппаратно-программных средств РЦОИ и уполномоченной Рособрнадзором организации (ФЦТ).

3.8. Расчет окончательной отметки за работу ГВЭ осуществляется экспертом ПК
в соответствии с критериями оценивания ответов на задания ГВЭ по соответствующему учебному предмету и фиксируется в протоколе, который затем передается в РЦОИ для дальнейшей обработки.

3.9. Председатель ПК заблаговременно направляет в ОИВ информацию
о необходимости принятия локальных актов,  содержащих перечень технических средств
и справочных материалов на бумажных носителях, разрешенных к использованию экспертами ПК по соответствующему учебному предмету.

3.10. Не позднее чем за один месяц до начала проведения экзаменов председатель ПК передает руководителю РЦОИ списочный состав ПК для внесения в РИС информации об экспертах ПК.

3.11. Не позднее чем за 14 календарных дней до начала проведения обработки ЭМ председатель ПК и руководитель РЦОИ согласуют график работы ПК в период проведения обработки ЭМ по соответствующему учебному предмету с учетом требований к срокам обработки ЭМ, установленных Порядком. Данная информация используется РЦОИ для назначения в РИС экспертов ПК на проверку экзаменационных работ.

3.12. Списочный состав ПК, направляемый в РЦОИ для внесения в РИС, должен соответствовать списочному составу ПК, указанному в соответствующем распорядительном акте ОИВ и содержать информацию о статусе каждого эксперта ПК («основной эксперт ПК», «старший эксперт ПК», «ведущий эксперт ПК») для корректного назначения экспертов ПК на соответствующие проверки.

3.13. Председатель ПК согласует с руководителем РЦОИ график работы экспертов ПК, проводящих проверку изображений экзаменационных работ, предположительно не заполненных участниками экзаменов (ЕГЭ): бланков ответов № 2, дополнительных бланков ответов № 2.

3.14. К проверке принимаются письменные развернутые ответы участников экзаменов (ЕГЭ), выполненные только на бланках ответов № 2 и дополнительных бланках ответов № 2, установленной Рособрнадзором формы, и заполненные в соответствии
с Правилами заполнения бланков ЕГЭ.

3.15. В рамках проверки экзаменационных работ (ЕГЭ) ПК по соответствующему учебному предмету экспертами ПК могут быть выявлены экзаменационные работы, в которых:

а) бланк ответов № 2 (лист 1) и бланк ответов № 2 (лист 2) содержат знаки «Z»[4];

б) развернутые ответы, оформленные на бланке ответов № 2 (лист 1 и (или) лист 2) и (или) на дополнительных бланках ответов № 2, расположены на фоне проставленного знака «Z»;

в) пространство, разделяющее развернутые ответы одной экзаменационной работы, занимает страницу или более (например, развернутые ответы оформлены на бланке ответов № 2 (лист 1) и на дополнительном бланке ответов № 2, при этом бланк ответов № 2 (лист 2) остался незаполненным, а также другие подобные случаи).

Во всех описанных выше случаях (а также при выявлении подобных случаев) эксперту ПК необходимо произвести оценивание работы по критериям оценивания в полном объеме.

При выявлении случаев, указанных в подпунктах «б» и «в» подпункта 3.15 настоящих Методических рекомендаций, а также других случаев, свидетельствующих о возможном нарушении Порядка, эксперту ПК необходимо проинформировать председателя ПК, который, в свою очередь, информирует председателя ГЭК о выявленной экзаменационной работе с указанием всей необходимой информации об указанной экзаменационной работе. Председатель ГЭК рассматривает информацию, полученную от председателя ПК. В данном случае ГЭК рекомендуется провести служебную проверку по указанному выше факту в целях исключения нарушения пункта 64 Порядка, а именно выполнение участником экзамена экзаменационной работы несамостоятельно, с помощью посторонних лиц[5].

3.16. Председатель ПК до начала работы ПК получает от руководителя РЦОИ критерии оценивания развернутых ответов, а также дополнительные схемы оценивания ответов при проверке ответов по иностранным языкам, полученные от уполномоченной Рособрнадзором организации (ФЦТ) в день проведения экзамена (или на следующий день после проведения экзамена при существенной разнице во времени субъекта Российской Федерации с московским временем), и проводит в течение не менее часа оперативное семинар-согласование подходов к оцениванию развернутых ответов участников экзаменов (ЕГЭ) на каждое из заданий с развернутым ответом, опираясь на полученные критерии. Рекомендуется провести повторное оперативное семинар-согласование подходов к оцениванию после проверки каждым экспертом ПК определенного количества первых экзаменационных работ для уточнения и конкретизации согласованных подходов к оцениванию.

3.17. В целях обеспечения согласованной работы экспертов ПК председатель ПК может назначить из числа экспертов ПК, имеющих статус «ведущий эксперт ПК» или «старший эксперт ПК», консультантов, к которым могут обращаться эксперты ПК при возникновении затруднений при оценивании развернутых ответов участников экзаменов. Рабочие места консультирующих экспертов должны быть организованы в помещениях для работы ПК таким образом, чтобы консультации не мешали работе других экспертов ПК.

3.18. В целях повышения уровня объективности оценивания развернутых ответов участников экзаменов председатель ПК или назначенный им эксперт ПК может использовать рабочие места, оборудованные выходом в информационно-телекоммуникационную сеть «Интернет», для предоставления экспертам ПК возможности уточнить и (или) проверить изложенные в экзаменационных работах участников экзаменов факты (например, сверка информации с источниками, проверка приведенных участниками ГИА фамилий, названий, фактов и т.п.).

3.19. Проверку развернутых ответов участников экзаменов эксперты ПК осуществляют, руководствуясь критериями оценивания развернутых ответов и согласованными в ПК подходами к оцениванию развернутых ответов.

3.20. Развернутые ответы участников экзаменов оцениваются двумя экспертами ПК независимо друг от друга. Оба эксперта ПК, проверяющие одну работу, выставляют баллы за каждый развернутый ответ или за каждую позицию оценивания (если ответ на задание оценивается по нескольким критериям) согласно критериям оценивания выполнения заданий с развернутым ответом.

3.21. Эксперт ПК, который оценивает письменные развернутые ответы участников экзаменов (ЕГЭ), получает рабочий комплект эксперта ПК, который содержит:

бланк-копия (не более 10 штук в одном рабочем комплекте);

бланк-протокол;

при проверке устных ответов по иностранным языкам – список работ на прослушивание и оценивание, сформированный посредством специализированного ПО, и бланк-протокол проверки экспертом ПК устных ответов (форма 3-РЦОИ-У). Бланк-копия является изображением бланка ответов № 2 участника экзамена (ЕГЭ) и дополнительных бланков ответов № 2, если они заполнялись участником экзамена (ЕГЭ), в регистрационной части которого указаны:

код бланка-копии;

информация об эксперте ПК, назначенном на проверку экзаменационных работ, включенных в данный рабочий комплект (фамилия, имя, отчество эксперта ПК, код эксперта ПК);

наименование учебного предмета;

дата проведения экзамена;

номер протокола и номер строки в протоколе, соответствующий данному коду бланка-копии;

номер варианта КИМ;

номер страницы и количество заполненных страниц участником ЕГЭ в бланке ответов № 2, включая дополнительные бланки ответов № 2;

код субъекта Российской Федерации;

баллы, выставленные двумя экспертами ПК, ранее проверявшими данную экзаменационную работу (в случае, когда экзаменационная работа направлена на третью проверку).

Бланк-протокол представляет собой таблицу, в которой указаны коды бланков-копий, включенных в полученный рабочий комплект, и поля для внесения экспертами ПК баллов за ответы.

В регистрационной части бланка-протокола указаны:

информация об эксперте ПК, назначенном на проверку бланка-копии (фамилия, имя, отчество эксперта ПК, код эксперта ПК);

наименование учебного предмета;

дата проведения экзамена;

номер протокола;

код субъекта Российской Федерации.

3.22. Бланк-протокол является машиночитаемой формой и подлежит обязательной автоматизированной обработке в РЦОИ.

3.23. Рабочие комплекты формируются (распечатываются) для каждого эксперта ПК в РЦОИ с учетом графика работы ПК.

3.24. Председатель ПК (или его помощник (и) – для больших ПК, размещенных в нескольких помещениях) получает готовые рабочие комплекты экспертов ПК от руководителя РЦОИ (или уполномоченного им сотрудника РЦОИ).

3.25. Эксперты ПК проводят проверку экзаменационных работ и выставляют баллы в соответствующие поля бланка-протокола в соответствии с критериями оценивания развернутых ответов. Рекомендуется использовать черновики бланков-протоколов,
не содержащие переменной информации: номеров работ, данных об эксперте ПК и т.п.),
в которые эксперты ПК выставляют баллы до их внесения в бланк-протокол.

3.26. В случае возникновения у эксперта ПК затруднения в оценивании экзаменационной работы эксперт ПК может получить консультацию у председателя ПК или консультирующего эксперта ПК, назначенного председателем ПК.

3.27. Номера наиболее характерных работ, вызвавших затруднения при оценивании, эксперт ПК фиксирует для передачи председателю ПК.

3.28. После завершения проверки работ каждого рабочего комплекта заполненный бланк-протокол и бланки-копии рабочего комплекта председатель ПК (или его помощник(и) – для больших ПК) передают в РЦОИ для дальнейшей обработки. Передача из ПК в РЦОИ заполненных бланков-протоколов и обработка их в РЦОИ должна проводиться регулярно по мере заполнения экспертами ПК бланков-протоколов, не реже 3-4 раз в день.

После проведения автоматизированной обработки каждого отдельного бланка-протокола в РЦОИ могут быть выявлены экзаменационные работы, требующие третьей проверки.

3.29. В случае направления экзаменационной работы на третью проверку, в регистрационной части бланка-копии такой работы, для сведения эксперта ПК, назначенного на третью проверку, указываются баллы, выставленные двумя экспертами ПК, проверявшими эту работу ранее. Эксперт ПК, назначенный на третью проверку, проводит оценивание по тем позициям оценивания, которые указаны в бланке-протоколе. Позиции оценивания, которые эксперт ПК, назначенный на третью проверку, не проверяет, в протоколе заполнены автоматизированно.

 3.30. На протяжении периода работы ПК председатель ПК и (или) его заместитель фиксирует у себя номера экзаменационных работ, вызвавших наибольшие разногласия или трудности у экспертов ПК при оценивании (на основании экзаменационных работ, проверенных собственноручно и (или) экзаменационных работ, номера которых фиксировали эксперты ПК в процессе оценивания). Информацию о номерах таких экзаменационных работ необходимо будет передать в уполномоченную Рособрнадзором организацию (ФИПИ) после получения соответствующего запроса. Данные экзаменационные работы будут проанализированы и использованы для совершенствования критериев оценивания, проведения обучения экспертов ПК и согласования подходов к оцениванию экзаменационных работ.

3.31. В период работы ПК руководитель РЦОИ предоставляет председателю ПК статистическую информацию о ходе проверки развернутых ответов (не реже 2-3 раз
в день). При этом председателю ПК предоставляется оперативная информация:

о количестве проверенных экзаменационных работ на текущий момент времени;

о количестве экзаменационных работ, ожидающих первой, второй или третьей проверки;

о количестве и доле экзаменационных работ, назначенных на третью проверку;

другая информация, позволяющая определить качество работы ПК и необходимость проведения дополнительных согласований с экспертами ПК.

Результаты статистических отчетов председатель ПК использует для оптимизации организации работы ПК.

3.32. При необходимости председатель ПК дает дополнительные разъяснения по вопросам согласованности работы ПК.

3.33. Председатель ПК направляет в ГЭК информацию о случаях нарушения экспертом ПК требований Порядка, а именно недобросовестное выполнение возложенных на него обязанностей, использование статуса эксперта ПК в личных целях, а также игнорирование согласованных подходов к оцениванию экзаменационных работ, систематическое допущение ошибок в оценивании экзаменационных работ или нарушение процедуры проведения проверки. В указанных случаях председатель ПК имеет право отстранить эксперта ПК от работы в ПК, окончательное решение по вопросу исключения эксперта ПК из состава ПК принимает ОИВ после проведенного ГЭК рассмотрения ситуации.

3.34. При проведении межрегиональной перекрестной проверки экзаменационные работы участников экзаменов, полученные из другого субъекта Российской Федерации, проверяются экспертами ПК в общей очереди работ участников экзаменов. При этом экспертам ПК не предоставляется информация о том, экзаменационные работы из какого субъекта Российской Федерации были назначены им на проверку. Также экспертам ПК не предоставляется информация о том, включены ли в рабочий комплект, назначенный эксперту ПК на проверку, экзаменационные работы, полученные в рамках межрегиональной перекрестной проверки.

3.35. В период работы ПК с момента получения критериев оценивания развернутых ответов из РЦОИ до окончания проверки развернутых ответов участников экзаменов все помещения работы ПК, включая помещение, в котором проводится семинар-согласование с разбором заданий и критериев оценивания развернутых ответов, должны быть оборудованы функционирующей системой непрерывного видеонаблюдения и видеозаписи.

3.36. При выходе каждый эксперт ПК сдает все материалы, в том числе полученные критерии оценивания развернутых ответов, лицу, обеспечивающему учет экземпляров критериев оценивания развернутых ответов, назначенному ОИВ.

3.37. При выявлении экспертом ПК случаев, свидетельствующих о нарушении или возможном нарушении участником экзамена – автором проверяемой экспертом ПК экзаменационной работы – Порядка (например, выявлен факт выполнения экзаменационной работы несамостоятельно, наличие предположительно разных почерков, решение заданий разных вариантов, текст работы совпадает с текстом в других работах или опубликованных источниках, т.п.), а также случаев, указанных в подпунктах «б» и «в» подпункта 3.15 настоящих Методических рекомендаций, эксперт ПК уведомляет об обнаруженном факте председателя ПК.

Совместно с председателем ПК (при необходимости, с другими экспертами ПК, обнаружившими указанные факты) составляет акт в свободной форме с указанием номера экзаменационной работы и описанием обнаруженных фактов. Председатель ПК направляет служебную записку с приложением указанного акта председателю ГЭК для проведения служебного расследования и принятия решения. Эксперт ПК, обнаруживший указанные факты, оценивает работу в полном объеме в соответствии с критериями оценивания развернутых ответов, кроме случаев, указанных в критериях оценивания развернутых ответов и Указаниях по оцениванию (памятках экспертов, включенных в состав критериев).

3.38. В случае невозможности экспертом ПК оценить развернутые ответы участника экзамена по причине проблем технического характера (нечеткая печать, некачественное сканирование работы, некачественная запись устного ответа и т.п.), эксперт ПК уведомляет об этом председателя ПК. Совместно с председателем ПК составляется акт в свободной форме с указанием номера работы и описанием проблемы. Председатель ПК направляет служебную записку с приложением указанного акта руководителю РЦОИ для устранения причин, не позволяющих оценить экзаменационную работу. В случае если проблемы технического характера (например, некачественная запись устного ответа и т.п.) не удалось решить председатель ПК совместно с руководителем РЦОИ составляет акт в свободной форме с указанием номера работы и описанием обнаруженных фактов, который незамедлительно направляется председателю ГЭК для проведения служебного расследования и принятия решения.

3.39. Проверка развернутых ответов участников экзаменов считается завершенной, когда все экзаменационные работы проверены экспертами ПК необходимое количество раз (определяется ПО РЦОИ), а результаты оценивания из бланков-протоколов проанализированы ПО РЦОИ.

3.40. По завершении работы каждый эксперт ПК сдает все материалы, в том числе полученные критерии оценивания развернутых ответов, лицу, обеспечивающему учет экземпляров критериев оценивания развернутых ответов, назначенному ОИВ.