09.01.2021
Сканирование и распознавание материалов. Сканирование и распознавание материалов Чем руководствуются эксперты при оценивании эр
Трехуровневая система согласования подходов к оцениванию Согласование на ФУ 1) Единые критерии оценивания 2) Обучение ведущих экспертов в рамках ПК ФИПИ 3) Согласование позиций председателей ПК (семинары ФИПИ) Согласование на РУ 1) Обучение членов ПК ведущими экспертами 2) Использование УММ, разработанных ФИПИ 3) Отбор на основе анализа согласованности проверки Оперативное согласование 1) Обсуждение критериев оценивания в день экзамена (согласование подходов) 2) Консультиро- вание в ходе проверки
1. Проведение обучения, включая практику и согласование подходов к оцениванию на региональном уровне под руководством председателя ПК 2. Проведение квалификационного испытания, присвоение экспертам статусов: старший, основной Не прошедшие квалификационное испытание не включаются в состав ПК 3. Учет результатов анализа работы ПК, параметров согласованности работы комиссии и каждого эксперта отдельно в т.ч. в процессе проверки Формирование ПК в субъектах РФ
Статусы экспертов ПК Ведущий эксперт статус, позволяющий быть председателем или заместителем председателя ПК, осуществлять руководство подготовкой и/или подготовку экспертов на региональном уровне, участвовать в межрегиональных перекрестных проверках, привлекаться к рассмотрению апелляций по учебному предмету, осуществлять проверку и перепроверку развернутых ответов участников ГИА в составе ПК, в том числе в качестве третьего эксперта Старший эксперт статус, позволяющий осуществлять проверку и перепроверку выполнения заданий с развернутым ответом ГИА в составе ПК, в том числе назначаться для третьей проверки выполнения заданий с развернутым ответом ГИА, участвовать в межрегиональных перекрестных проверках, а также в проверках в рамках рассмотрения апелляции о несогласии с выставленными баллами Основной эксперт статус, позволяющий осуществлять первую или вторую проверку выполнения заданий с развернутым ответом ГИА, участвовать в межрегиональных перекрестных проверках в составе ПК
Подготовительный этап работы ПК Председателем ПК отбор экспертов-кандидатов на включение состава ПК (далее – эксперты-кандидаты), эксперты-кандидатуры должны соответствовать требованиям действующей нормативной базы; Ознакомление председателя ПК с документацией, содержащей статистическую и аналитическую информацию о проведении и обработке/проверке материалов предыдущего сезона проведения ГИА; Ознакомление председателя ПК и экспертов-кандидатов со спецификациями и демоверсиями экзаменационных материалов ГИА, которые планируется использовать при проведении ГИА; Участие председателя ПК и экспертов-кандидатов в мероприятиях регионального и федерального уровня по вопросам организации, формирования и работы ПК, согласования подходов к оцениванию;
Подготовительный этап работы ПК Определение председателем ПК порядка проведения квалификационных испытаний для экспертов-кандидатов, определение пороговых значений результатов квалификационных испытаний для экспертов-кандидатов; Проведение председателем ПК установочных семинаров, а также семинаров по согласованию подходов к оцениванию экзаменационных работ; Проведение председателем ПК квалификационных испытаний для экспертов-кандидатов на включение в состав ПК, установление статусов для каждого эксперта, включаемого в состав ПК; Представление председателем ПК списков экспертов, включаемых в состав ПК в ОИВ для утверждения; формирование и согласование председателем ПК с руководителем РЦОИ графика работы экспертов с указанием их статусов для корректного распределения работ между экспертами ПК.
С методическими материалами Рособрнадзора по формированию и организации работы предметных комиссий; с планом-графиком (приложение к методическим материалам); под руководством ведущих экспертов, в соответствии с едиными подходами к оцениванию, согласованных на очных семинарах в ФИПИ; с использованием комплектов пособий (Учебно-методические материалы для председателей и членов региональных предметных комиссий по проверке выполнения заданий с развернутым ответом экзаменационных работ ЕГЭ). Мероприятия по подготовке экспертов в субъектах РФ проводятся в соответствии:
Информационное и организационно-технологическое обеспечение деятельности ПК осуществляет РЦОИ Председатель ПК согласует с руководителем РЦОИ график работы экспертов ПК, проводящих проверку незаполненных участниками ЕГЭ бланков ответов 2, дополнительных бланков ответов 2 Общее руководство и координацию деятельности ПК по соответствующему учебному предмету осуществляет ее председатель Организация работы ПК
Предметные комиссии работают в помещениях, исключающих возможность допуска к ним посторонних лиц и распространение информации ограниченного доступа. В РЦОИ и помещениях ПК присутствуют: o члены ГЭК – по решению председателя ГЭК o общественные наблюдатели o должностные лица Рособрнадзора o уполномоченные представители ОИВ субъекта РФ
Организация работы ПК в период проведения проверки Проведение оперативного согласования подходов к оцениванию экзаменационных работ внутри ПК, основанное на ранее выработанных подходах с учетом специфики заданий, предложенных участникам ГИА на экзамене. Отбор незаполненных бланков ответов 2 экспертами ПК для исключения из массива работ, проверяемых ПК. Непосредственно проверка развернутых ответов участников ГИА экспертами ПК
Правила для экспертов Запрещается: копировать и выносить экзаменационные работы, критерии оценивания, протоколы проверки разглашать посторонним лицам информацию, содержащуюся в материалах иметь при себе средства связи, фото-, видео- и аудиоаппаратуру В случае установления факта нарушения экспертом указанных требований ГЭК принимает решение об исключении эксперта из состава предметной комиссии
Распределение работ участников ЕГЭ между экспертами ПК, расчет баллов по каждому заданию экзаменационной работы ЕГЭ с развернутым ответом, а также определение необходимости проверки третьим экспертом осуществляются автоматизированной, с использованием специализированных аппаратно-программных средств РЦОИ Третий эксперт проверяет и выставляет баллы за выполнение всех заданий с развернутым ответом, позиции оценивания по которым в бланке-протоколе не заполнены знаком «Х» В случае установления существенного расхождения в баллах, выставляемых двумя экспертами, назначается дополнительная третья проверка Развернутые ответы участников ГИА оцениваются двумя экспертами (первая-вторая проверки) Организация работы предметной комиссии
Методика оценивания развернутых ответов экзаменационных работ участников ЕГЭ К проверке принимаются развернутые ответы участников ЕГЭ, выполненные только на бланках ответов 2 и дополнительных бланках ответов 2, установленных Рособрнадзором Развернутые ответы участников ГИА оцениваются двумя экспертами ПК независимо. Оба эксперта, проверяющие одну работу, независимо выставляют баллы за каждый развернутый ответ или за каждую позицию оценивания (если ответ на задание оценивается отдельно по каждой позиции оценивания) согласно критериям оценивания выполнения заданий с развернутым ответом
Рабочий комплект эксперта ПК при оценке развернутых ответов содержит: обезличенные бланки-копии (форма 2-РЦОИ) с изображениями развернутых ответов участников участника ЕГЭ (далее – бланк-копия) – не более 20 штук в одном рабочем комплекте обезличенные бланки-копии (форма 2-РЦОИ) с изображениями развернутых ответов участников участника ЕГЭ (далее – бланк-копия) – не более 20 штук в одном рабочем комплекте бланк-протокол (форма 3-РЦОИ) проверки экспертом развернутых ответов участников ЕГЭ (далее – бланк-протокол); при проверке устных ответов по иностранным языкам: список работ на прослушивание и оценивание, сформированный посредством специализированного ПО и машиночитаемый протокол проверки устных ответов
Методика оценивания развернутых ответов экзаменационных работ участников ЕГЭ Проверка развернутых ответов участников ГИА считается завершенной, когда результаты оценивания из бланков-протоколов проанализированы программным обеспечением РЦОИ все работы были проверены экспертами необходимое количество раз
Введение системы консультирования экспертов (выделение отдельной категории экспертов, консультирующих других экспертов при возникновении затруднений в оценивании работ) Мониторинг процесса проверки председателем (оперативный отчет из РЦОИ) Организаци я отдельного рабочего места с возможностью выхода в сеть Интернет Система методической поддержки председателей ПК Федеральным и комиссиями разработчиков («горячая линия», форум на сайте ФИПИ) Организация работы ПК
Первая-вторая проверки Третья проверка при наличии существенного расхождения в оценивании при проведении 1-2 проверок Проведение межрегиональных перекрестных проверок Проверки устных ответов участников экзамена При основной обработке и проверке работ ЕГЭ Проверки при рассмотрении апелляций Выборочные перепроверки регионального и федерального уровней Виды проверок, осуществляющиеся предметными комиссиями субъектов РФ
Не является членом конфликтной комиссии (только привлекается к рассмотрению апелляции) Не является экспертом, проверявшим работу данного апеллянта ранее Имеет статус старшего или ведущего эксперта в ПК Осуществлял первую-вторую проверки экзаменационных работ при основной проверке в текущем году Требования к эксперту ПК, привлекаемому к рассмотрению апелляций Проверки при рассмотрении апелляций
Оценивает развернутые ответы апелляционной работы Присутствует при рассмотрении апелляции Дает разъяснения апеллянту или его законному представителю по сути оценивания любых заданий (при возникновении вопросов): развернутых ответов Функции эксперта ПК при рассмотрении апелляций Проверки при рассмотрении апелляций КК обращается в ФИПИ с запросом о предоставлении разъяснений по критериям оценивания (в случае, если привлеченные эксперты ПК не дают однозначного ответа о правильности оценивания экзаменационной работы апеллянта)
Раздел из рекомендованного ФИПИ регионального отчета 1) Анализ работы предметной комиссии по проверке заданий с развернутым ответом: o согласованности проверки (в 2015 г. и динамика за последние 3 года) o типичных затруднений в оценивании o статистики удовлетворенных апелляций 2) Рекомендации по совершенствованию работы региональных предметных комиссий Отбор экспертов для работы в ПК Дополнения в методические материалы по подготовке экспертов Назначение старших экспертов Анализ работы предметных комиссий ЕГЭ-2015
Работа со станцией экспертизы начинается после завершения верификации бланков ответов № 2.
Координатор станции экспертизы фиксирует наличие возможно пустых бланков, определенных программой.
Проверка изображений предположительно пустых бланков проводится двумя экспертами ПК.
По указанию администратора проекта о начале подготовки работ для экспертизы, координатор экспертизы начинает печать рабочих комплектов для каждого из экспертов ПК, назначенных на данный экзамен в соответствии с РИС.
Рабочий комплект эксперта ПК содержит:
обезличенные бланки-копии (Форма 2-РЦОИ ) с ответами участников ЕГЭ на задания экзаменационной работы с развёрнутым ответом (далее бланки-копии);
бланк-протокол (^ Форма 3-РЦОИ ) проверки экзаменационных работ участников ЕГЭ (далее бланк-протокол).
Бланк-протокол проверки ответов участников ЕГЭ на задания с развернутым ответом является машиночитаемой формой и подлежит обязательной автоматизированной обработке.
Рабочие комплекты формируются для каждого эксперта с учетом графика работы ПК.
Руководитель РЦОИ до начала проверки экзаменационных работ передает председателю ПК критерии для оценивания развернутых ответов, полученные не позднее 15:00 по московскому времени в день проведения экзамена от ФЦТ.
Подготовленные рабочие комплекты передаются руководителем РЦОИ или ответственным сотрудником РЦОИ представителям Государственного бюджетного учреждения Калининградской области «Региональный центр образования», уполномоченным приказом Министерства образования Калининградской области за организацию проверки развернутых ответов, которые организуют передачу материалов председателю ПК в день проведения экспертизы.
Эксперты проводят проверку экзаменационных работ и выставляют баллы в соответствующие поля бланка-протокола в соответствии с «Правилами по работе предметной комиссии при проверке развернутых ответов участников ЕГЭ» (Приложение № 24) и с критериями оценивания развернутых ответов.
После завершения проверки экзаменационных работ каждого комплекта, заполненный бланк-протокол и бланки-копии рабочего комплекта передаются на обработку в РЦОИ.
Направление работ на третью проверку производится в автоматическом режиме станцией экспертизы.
На бланке-копии работы, назначенной на третью экспертизу, в регистрационной части указываются баллы, выставленные двумя предыдущими экспертами за те ответы, которые требуют третьей проверки.
Проверка ответов участников ЕГЭ на задания экзаменационной работы с развернутым ответом считается завершенной, когда все работы были проверены экспертами необходимое количество раз, а результаты оценивания из бланков-протоколов проанализированы ПО станции экспертизы.
При проверке экзаменационных работ участников ЕГЭ возможна организация обмена экзаменационными работами участников ЕГЭ между субъектами РФ (далее – межрегиональная перекрестная проверка).- ^
Завершение экзамена и получение результатов
РЦОИ завершает обработку бланков ЕГЭ, включая проверку ответов на задания экзаменационной работы с развернутым ответом предметными комиссиями:
по русскому языку и математике - не позднее шести календарных дней после проведения соответствующего экзамена;
по остальным общеобразовательным предметам - не позднее четырех календарных дней после проведения соответствующего экзамена;
по экзаменам, проведенным в дополнительные сроки, - не позднее трех календарных дней после проведения соответствующего экзамена.
После завершения процесса первичной обработки бланков ЕГЭ по каждому общеобразовательному предмету администратор проектов с помощью станции Управления БД завершает процесс обработки материалов экзамена в РЦОИ. Полученные в результате обработки данные в РИС ЕГЭ автоматически передаются в ФЦТ для проведения централизованной проверки и расчета результатов в первичных и тестовых баллах.
В досрочный период проведения ЕГЭ результаты рассчитываются только в первичных баллах. В тестовые баллы результаты пересчитываются в основной период.
Централизованная проверка завершается не позднее, чем через пять рабочих дней с момента получения результатов обработки бланков ЕГЭ из всех субъектов РФ.
Результаты ЕГЭ каждого участника автоматически передаются из ФИС в РИС ЕГЭ.
РЦОИ организует формирование электронных файлов-ведомостей и/или распечатку ведомостей с результатами участников ЕГЭ для утверждения ГЭК и организации информирования в трехдневный срок участников ЕГЭ.- ^
Обработка апелляций о нарушении установленного порядка проведения ЕГЭ
После рассмотрения апелляции о нарушении установленного порядка проведения ЕГЭ, КК передает в ГЭК и руководителю РЦОИ копию протокола служебного расследования апелляции о нарушении установленного Порядка проведения ЕГЭ с оформленным решением в течение двух рабочих дней.
Полученные оформленные протоколы рассмотрения апелляций руководитель РЦОИ передает ответственному за обработку апелляций и коррекций сотруднику РЦОИ.
Ответственный за обработку апелляций сотрудник РЦОИ вносит в станцию апелляций и коррекций результаты рассмотрения апелляций, включая вложения изображений необходимой апелляционной документации. Обработанные апелляции автоматически передаются на обработку в ФЦТ и регистрируются в ФИС ЕГЭ.
Результаты обработки апелляций из ФИС автоматически передаются в РИС ЕГЭ.
В случаях, требующих уточнений, ФЦТ направляет соответствующий программный запрос на данную апелляцию. В этом случае сотрудник, ответственный за обработку апелляций и коррекций в РЦОИ, предоставляет запрашиваемую информацию путем внесения ее в ПО.
В случае удовлетворения апелляции о нарушении установленного порядка проведения ЕГЭ, результат апеллянта отменяется, и данная информация передается в РИС.
Информация о результатах рассмотрения апелляции КК передается в РЦОИ для передачи в ФЦТ в течение двух календарных дней с момента принятия решения КК.
Эксперты должны:
5.1. на подготовительном этапе пройти обучение и подтвердить квалификацию в соответствии с требованиями установленного порядка проведения ГИА, методических материалов ФИПИ, а также нормативных и методических материалов ОИВ.
5.2. заблаговременно пройти инструктаж по содержанию и технологии оценивания развернутых ответов, в сроки, определяемые председателем ПК;
Эксперты, не подтвердившие квалификацию и/или не прошедшие инструктаж, к проверке развернутых ответов не допускаются;
5.3. во время проверки развернутых ответов
5.3.1. по указанию председателя ПК занять рабочие места в предоставленных аудиториях;
5.3.2. получить рабочие комплекты для проверки;
5.3.3. соблюдать дисциплину во время работы;
5.3.4. во время работы экспертам запрещается:
Самостоятельно изменять рабочие места;
Пользоваться средствами связи, фото и видеоаппаратурой, портативными персональными компьютерами (ноутбуками, КПК и другими);
Без уважительной причины покидать аудиторию;
Переговариваться;
По завершении работы выносить рабочие комплекты и/или их части, а также критерии оценивания развернутых ответов;
Если у эксперта возникают вопросы или проблемы, он должен обратиться к председателю ПК или руководителю РЦОИ (его заместителю), которые решают их рамках своей компетенции;
5.3.5. начать проверку развернутых ответов, следуя следующим правилам:
Заполнять необходимые поля бланка-протокола следует печатными заглавными буквами черной гелевой ручкой строго внутри полей бланка-протокола;
Использование карандаша (даже для черновых записей), ручек со светлыми чернилами и замазки для исправления написанного недопустимо (наличие грифеля или замазки на сканируемом бланке может привести к серьезной поломке сканера);
Внесенные исправления должны однозначно трактоваться, все исправления зафиксированы и заверены подписью эксперта (соответствующие записи делаются внизу в бланке-протоколе);
Если участник ЕГЭ не приступал к выполнению задания, то в поле, в котором должен стоять балл за данный ответ на задание в бланке-протоколе, следует поставить метку «Х» ;
Если участник ЕГЭ приступал к выполнению задания, то в соответствующее поле (поля) бланка-протокола следует проставить соответствующий балл (баллы) от нуля до максимально возможного, указанного в критериях оценивания выполнения заданий с развернутым ответом;
Если участник ЕГЭ выполнял альтернативное задание, то в соответствующее поле бланка-протокола следует проставить номер выбранного участником ЕГЭ альтернативного задания;
5.3.6. после завершения заполнения бланка-протокола поставить дату, подпись в соответствующих полях бланка-протокола и передать рабочий комплект председателю ПК для передачи на обработку;
5.4. при экспертизе пустых бланков ответов № 2:
5.4.1. получить инструктаж от руководителя РЦОИ;
5.4.2. просматривать с экрана изображения пустых бланков ответов № 2;
5.4.3. при наличии на изображении записей, знаков, рисунков или пометок, которые могут быть расценены как ответ на задание с развернутым ответом или подтверждение того, что участник ЕГЭ приступал к выполнению задания или имел возможность его выполнить, но не выполнил по какой-то причине, удостоверить, что изображение заполнено ;
5.4.4. при отсутствии записей, относящихся к ответу на задания, удостоверить, что изображение не заполнено ;
5.4.5. изображения, определенные хотя бы одним из проверяющих экспертов, как заполненные, отправляются на проверку в ПК.
Изображения, определенные всеми проверяющими экспертами как незаполненные, относятся к разряду ответов на задания, к которым участник ЕГЭ не приступал. В этом случае автоматизированно посредством РИС ответы оцениваются в ноль баллов за выполнение каждого задания с развернутым ответом;
5.5. при рассмотрении апелляций о несогласии с выставленными баллами по ЕГЭ:
5.5.1. получить от председателя ПК копии бланков ответов № 2, бланков-протоколов проверки работ экспертами, критерии оценивания выполнения задания с развернутым ответом варианта КИМ, по которому сдавал экзамен участник ЕГЭ, подавший апелляцию;
5.5.2. рассмотреть работы апеллянта, а также проанализировать предыдущее оценивание работы;
5.5.3. узнать у председателя ПК время рассмотрения апелляции и прибыть в указанное время в КК;
5.5.4. в случае возникновения у апеллянта или у КК претензий к оцениванию развернутых ответов дать соответствующие разъяснения;
5.6. составить заключение о правильности оценивания развернутых ответов, по которым была подана апелляция;
5.7. в случае обнаружения ошибок или некорректных заданий в КИМ необходимо сообщить об этом председателю ПК с обязательным указанием номера варианта КИМ, задания и содержания замечания.
5.8. Решение о корректности задания и об изменении баллов участникам ЕГЭ в случае признания задания некорректным принимается на федеральном уровне. В случае признания задания некорректным, всем участникам ЕГЭ, которые выполняли данное задание, пересчитываются баллы в соответствии с распорядительным актом Рособрнадзора.
11.Верификация результатов распознавания
11.1. Верификация, т.е. проверка качества распознавания, осуществляется путем сравнения на экране монитора символов, внесенных в машиночитаемую форму (в машиночитаемые формы ППЭ, в бланки ЕГЭ или
в протокол проверки) с теми же символами, полученными в результате распознавания этих символов. Верификатор проверяет правильность распознавания символов в соответствии с «Правилами для оператора верификации» (Приложение 5) и, в случае необходимости, вносит исправления в перечень распознанных символов.
11.2. Верификатор начинает работу по указанию администратора
11.3. В случае возникновения ситуаций, не регламентированных «Правилами для оператора верификации», верификатор направляет пакет электронных бланков старшему верификатору для устранения проблемы.
11.4. Старший верификатор устраняет возникающие проблемы в обработке материалов ЕГЭ совместно или по указанию начальника смены.
11.5. Верификатор и старший верификатор удаляют из ответов участников символы, не являющиеся допустимыми для записи ответа на каждое конкретное задание в соответствии с «Перечнем допустимых символов, используемых для ответов на задания единого государственного экзамена», созданным на основании инструкций к каждому конкретному заданию, размещенных в КИМ в текущем году, и переданным ФЦТ через технологический портал.
12.Обеспечение процедуры проверки развернутых ответов участников ЕГЭ
12.1. Проверку развернутых ответов участников ЕГЭ осуществляют эксперты ПК.
12.2. РЦОИ осуществляет подготовку рабочих комплектов экспертов ПК при помощи специализированных программных средств для проведения экспертизы (далее – станция экспертизы), предоставляемых ФЦТ.
12.3. Рабочий комплект эксперта ПК содержит:
Обезличенные бланки-копии (форма 2-РЦОИ) с развернутыми ответами участников экзамена (далее - бланк-копия);
Бланк-протокол (форма 3-РЦОИ) проверки развернутых ответов участников экзамена (далее - бланк-протокол).
Бланк-копия (форма 2-РЦОИ) является изображением бланка ответов
№ 2 участника ЕГЭ и дополнительных бланков ответов № 2 (если они заполнялись участником), в регистрационной части которого указаны:
Код бланка-копии;
- учебный предмет;
- дата проведения экзамена;
- номер протокола и номер строки в протоколе, соответствующей данному коду бланка-копии;
- номер варианта КИМ;
- номер страницы и количество заполненных страниц участником ЕГЭ в бланке ответов № 2, включая дополнительный бланк ответов № 2,
Регион.
Бланк-протокол проверки развернутых ответов представляет собой таблицу, в которой указаны коды бланков-копий полученного рабочего комплекта и поля для внесения экспертом баллов за ответы.
В регистрационной части бланка-протокола указаны:
- информация об эксперте, назначенном на проверку бланков (ФИО, код эксперта);
- учебный предмет;
- дата проведения экзамена;
- номер протокола;
Регион.
Бланк-протокол проверки развернутых ответов является машиночитаемой формой, и подлежит обязательной автоматизированной обработке.
12.4. Рабочие комплекты формируются для каждого эксперта с учетом графика работы ПК.
12.5. Управление станцией экспертизы осуществляет координатор станции экспертизы в соответствии с «Правилами для координатора экспертизы» (Приложение 6).
12.6. При распознавании информации с бланков ответов № 2, включая дополнительные бланки ответов № 2, программным комплексом РЦОИ проводится процесс отбора предположительно незаполненных страниц, которые в дальнейшем не поступают на проверку в ПК.
12.7. Координатор станции экспертизы фиксирует наличие возможно пустых бланков, определенных программным комплексом.
12.8. Проверка изображений предположительно пустых бланков проводится двумя экспертами ПК.
12.9. По указанию администратора проекта о начале подготовки работ для проверки ПК, координатор экспертизы начинает печать рабочих комплектов для каждого из экспертов ПК, назначенных на данный экзамен в соответствии с расписанием, предоставленными председателем ПК и внесенными в РИС.
12.10. Руководитель РЦОИ до начала работы ПК передает председателю ПК критерии для оценивания развернутых ответов, полученные от ФЦТ в день проведения экзамена.
12.11. Подготовленные рабочие комплекты передаются руководителем РЦОИ председателю ПК в день проведения проверки.
12.12. Эксперты проводят проверку работ и выставляют баллы в соответствующие поля бланка-протокола в соответствии с «Правилами по работе предметной комиссии при проверке развернутых ответов участников ЕГЭ».
12.13. После завершения проверки работ каждого комплекта, заполненный бланк-протокол и бланки-копии рабочего комплекта передаются
в РЦОИ для дальнейшей обработки.
12.14.После проведения первичной обработки бланков-протоколов, программное обеспечение станции экспертизы в автоматическом режиме без участия оператора проводит анализ полученных результатов проверки работ экспертами. В ходе анализа выявляются экзаменационные работы и задания с существенным расхождением в баллах первого и второго экспертов ПК, требующие третьей проверки.
12.15.Существенное расхождение по каждому учебному предмету определено в критериях оценивания и закладывается в алгоритм автоматизированной обработки.
12.16.На бланке-копии работы, назначенной на третью проверку, в регистрационной части для третьего эксперта указываются баллы, выставленные двумя экспертами, проверявшими эту работу ранее. К третьей проверке привлекаются только эксперты ПК, являющиеся членами ФПК.
12.17.Проверка развернутых ответов участников экзамена считается завершенной, когда все работы были проверены экспертами необходимое
количество раз, а результаты оценивания из бланков-протоколов проанализированы программным обеспечением станции экспертизы.
12.18.При проведении межрегиональной перекрестной проверки изображения бланков ответов № 2, полученные из другого субъекта РФ, проверяются экспертами ПК, являющимися членами ФПК, в общей очереди работ участников ЕГЭ.
13.Завершение экзамена и получение результатов
13.1. РЦОИ завершает первичную обработку бланков ЕГЭ, включая проверку развернутых ответов участников ЕГЭ предметными комиссиями в установленные сроки.
13.2. Перед завершением первичной обработки бланков ЕГЭ, необходимо убедиться в том, что в соответствии с документацией ППЭ откорректированы при верификации метки, проставленные в бланках регистрации об удалении участника ЕГЭ и о досрочном завершении экзамена.
В противном случае, участники ЕГЭ, в чьих бланках регистрации, соответствующие метки были проставлены некорректно, могут не получить или получить несвоевременно информацию о результатах ЕГЭ.
13.3. После завершения процесса первичной обработки и первичной проверки экзаменационных материалов по каждому учебному предмету, администратор проектов с помощью соответствующих средств РИС завершает процесс обработки материалов экзамена в РЦОИ. Полученные в результате обработки данные в РИС автоматически передаются в ФЦТ для проведения централизованной проверки и расчета результатов в первичных и тестовых баллах.
13.4. Централизованная проверка завершается не позднее, чем через пять рабочих дней с момента получения результатов обработки бланков ЕГЭ из всех субъектов РФ.
13.5. Результаты ЕГЭ каждого участника автоматически передаются из ФИС в РИС. Из ФИС в РИС также передается информация об участниках ЕГЭ, чьи работы направлены на перепроверку по поручению Рособрнадзора, и полученных ими результатах.
13.6. Руководитель РЦОИ организует формирование электронных файлов-ведомостей и/или распечатку ведомостей с результатами участников экзамена в зависимости от организационно-территориальной схемы проведения ЕГЭ в субъекте РФ для утверждения председателем ГЭК и организации информирования в трехдневный срок участников ЕГЭ. При этом отдельно, посредством специализированного программного обеспечения, формируются ведомости для представления на рассмотрение в ГЭК, содержащие информацию об участниках ЕГЭ:
Удаленных с экзамена или завершивших экзамен досрочно по уважительной причине;
Не зарегистрированных в РИС, не имеющих сведений об автоматизированной рассадке и пр.
13.7. После принятия решения председателем ГЭК об утверждении результатов ЕГЭ, РЦОИ передает все утвержденные результаты в виде ведомостей для информирования участников ЕГЭ.
13.8. Участники ЕГЭ, работы которых направлены на перепроверку по решению Рособрнадзора или ОИВ, должны быть проинформированы о том, что их работы направлены на перепроверку.
14.Обработка апелляций о нарушении установленного порядка проведения ГИА
14.1. В процессе рассмотрения апелляции КК вправе запрашивать у РЦОИ необходимые документы и сведения, в том числе бланки, сведения о лицах, присутствовавших при проведении экзамена, о соблюдении порядка проведения ГИА.
14.2. После рассмотрения апелляции о нарушении установленного порядка проведения ГИА председатель КК передает в ГЭК для утверждения и руководителю РЦОИ для внесения в РИС и передачи в ФИС:
Протокол рассмотрения апелляции с указанием решения КК (форма ППЭ-03);
Копию протокола служебного расследования апелляции о нарушении установленного порядка проведения ГИА.
14.3. Полученные оформленные протоколы рассмотрения апелляций руководитель РЦОИ передает ответственному за обработку апелляций и коррекций сотруднику РЦОИ.
14.4. Ответственный за обработку апелляций и коррекций сотрудник РЦОИ вносит в РИС с помощью специализированного программного обеспечения результаты рассмотрения апелляции, включая вложение копий необходимой апелляционной документации, не позднее двух рабочих дней с момента принятия решения КК. Информация об апелляции автоматически передаются на обработку в ФИС и ФЦТ.
14.5. Результаты обработки апелляций из ФИС автоматически передаются в РИС:
14.5.1. В случаях, требующих уточнений, ФЦТ направляет соответствующий программный запрос о предоставлении документов или сведений. В этом случае сотрудник, ответственный за обработку апелляций и коррекций в РЦОИ, предоставляет необходимые документы в случае их наличия в апелляционном комплекте документов или передает запрос о необходимых документах в КК.
14.5.2. В случае удовлетворения апелляции о нарушении установленного порядка проведения ГИА результат апеллянта будет аннулирован. В случае отклонения апелляции о нарушении установленного порядка проведения ГИА результат апеллянта останется неизменным.
15.Обработка апелляций о несогласии с выставленными баллами
15.1. КК передает руководителю РЦОИ зарегистрированные в КК апелляции о несогласии с выставленными баллами.
15.2. Ответственный за обработку апелляций сотрудник РЦОИ вносит сведения об апелляциях в РИС (программное обеспечение «Станция апелляции
и коррекции») и печатает апелляционные комплекты.
15.3. Апелляционный комплект документов содержит:
o бланка регистрации,
o бланков ответов № 1 и № 2,
бланки распознавания: o бланка регистрации,
o бланков ответов № 1 и № 2,
o бланков-протоколов проверки развернутых ответов;
протокол рассмотрения апелляции с внесенной информацией об участнике экзамена (форма 2-АП);
приложение 1 к форме 2-АП (форма 2-АП-1) – о правильности распознавания ответов, внесенных в бланк ответов № 1);
приложение 2 к форме 2-АП (форма 2-АП-2) – заключение экспертов
о правильности оценивания развернутых ответов на задания экзаменационной работы).
15.4. Дополнительно к апелляционному комплекту распечатывается изображение варианта КИМ, выполнявшегося участником экзамена.
15.5. Подготовленные материалы передаются в КК:
15.5.1. В случае удовлетворения апелляции к протоколу рассмотрения апелляции заполняется соответствующее приложение, в которое вносятся все изменения, принятые решением КК, и которое подписывается членами и председателем КК. Информация, внесенная в приложение, подлежит обязательному внесению в РИС.
15.5.2. В случае отклонения апелляции приложение к протоколу рассмотрения апелляции не заполняется.
15.6. Оформленный протокол рассмотрения апелляции и приложения к нему (в случае его заполнения) председатель КК передает руководителю РЦОИ, который направляет протокол апелляции ответственному за обработку апелляций и коррекций сотруднику РЦОИ.
15.7. Ответственный за обработку апелляций и коррекций сотрудник РЦОИ вносит в РИС посредством специализированного программного обеспечения результаты рассмотрения апелляций, включая вложение изображений необходимой апелляционной документации. Обработанные апелляции автоматически передаются на обработку в ФИС и ФЦТ.
15.8. В случае загрузки в ФИС неполного комплекта апелляционной документации, неполного или некорректного заполнения протокола рассмотрения апелляции и (или) приложения к нему, ФЦТ направляет соответствующий программный запрос о предоставлении документов. В этом случае сотрудник, ответственный за обработку апелляций и коррекций в РЦОИ, предоставляет необходимые документы в случае их наличия в апелляционном комплекте документов или передает запрос о необходимых документах в КК.
15.9. Результаты обработки апелляций из ФИС автоматически передаются в РИС.
15.9.1. В случае удовлетворения апелляции в ФИС будет произведен пересчет баллов апеллянта. Информация об обновленных результатах ЕГЭ после пересчета баллов в результате внесения апелляционных изменений будет направлена в РИС.
15.9.2. В случае отклонении апелляции, в ФИС будет зафиксирован факт подачи апелляции и результат ее рассмотрения. В этом случае балл остается неизменным.
16. Обработка работ, отправленных на перепроверку по решению
16.1. По решению ОИВ перепроверку отдельных экзаменационных работ участников ЕГЭ проводят эксперты ПК, являющиеся членами ФПК.
16.2. ОИВ передает список участников ЕГЭ, чьи работы по соответствующему учебному предмету направляются на перепроверку, руководителю РЦОИ.
16.3. Ответственный за обработку апелляций и коррекций сотрудник РЦОИ вносит сведения об указанных в списке лицах в РИС посредством программного обеспечения «Станция апелляции и коррекции» и распечатывает комплекты документов для перепроверки.
16.4. Комплект документов для перепроверки содержит:
копии бланков ответов № 2, включая дополнительные бланки ответов
копии бланков-протоколов проверки развернутых ответов;
бланк протокола перепроверки, содержащего заключение экспертов
о правильности оценивания развернутых ответов на задания данной экзаменационной работы;
изображение варианта КИМ, выполнявшегося участником экзамена. 16.5. Подготовленные материалы передаются в ПК.
16.6. Оформленный протокол перепроверки председатель ПК передает
руководителю РЦОИ, который направляет протокол перепроверки ответственному за обработку апелляций и коррекций сотруднику РЦОИ.
16.7. Ответственный за обработку апелляций и коррекций сотрудник РЦОИ вносит в РИС посредством специализированного программного обеспечения «Станция апелляции и коррекции» результаты перепроверки:
изображения протокола перепроверки;
скан-копию решения председателя ГЭК об изменении баллов за задания экзаменационной работы по результатам перепроверки;
изменение баллов по заданиям в соответствии с решением председателя ГЭК об изменении баллов за задания экзаменационной работы по результатам перепроверки;
16.8. В ФЦТ ОИВ направляет официальное письмо о необходимости учета результатов перепроверки с приложением решения председателя ГЭК о результатах перепроверки.
16.9. Обработанные данные с результатами перепроверки автоматически передаются на обработку в ФИС и ФЦТ для пересчета баллов.
Сканирование и распознавание материалов
Оператор сканирования обеспечивает сканирование машиночитаемых форм ППЭ и бланков ЕГЭ из тех ППЭ, машиночитаемые формы которых были обработаны.
Для проведения обработки ЭМ из ППЭ администратор проекта осуществляет запуск процесса автоматизированного распознавания информации с машиночитаемых форм и бланков ЕГЭ. Распознавание проводится в фоновом режиме.
Оператор сканирования проводит сканирования полученных бланков в соответствии с «Правилами для оператора сканирования» (Приложение № 3).
Оператор проводит регистрацию в ПО отсканированного пакета бланков и передает оригинальные отсканированные бланки ответственному за хранение материалов сотруднику РЦОИ.
Приоритет обработки устанавливается бланкам ответов №2 для обеспечения работы ПК.
Верификация результатов распознавания
Верификация, т.е. проверка качества распознавания, осуществляется путем сравнения на экране монитора символов, внесенных в машиночитаемую форму ППЭ, на бланк ЕГЭ или в протокол проверки с теми же символами, полученными в результате распознавания. Верификатор проверяет правильность распознавания символов в соответствии с «Правилами для верификатора в РЦОИ» (Приложение № 4) и, в случае необходимости, вносит исправления в перечень распознанных символов.
Верификатор начинает работу по указанию администратора проекта.
В случае возникновения ситуаций, не регламентированных «Правилами для верификатора в РЦОИ», верификатор направляет пакет электронных бланков старшему верификатору для устранения проблемы.
В случае расхождения информации с бланка регистрации с записью в РИС старший верификатор вносит необходимые (допустимые) исправления в пакет.
Старший верификатор устраняет возникающие проблемы в обработке бланков ЕГЭ и машиночитаемых форм ППЭ.
Проверка ответов участников ЕГЭ на задания экзаменационной работы с развернутым ответом
Работа со станцией экспертизы начинается после завершения верификации бланков ответов № 2.
Координатор станции экспертизы фиксирует наличие возможно пустых бланков, определенных программой.
Проверка изображений предположительно пустых бланков проводится двумя экспертами ПК.
По указанию администратора проекта о начале подготовки работ для экспертизы, координатор экспертизы начинает печать рабочих комплектов для каждого из экспертов ПК, назначенных на данный экзамен в соответствии с РИС.
Рабочий комплект эксперта ПК содержит:
обезличенные бланки-копии (форма 2-РЦОИ) с ответами участников ЕГЭ на задания экзаменационной работы с развёрнутым ответом (далее бланки-копии);
бланк-протокол (форма 3-РЦОИ) проверки экзаменационных работ участников ЕГЭ (далее бланк-протокол).
Бланк-протокол проверки ответов участников ЕГЭ на задания с развернутым ответом является машиночитаемой формой и подлежит обязательной автоматизированной обработке.
Рабочие комплекты формируются для каждого эксперта с учетом графика работы ПК.
Руководитель РЦОИ до начала проверки экзаменационных работ передает председателю ПК критерии для оценивания развернутых ответов, полученные не позднее 15:00 по московскому времени в день проведения экзамена от ФЦТ.
Подготовленные рабочие комплекты передаются руководителем РЦОИ председателю ПК в день проведения экспертизы.
Эксперты проводят проверку экзаменационных работ и выставляют баллы в соответствующие поля бланка-протокола в соответствии с «Правилами по работе предметной комиссии при проверке развернутых ответов участников ЕГЭ» (Приложение № 9) и с критериями оценивания развернутых ответов.
После завершения проверки экзаменационных работ каждого комплекта, заполненный бланк-протокол и бланки-копии рабочего комплекта передаются на обработку в РЦОИ.
Направление работ на третью проверку производится в автоматическом режиме станцией экспертизы.
На бланке-копии работы, назначенной на третью экспертизу, в регистрационной части указываются баллы, выставленные двумя предыдущими экспертами за те ответы, которые требуют третьей проверки.
Проверка ответов участников ЕГЭ на задания экзаменационной работы с развернутым ответом считается завершенной, когда все работы были проверены экспертами необходимое количество раз, а результаты оценивания из бланков-протоколов проанализированы ПО станции экспертизы.
При проверке экзаменационных работ участников ЕГЭ возможна организация обмена экзаменационными работами участников ЕГЭ между субъектами РФ (далее – межрегиональная перекрестная проверка).
