Перечень условных обозначений, сокращений и терминов

Стр 1 из 3Следующая ⇒

Москва, 2019

Оглавление

1. Введение. 4

2. Общие положения о деятельности ПК.. 5

3. Порядок формирования ПК.. 7

Статусы экспертов ПК.. 7

Согласование подходов к оцениванию развернутых ответов участников экзаменов на федеральном и региональном уровнях. 8

Квалификационные требования для присвоения статуса экспертам.. 9

Организация квалификационного испытания. 9

Порядок привлечения экспертов к работе в ПК.. 10

4. Организация проверки развернутых ответов. Методика оценивания развернутых ответов на задания экзаменационной работы.. 11

5. Анализ работ ПК.. 18

6. Правила для председателя и членов ПК. 19

6.1. Правила для председателя ПК при организации подготовительных мероприятий. 19

6.2. Правила для председателя ПК на этапе проверки развернутых ответов участников экзаменов. 19

6.3. Правила для председателя ПК по завершении работы ПК. 20

6.4. Правила для председателя ПК при рассмотрении апелляций о несогласии с выставленными баллами по ГИА. 20

6.5. Правила для экспертов ПК.. 21

Приложение 1. Рекомендуемые показатели согласованности оценивания для присвоения статуса экспертам.. 24

Приложение 2. Примерный план-график проведения мероприятий по подготовке экспертов и формированию ПК, подведения итогов работы ПК.. 25

Приложение 3. Минимальный перечень направлений для анализа работы ПК.. 26

Введение

Настоящий документ разработан в соответствии со следующими нормативными правовыми актами по подготовке и проведению ГИА:

1. Федеральным законом от 29.12.2012 № 273-ФЗ «Об образовании в Российской Федерации»;

2. постановлением Правительства Российской Федерации от 31.08.2013 № 755
«О федеральной информационной системе обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования, и приема граждан в образовательные организации для получения среднего профессионального и высшего образования и региональных информационных системах обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования»;

3. приказом Минпросвещения России и Рособрнадзора от 07.11.2018 № 190/1512 «Об утверждении Порядка проведения государственной итоговой аттестации по образовательным программам среднего общего образования» (зарегистрирован Минюстом России 10.12.2018, регистрационный № 52952);

4. приказом Рособрнадзора от 18 июня 2018 г. № 831 «Об утверждении требований
к составу и формату сведений, вносимых и передаваемых в процессе репликации
в федеральную информационную систему обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования, и приема граждан в образовательные организации для получения среднего профессионального и высшего образования
и региональные информационные системы обеспечения проведения государственной итоговой аттестации обучающихся, освоивших основные образовательные программы основного общего и среднего общего образования, а также к срокам внесения и передачи
в процессе репликации сведений в указанные информационные системы».

Общие положения о деятельности ПК

2.1. Проверка развернутых ответов участников экзаменов (в том числе устных ответов) осуществляется ПК по следующим учебным предметам: русскому языку, математике (профильный уровень), физике, химии, информатике и ИКТ, биологии, истории, географии, обществознанию, литературе, иностранным языкам (английский, немецкий, французский, испанский, китайский).

2.2. ПК по каждому учебному предмету создает ОИВ в соответствии с пунктом
31 Порядка.

2.3. Кандидатуры председателей по каждой ПК, создаваемой в субъектах Российской Федерации, представляются на согласование в Рособрнадзор председателем ГЭК в сроки, указанные в Приложении 2 настоящих Методических рекомендаций.

2.4. Формирование составов ПК организуется председателем ГЭК по представлению председателей ПК не позднее чем за две недели до начала ГИА.

2.5. ПК в своей деятельности руководствуется нормативными правовыми актами Минпросвещения России, Рособрнадзора, инструктивно-методическими документами Рособрнадзора по вопросам организационного и технологического сопровождения ГИА, нормативными правовыми документами ОИВ, в том числе Положениями о ПК.

2.6. ПК прекращает свою деятельность с момента утверждения ОИВ председателей ПК для проведения ГИА в субъекте Российской Федерации в следующем году.

2.7. Общее руководство и координацию деятельности ПК по соответствующему учебному предмету осуществляет ее председатель.

Состав ПК по каждому учебному предмету формируется из лиц, отвечающих следующим требованиям:

1) наличие высшего образования;

2) соответствие квалификационным требованиям, указанным в квалификационных справочниках и (или) профессиональных стандартах;

3) наличие опыта работы в организациях, осуществляющих образовательную деятельность и реализующих образовательные программы среднего общего, среднего профессионального или высшего образования (не менее трех лет);

4) наличие документа, подтверждающего получение дополнительного профессионального образования, включающего в себя практические занятия (не менее чем 18 часов) по оцениванию образцов экзаменационных работ в соответствии с критериями оценивания по соответствующему учебному предмету.

Также кандидату в члены ПК необходимо иметь положительные результаты квалификационного испытания, организованного и проведенного в порядке, установленном ОИВ.

2.8. ОИВ обеспечивает ПК изолированными помещениями для работы, которые расположены в непосредственной близости к РЦОИ или в РЦОИ. Организация допуска
в помещения для работы ПК должна обеспечивать пропуск только лиц, определенных Порядком и распорядительными документами ОИВ.

2.9. ОИВ по представлению председателя ПК утверждает перечень дополнительных средств и материалов (например, непрограммируемый калькулятор, словари, учебники, программное обеспечение рабочих мест с выходом в информационно-телекоммуникационную сеть «Интернет» и т.п.), допустимых к использованию экспертами в помещениях ПК во время оценивания работ.

2.10. ОИВ обеспечивает наличие в необходимом количестве специальных рабочих мест с выходом в информационно-телекоммуникационную сеть «Интернет» для предоставления возможности каждому члену ПК уточнить и(или) проверить изложенные в экзаменационных работах участников экзаменов факты (например, сверка с информацией из источников, проверка приведенных участниками экзаменов фамилий, названий, фактов и т.п.). При необходимости на указанные рабочие места может быть заблаговременно установлено программное обеспечение в соответствии с установленным ОИВ перечнем дополнительных средств и материалов, допустимых для использования экспертами в помещениях ПК во время оценивания работ.

2.11.В помещениях ПК могут присутствовать:

члены ГЭК - по решению председателя ГЭК;

аккредитованные общественные наблюдатели - по желанию;

должностные лица Рособрнадзора, а также иные лица, определенные Рособрнадзором, должностные лица органа исполнительной власти субъекта Российской Федерации, осуществляющего переданные полномочия Российской Федерации в сфере образования, - по решению соответствующих органов.

2.12. Информационное и организационно-технологическое обеспечение деятельности ПК осуществляет РЦОИ.

2.13. В случае возникновения ситуаций, не предусмотренных настоящими Методическими рекомендациями, соответствующее решение принимает председатель ПК и(или) руководитель РЦОИ в рамках своей компетенции с обязательным последующим информированием ГЭК о принятом решении.

2.14. В период организации и проведения ЕГЭ ПК осуществляет проверку развернутых письменных ответов участников экзаменов (ЕГЭ), выполненных на бланках ответов № 2 (в том числе и на дополнительных бланках ответов № 2), и устных ответов участников экзаменов (ЕГЭ) по иностранным языкам.

2.15. В период организации и проведения ГИА распределение функций между экспертами ПК осуществляется в зависимости от статуса, присвоенного эксперту по результатам квалификационного испытания: ведущий эксперт, старший эксперт, основной эксперт.

2.16. Сроки обработки ЭМ.

Обработка бланков ЕГЭ и ГВЭ, включая проверку ПК развернутых ответов участников экзаменов, должна быть завершена:

1) по русскому языку – не позднее шести календарных дней после проведения экзамена;

2) по математике (профильный уровень), ГВЭ по математике - не позднее четырех календарных дней после проведения экзамена;

3) по математике (базовый уровень) - не позднее трех календарных дней после проведения экзамена, проверка развернутых ответов ПК не предусмотрена;

4) по учебным предметам по выбору – не позднее четырех календарных дней после проведения соответствующего экзамена;

5) по экзаменам, которые проводятся в досрочный и дополнительный периоды,
в резервные сроки каждого из периодов проведения экзаменов, – не позднее трех календарных дней после проведения соответствующего экзамена.

2.17. ОИВ назначает лицо, обеспечивающее учет экземпляров критериев оценивания развернутых ответов.

2.18. ОИВ обеспечивает организацию видеонаблюдения и видеозаписи в помещениях ПК.

Порядок формирования ПК

3.1. Процедура подготовки экспертов ПК, а также формирования ПК (включая порядок присвоения статуса экспертам) требует формирования на региональном уровне пакета нормативных документов, регламентирующих организацию работы ПК и КК.

3.2. Пакет региональных нормативных документов включает, в том числе:

Положение о ПК субъекта Российской Федерации;

Положение о КК субъекта Российской Федерации;

Порядок формирования ПК субъекта Российской Федерации.

3.3. Порядок формирования ПК в субъекте Российской Федерации включает:

порядок проведения подготовки экспертов;

порядок проведения анализа работы ПК в субъекте Российской Федерации;

требования к опыту экспертов по проверке развернутых ответов участников экзаменов;

порядок допуска экспертов к прохождению квалификационного испытания;

описание формата проведения квалификационного испытания для экспертов;

показатели согласованности оценивания по результатам квалификационного испытания и их значения;

порядок проведения анализа работы ПК (минимальный перечень направлений
для анализа работы ПК приведен в Приложении 3);

иные положения, не противоречащие Порядку.

Сроки проведения каждого из мероприятий по подготовке экспертов и формированию ПК устанавливаются ОИВ в рамках соблюдения соответствующих сроков, установленных Порядком.

Примерный план-график проведения мероприятий по подготовке экспертов и формированию ПК приведен в Приложении 2.

Статусы экспертов ПК

3.4. По результатам прохождения квалификационных испытаний эксперту может быть присвоен один из следующих статусов: ведущий эксперт, старший эксперт, основной эксперт.

Ведущий эксперт – статус, присваиваемый председателю и, по усмотрению председателя ПК (при наличии соответствующих результатов квалификационного испытания), заместителю (-ям) председателя ПК, позволяющий осуществлять руководство подготовкой и/или подготовку экспертов на региональном уровне, участвовать в межрегиональных перекрестных проверках, привлекаться к рассмотрению апелляций по учебному предмету, консультировать экспертов ПК по вопросам оценивания развернутых ответов участников экзаменов, осуществлять проверку и перепроверку развернутых ответов участников экзаменов в составе ПК, в том числе в качестве третьего эксперта.

Старший эксперт – статус, позволяющий осуществлять проверку и перепроверку выполнения заданий с развернутым ответом ГИА в составе ПК, в том числе назначаться для третьей проверки выполнения заданий с развернутым ответом ГИА, консультировать экспертов ПК по вопросам оценивания развернутых ответов участников экзаменов
(по назначению председателя ПК) участвовать в межрегиональных перекрестных проверках, а также в проверках в рамках рассмотрения апелляции о несогласии с выставленными баллами.

Основной эксперт – статус, позволяющий осуществлять первую или вторую проверку выполнения заданий с развернутым ответом ГИА, участвовать в межрегиональных перекрестных проверках в составе ПК.

3.5. Для присвоения эксперту того или иного статуса должно быть установлено соответствие его квалификации:

требованиям к экспертам, определенным Порядком;

требованиям к опыту оценивания экзаменационных работ участников экзаменов;

требованиям к результатам квалификационного испытания;

требованиям к согласованности работы при проверке в предыдущем году
и к значениям показателей статистики удовлетворенных апелляций.

Согласование подходов к оцениванию развернутых ответов участников экзаменов на федеральном и региональном уровнях

3.6. Для обеспечения единства подходов к оцениванию развернутых ответов участников экзаменов используется система согласования подходов к оцениванию
(далее – система). Мероприятия по согласованию подходов к оцениванию развернутых ответов участников экзаменов осуществляются на федеральном и региональном уровнях.

1) На федеральном уровне система включает следующие мероприятия для экспертов, имеющих статус ведущих экспертов:

в рамках очных мероприятий с участием членов комиссий по разработке КИМ обсуждение и выработку подходов к оцениванию типичных случаев, вызывающих затруднения у экспертов ПК при оценивании;

оценивание образцов экзаменационных работ в удаленном режиме;

анализ результатов оценивания.

2) На региональном уровне система включает следующие мероприятия:

внедрение согласованных на федеральном уровне подходов к оцениванию в процессе подготовки экспертов ПК. Подготовка экспертов должна осуществляться под руководством специалистов, имеющих статус «ведущий эксперт», и включать практические занятия по оцениванию развернутых ответов участников экзаменов предыдущих лет;

обязательное проведение в течение не менее чем 60 минут оперативного согласования подходов к оцениванию ответов на каждое задание с развернутым ответом между экспертами ПК непосредственно перед проверкой работ, проводимого в день начала проверки развернутых ответов участников экзаменов или накануне после получения критериев оценивания развернутых ответов из РЦОИ.

3.7. Мероприятия по согласованию подходов к оцениванию развернутых ответов участников экзаменов на федеральном уровне организуются ФИПИ.

3.8. Мероприятия по согласованию подходов к оцениванию развернутых ответов участников экзаменов на региональном уровне организуются ОИВ. Подготовка экспертов должна проводиться в соответствии с образовательными программами
и с использованием:

учебно-методических материалов для подготовки экспертов ЕГЭ, размещенных на официальном сайте ФИПИ (www.fipi.ru);

образцов развернутых ответов участников экзаменов прошлых лет, предоставленных РЦОИ.

Квалификационные требования для присвоения статуса экспертам

3.9. Статусы ведущего, старшего или основного эксперта присваиваются всем экспертам, включаемым в ПК (кроме председателя ПК), в зависимости от уровня квалификации эксперта. Председателю ПК присваивается статус ведущего эксперта
без участия в квалификационных испытаниях.

3.10. Для присвоения экспертам того или иного статуса устанавливаются определенные квалификационные требования.

Требования к образованию экспертов и опыту их работы в образовательных организациях установлены пунктом 38 Порядка:

наличие высшего образования;

соответствие квалификационным требованиям, указанным в квалификационных справочниках, и(или) профессиональных стандартах;

наличие опыта работы в организациях, осуществляющих образовательную деятельность и реализующих образовательные программы среднего общего, среднего профессионального или высшего образования (не менее трех лет);

наличие документа, подтверждающего получение дополнительного профессионального образования, включающего в себя практические занятия (не менее чем 18 часов) по оцениванию образцов экзаменационных работ в соответствии с критериями оценивания по соответствующему учебному предмету.

3.11. Для присвоения статуса «ведущий эксперт» необходим опыт организационной работы в ПК или ГЭК. Отсутствие такого опыта допускается в случае, когда в состав ПК входит менее 10 человек. Экспертам, не назначенным заместителем председателя или председателем ПК и прошедшим квалификационные испытания с результатом, соответствующим статусу «ведущий эксперт», присваивается статус «старший эксперт».

3.12. Статусы «ведущий эксперт» и «старший эксперт» могут присваиваться только экспертам, имеющим опыт оценивания развернутых ответов участников экзаменов.
Для присвоения статуса «ведущий эксперт» опыт оценивания должен составлять не менее 3-х лет. Требования к опыту оценивания развернутых ответов участников экзаменов устанавливаются ОИВ. Отсутствие опыта проверки допускается только для вновь организуемых ПК по иностранным языкам (в случаях, когда ранее в субъекте Российской Федерации не создавалась ПК по соответствующему учебному предмету).

3.13. Значения показателей согласованности оценивания, определенные по результатам квалификационных испытаний, должны соответствовать значениям, определенным ОИВ для присвоения экспертам каждого из статусов. Рекомендуемые показатели согласованности и их значения по результатам квалификационных испытаний для присвоения каждого из статусов экспертам приведены в приложении 1.

3.14. Методика анализа согласованности работы экспертов и анализа статистики удовлетворенных апелляций о несогласии с выставленными баллами разрабатывается ОИВ. Минимальный перечень направлений для анализа работы ПК приведен в Приложении 3. Результаты анализа согласованности оценивания используются
при подготовке экспертов.

Анализ работ ПК

5.1. По окончании проведения ГИА и проверки экзаменационных работ участников экзаменов проводится анализ работы ПК.

5.2. Анализ работы ПК проводится в соответствии с порядком проведения анализа работы ПК (минимальный перечень направлений для анализа работы ПК приведен в Приложении 3), определенным Порядком формирования ПК в субъекте Российской Федерации, утвержденным ОИВ.

5.3. Анализ работы ПК проводится на основании информации, предоставленной РЦОИ, а также Рособрнадзором и уполномоченными Рособрнадзором организациями (ФИПИ и ФЦТ).

5.4. В целях обеспечения проведения анализа работы ПК группе экспертов, анализирующих работу ПК, предоставляется доступ к КИМ в сроки и порядке, установленном ОИВ.

Приложение 1. Рекомендуемые показатели согласованности оценивания для присвоения статуса экспертам

Ниже приведены ориентировочные показатели, вычисляемые по результатам квалификационных испытаний.

Данные показатели могут быть скорректированы с учетом особенностей учебных предметов.

Показатель: доля заданий/критериев оценивания, по которым оценки эксперта не совпали с оценками, выработанными при согласовании подходов к оцениванию развернутых ответов.

Рекомендуемые значения показателя для присвоения статуса экспертам.

Предмет	Максимальное значение показателя
	Ведущий эксперт	Старший эксперт	Основной эксперт
Русский язык	10%	15%	25%
Иностранные языки
Обществознание
Литература
Биология	10%	15%	20%
История
Физика	5%	7%	10%
Химия
Информатика и ИКТ
География
Математика	1%	5%	7%

Показатель: доля позиций оценивания, расхождение в которых составило 2 и более балла по заданию/критерию оценивания.

Рекомендуемые значения показателя для присвоения статуса экспертам.

	Максимальное значение показателя
Ведущий эксперт	0
Старший эксперт	0

Приложение 2. Примерный план-график проведения мероприятий по подготовке экспертов и формированию ПК, подведения итогов работы ПК

№ п/п	Мероприятие	Срок
1.	Подготовка экспертов ПК к проверке экзаменационных работ ГИА 2018 года, проведение квалификационных испытаний, присвоение статуса экспертам ПК ГИА	До окончания марта 2019 года
2.	Предоставление в ФИПИ списков кандидатур председателей ПК	Для ПК по всем учебным предметам - до 1 февраля 2019 года
3.	Согласование Рособрнадзором кандидатур председателей ПК	Для ПК по всем учебным предметам - до 15 февраля 2019 года
4.	Формирование ПК	Для ПК по всем учебным предметам - до 20 февраля 2019 года
5.	Вебинары ФИПИ для экспертов ПК субъектов Российской Федерации по согласованию подходов к оцениванию развернутых ответов участников экзаменов	Май-июнь 2019 года в соответствии с единым расписанием проведения ЕГЭ
6.	Проведение оперативного согласования оценивания развернутых ответов в ПК субъектов Российской Федерации	После получения критериев оценивания развернутых ответов
7.	Отбор экзаменационных работ участников экзаменов (ЕГЭ), вызвавших затруднения в оценивании, для включения в учебно-методические материалы ФИПИ	В процессе проверки экзаменационных работ
8.	Проведение анализа работы ПК	Июль 2019 года
9.	Направление в ФИПИ информации о номерах работ, вызвавших затруднения при оценивании	Июль 2019 года

Приложение 3. Минимальный перечень направлений для анализа работы ПК

Анализ работы ПК проводится в целях оптимизации работы ПК по проверке развернутых ответов участников экзаменов, ее максимальной объективности, выработке единых требований и подходов к оцениванию экзаменационных работ, минимизирующих уровень субъективности проверяющих экспертов.

При анализе работы ПК необходимо обратить внимание на следующие направления деятельности ПК:

1. Условия проведения проверки:

нахождение ПК в/вне здания РЦОИ, количество зданий, помещений, где размещается ПК;

количество аудиторий при работе ПК;

проведение оперативного согласования подходов к оцениванию развернутых ответов в день получения критериев оценивания перед началом проверки (проводилось ли, продолжительность, была ли потребность в проведении дополнительного согласования в процессе проверки);

работа экспертов-консультантов, назначенных председателем ПК при работе ПК, их количество, принцип распределения по помещениям, сфера консультирования (консультация экспертов, находящихся в одном помещении/аудитории; консультация по оцениванию ответов на определенные задания и т.п.);

наличие специально оборудованного в помещениях ПК рабочего места с выходом в информационно-телекоммуникационную сеть «Интернет» для обеспечения возможности уточнения экспертами изложенных в экзаменационных работах участников экзаменов фактов; востребованность этого рабочего места;

прочее (в случае выявления условий, существенно влияющих на качество работы ПК).

2. Количество и доля экспертов ПК, имеющих статус ведущего, старшего, основного эксперта.

3. Квалификация экспертов (соответствие требованиям Порядка, количество экспертов, квалификация которых не соответствует требованиям Порядка, причины включения в ПК таких экспертов).

4. Общее количество проверок, проведенных ПК (отдельно проверок первым и вторым экспертом, третьих проверок, проверок апелляционных работ, перепроверок по решению ОИВ).

5. Общее количество экспертов ПК, задействованных при проверке экзаменационных работ в разные периоды проведения ГИА (досрочный, основной и дополнительный).

6. Общее количество экспертов ПК, задействованных при проверке апелляционных работ. Принцип отбора экспертов, привлекаемых к рассмотрению апелляций.

7. Статистика рассмотрения апелляций о несогласии с выставленными баллами за развернутые ответы (общее количество поданных апелляций, количество удовлетворенных апелляций в отношении изменения баллов за развернутые ответы, количество работ с пониженными на апелляции результатами, повышенными на апелляции результатами, минимальное и максимальное изменение баллов, основные причины удовлетворения апелляции.

8. Общее количество экспертов, осуществлявших третью проверку.

9. Доля работ, направленных на третью проверку после проверки в ПК, т.е. без учета пустых экзаменационных работ (средний показатель по всей комиссии).

10. Максимальное и минимальное значение индивидуальных показателей экспертов «доля экзаменационных работ, направленных на третью проверку».

11. Максимальное и минимальное количество экзаменационных работ, проверенных одним экспертом.

12. Перечень экспертов, регулярно (более чем 5% проверяемых экзаменационных работ) допускающих в оценивании значительные расхождения в баллах, выставленных другими экспертами:

случаи существенной разницы между суммой баллов первого и второго экспертов; анализ ситуации, выявленные причины, принятые решения (повышение квалификации, изменение функционала в рамках работы ПК, исключение из ПК, иное);

Пример 1.

№ позиции оценивания	1	2	3	4	5	6	7	8	9	10	11	12	Сумма баллов
Эксперт 1	0	1	0	0	1	1	1	0	0	0	1	1	6
Эксперт 2	2	3	1	1	3	1	2	1	2	1	0	0	17

В приведенном примере разница между суммами баллов, выставленных экспертами, составляет 17-6 = 11 баллов. Ситуация свидетельствует о явном рассогласовании в работе экспертов ПК. Необходимо выявить системность данной ситуации
для каждого из экспертов пары, причины.

случаи существенной разницы в баллах, выставленных за каждую позицию оценивания; анализ ситуации, выявленные причины, принятые решения (повышение квалификации, изменение функционала в рамках работы ПК, исключение из ПК, иное);

Пример 2.

№ позиции оценивания	1	2	3	4	5	6	7	8	9	10	11	12	Сумма баллов
Эксперт 1	0	1	0	0	3	3	2	0	0	0	1	1	11
Эксперт 2	2	0	1	1	1	1	1	1	2	1	0	0	11
Эксперт 3	0	1	0	0	3	2	2	0	0	0	1	2	11

В приведенном примере разницы между суммами баллов, выставленных экспертами, нет: все 3 эксперта выставили суммарно 11 баллов. Тем не менее, ситуация рассогласования в оценивании очевидна: Эксперт 2 выставил баллы, которые по каждой отдельной позиции оценивания отличаются от баллов, выставленных Экспертом 1
(16 баллов) и Экспертом 3 (16 баллов). В отношении результатов оценивания Экспертом 1 и Экспертом 3 можно сказать, что эти результаты отличаются на 1 балл только по двум позициям оценивания из 12, что свидетельствует о поддержке этими экспертами единых подходов к оцениванию работ.

Пример 3.

№ позиции оценивания	1	2	3	4	5	6	7	8	9	10	11	12	Сумма баллов
Эксперт 1	0	1	0	0	3	3	2	0	0	0	1	1	11
Эксперт 2	0	1	1	0	3	3	2	0	0	0	1	1	12
ИТОГ	0	1	1	0	3	3	2	0	0	0	1	1	12
Эксперт на апелляции	2	3	1	0	3	2	2	1	1	1	1	2	19

В приведенном примере эксперты во время проверки вынесли весьма согласованный результат. Тем не менее, на апелляции балл изменяют на 7 первичных баллов относительного итогового по результатам оценивания двух экспертов. Очевидна либо ситуация несогласованности подходов к оцениванию экспертом, проверявшим работу на апелляции, либо наличие процедурных нарушений или заинтересованности этого эксперта.

другие случаи рассогласования работы экспертов, их описание, количественные показатели; анализ ситуации, выявленные причины, принятые решения (повышение квалификации, изменение функционала в рамках работы ПК, исключение из ПК, иное).

13. Результаты выборочной экспертизы председателем результатов оценивания развернутых ответов экспертами, показавших рассогласованную работу при проведении оценивания.

14. Плановое количество экспертов ПК в следующем году, плановое количество экспертов, имеющих право осуществлять третью проверку, перепроверку, проверку апелляционных работ (экспертов, имеющих статус старшего или ведущего эксперта), предполагаемые показатели согласованности работы экспертов для присвоения статуса экспертам ПК при проведении квалификационных испытаний.

15.Планируемые изменения в процессах подготовки экспертов, формировании ПК, организации процедуры оценивания работ относительно предыдущего года.

16.Основные выводы.