//Региональная система оценки качества образования
https://minobraz.egov66.ru/article/show/id/10045

УТВЕРЖДЕНОпротоколом заседания рабочейгруппыпоразвитиюрегиональной системы оценкикачества образованияи региональных механизмовуправлениякачествомобразования в Министерствеобразования и молодежнойполитикиСвердловскойобласти от 29.06.2020 №1ПОЛОЖЕНИЕо мониторинге региональных показателей системы объективности процедур
оценки качества образования и олимпиад школьников в рамках реализациинаправления «Система объективности процедур оценки качестваобразования и олимпиад школьников» Региональной системы оценки
качества образования в Свердловской области
1. Общие положения
1.1. Настоящее Положение о мониторинге региональных показателей
системы объективности процедур оценки качества образования и олимпиад
школьников (далее – мониторинг) в рамках реализации направления «Система
объективности процедур оценки качества образования и олимпиад школьников»Региональной системы оценки качества образования в Свердловской области(далее - Положение) разработано на основе Федерального закона от 29 декабря
2012 года № 273-ФЗ «Об образовании в Российской Федерации», УказаПрезидента Российской Федерации от 7 мая 2018 года № 204 «О национальныхцелях и стратегических задачах развития Российской Федерации на период до2024 года», Постановления Правительства РФ от 05.08.2013 N 662 (в ред. от12.03.2020) «Об осуществлении мониторинга системы образования»,Постановления Правительства Свердловской области от 18.09.2019 г. № 588-ПП«Об утверждении Стратегии развития образования на территории Свердловской
области на период до 2035 года», приказа Министерства общего ипрофессионального образования Свердловской области от 18.12.2018 г. № 615-Д«О региональной системе оценки качества образования Свердловской области».
1.2. Мониторинг предназначен для получения объективной информации осостоянии и динамике изменений уровня объективности процедур оценкикачества образования и олимпиад школьников.
1.3. Мониторинг может проводиться как в виде единого мониторинговогоисследования, так и в виде самостоятельных мониторинговых исследований поизучению групп региональных показателей, указанных в п. 3.1, Приложении 11настоящего Положения.
1.4. Основные понятия и определения: «мониторинг», «объективность»,«оценочные процедуры» (Приложение 1).
2. Цели, задачи, принципы мониторинга
2.1. Цель проведения мониторинга: обеспечить повышение эффективности
системы оценки качества образования путем повышения уровня объективности
процедур оценки качества образования и олимпиад школьников.
2.2. Задачи:1. Получить достоверные данные об обеспечении и уровне объективности
процедур оценки качества образования и олимпиад школьников.
2. Выявить состояние и динамику обеспечения и уровня объективности
процедур оценки качества образования и олимпиад школьников.
3. Выявить группу школ, имеющих признаки необъективности процедур
оценки качества образования и олимпиад школьников.
4. Сформировать у участников образовательных отношений позитивное
отношение к объективной оценке образовательных результатов и олимпиад
школьников.
5. Интерпретировать получаемые данные и подготовить на их основе
проекты управленческих решений.
2.3. Принципы проведения мониторинга:– реалистичность требований, показателей и критериев мониторинга;– сопоставимость эмпирических данных, получаемых при многократно
повторяемой их регистрации;– открытость и прозрачность мониторинговых процедур;– полнота и достоверность информации, полученной в результате
мониторинга;– компьютерная обработка фактических данных, полученных в результатемониторинга, и выдача их в виде готовой продукции, пригодной дляаналитической работы;– открытость и доступность информации о результатах мониторинга длязаинтересованных групп пользователей;– систематичность сбора и обработки информации.
3. Составляющие мониторинга
3.1. Объекты мониторинга:−инструктивно-методическое обеспечение процедур оценки качества
образования;−кадровое обеспечение процедур оценки качества образования;−инструментарий для проведения процедур оценки качества
образования;−инструментарий для наблюдения за процедурой оценки качества
образования;−организационно-технологическое обеспечение процедур оценки2качества образования (единообразие условий проведения, конфиденциальностьКИМ, контроль хода проведения).
3.2. Основные показатели мониторинга, используемые методы сбора
информации:- показатели для выявления уровня объективности процедур оценкикачества образования и олимпиад школьников на уровне муниципальногообразования, на уровне образовательной организации;- методы сбора информации: формализованный сбор статистическихданных, анкетирование образовательных организаций; работа с базой результатов
ВПР, НИКО, международных сравнительных исследований и региональных
диагностических работ, наблюдение.
3.3. Методы обработки информации: формирование электронной базыэмпирическихданных,статистические,аналитические(нормативный;сопоставительный; факторный, корреляционный, регрессионный, динамическийанализ, метод многомерной средней).
3.4. Периодичность и сроки проведения мониторинга определяются сучетом графика проведения процедур оценки качества образования нафедеральном (Всероссийских проверочных работ, обязательных национальных
экзаменов, национальных исследований качества образования, международныхсравнительных исследований) и региональном уровнях, но не реже 1 раза в год.
3.5. Требования к обработке, систематизации и хранению информации:- по результатам мониторинга осуществляется обработка полученнойинформации с использованием сравнительного анализа по процедурам оценки
качества образования с использованием статистических, аналитических иэкспертных методов анализа результатов;- обработка, систематизация, хранение информации осуществляетсярегиональным оператором по осуществлению мониторинга являетсяГосударственное автономное образовательное учреждение дополнительногопрофессионального образования Свердловской области «Институт развитияобразования» (далее - Институт);- ответственным за обработку, систематизацию и хранение информации,полученной в результате проведения комплексного мониторинга, являетсяИнститут;- сбор, обработка, систематизация и хранение полученной в результате
проведения мониторинга информации осуществляется лицом / лицами,назначенными приказом ректора Института ответственными за реализацию
мониторинга;- лица, организующие и осуществляющие мониторинг, несут персональную
ответственность за достоверность и объективность представляемой информации,за обработку данных мониторинга, их анализ и использование, распространениерезультатов.
4. Учет и использование результатов мониторинга4.1. На основе полученных результатов осуществляется разработка мер,3направленных на повышение объективности процедур оценки качества
образования и олимпиад школьников; принимаются управленческие решения наразличных уровнях управления системой образования.
4.2. Адресные рекомендации могут быть направлены как в адрес отдельных
образовательных организаций, так и в адрес отдельных целевых групп:- различных субъектов – участников образовательных отношений(руководителейиспециалистоворгановместногосамоуправления,осуществляющих управление в сфере образования, руководителей и специалистовмуниципальных методических служб, руководящих и педагогических работников
школ с низкими результатами обучения);- структур различного уровня управления системой образования(регионального, муниципального, институционального).
4.3. Мероприятия по повышению уровня объективности процедур оценки
качества образования и олимпиад школьников определяются на уровне
регионального Комплекса мер по реализации системы объективности процедур
оценки качества образования и олимпиад школьников (далее – Комплекс мер).
Комплекс мер содержит план мероприятий («дорожную карту») по реализации
системы объективности процедур оценки качества образования и олимпиад
школьников, а также перечень мероприятий, реализуемых на различных уровнях
системы образования. Мероприятия регионального Комплекса мер являются
основой для планирования муниципальных и школьных мероприятий поповышению объективности процедур оценки качества образования и олимпиад
школьников.
4.4. Управленческие решения (конкретные действия, направленные надостижение поставленных целей с учётом выявленных проблемных областей)могут приниматься на различных уровнях управления системой образования(региональном,муниципальном,институциональном).
Решениямогутсодержатьсявприказах,распоряжениях,указаниях,либоноситьрекомендательный характер.
4.5. Анализ результатов мониторинга, а также все последующие
управленческие действия, указанные в п. 4.1-4.4, представленные в видеотдельных документов, размещаются на официальном сайте Института,направляются в органы местного самоуправления, осуществляющие управление всфере образования, в образовательные организации в виде сопроводительных
инструктивно-методических писем.

4Приложение 1.
Основные термины и определения
Школы с признаками необъективных результатов процедур оценки
качества образования и олимпиад школьников – школы, имеющие порезультатам ВПР, ОГЭ, ЕГЭ хотя бы один из признаков необъективности
результатов, а именно:−завышенные значения среднего балла ВПР;−несоответствие результатов ВПР и школьных отметок;−резкое возрастание результатов по одному и тому же предмету от одной
параллели к следующей (например, от 4 класса к 5 по русскому языку);−резкое падение результатов по одному и тому же предмету от однойпараллели к следующей (например, от 4 класса к 5 по русскому языку);−повышенный уровень результатов ОГЭ, ЕГЭ: в качестве показателей
высоких результатов берется средний тестовый балл по образовательной
организации (далее – ОО) для соответствующего предмета. Высокими считаются
результаты ОО, средний тестовый балл которой выше нижней границы верхней
квартили среднего тестового балла (по всем ОО более 10 обучающихся)соответствующего предмета;−ОО, левая (нижняя) граница доверительных интервалов которых находитсяправее, чем правая (верхняя) граница доверительного интервала среднего баллапо региону;−ОО, для которых коэффициент ранговой корреляции Спирмана rs имеет
отрицательное значение, то есть выявлена обратная связь между школьными
отметками и результатами оценочной процедуры.
Мониторинг – это система непрерывного наблюдения, сбор, обработка,накопление, комплексный анализ информации по группам результативных иконтекстных показателей для выявления динамики подготовки базового уровня,высокого уровня, метапредметных и предметных результатов освоения основной
образовательной программы начального общего образования; основного общего
образования; среднего общего образования; результатов обучающихся поадаптированным основным общеобразовательным программам.
Оценочные процедуры – процедуры независимой оценки результатов
обучающихся (ЕГЭ, ОГЭ, ВПР, НИКО, международные сравнительныеисследования), региональные, муниципальные, школьные диагностические ииные работы, позволяющие выявить уровень и качество подготовки
обучающихся, влияние внешних и внутренних факторов на результаты
обучающихся.

5Приложение 2Составляющие мониторинга региональных показателей системы объективности процедур оценки качества
образования и олимпиад школьников в рамках реализации направления «Система объективности процедур
оценки качества образования и олимпиад школьников» Региональной системы оценки качества образования вСвердловской области№ п/п
1.

2.
3.

4.
5.
6.

7.
8.
9.
10.
11.

ПоказательМуниципальный уровень
Наличие приказов об утверждении сроков, ответственных, порядка, регламентов проведения
независимых оценочных процедур (ВПР, ОГЭ, ЕГЭ, олимпиад школьников)Наличие приказа (или иного документа) об обеспечении объективности процедур оценки
качества образования и олимпиад школьниковНаличие системы подготовки общественных наблюдателей за процедурами оценки качества
образования и олимпиад школьников
Наличие графика выходов на наблюдение за проведением процедуры оценки качестваобразования олимпиад школьников с указанием сроков, образовательных организаций
Наличие рекомендаций для образовательных организаций по обеспечению объективности
процедур оценки качества образования
Наличие информационной (аналитической) справки о результатах обеспечения вобразовательных организациях объективности проведения процедур оценки качества
образования и олимпиад школьников
Проверка всероссийских проверочных работ и олимпиад школьников осуществляется
муниципальной комиссиейВ муниципалитете проводится выборочная перепроверка всероссийских проверочных работ иолимпиад школьников муниципальной комиссией
Наличие информационной (аналитической) справки о результатах процедур оценки качества
образования и олимпиад школьников
Наличие адресных рекомендаций для образовательных организаций по повышению
объективности процедур оценки качества образования и олимпиад школьников
Наличие мероприятий по формированию позитивного отношения к объективной оценке

Оценка
2 балла – по всем процедурам
1 балл – по одной процедуре
0 баллов – отсутствие приказов
1 балл – документ есть0 баллов – документа нет
1 балл – система подготовки есть0 баллов – системы подготовки
нет
1 балл – график есть0 баллов – графика нет
1 балл – рекомендации есть0 баллов – рекомендаций нет1 балл – справка есть0 баллов – справки нет1 балл – да0 баллов – нет1 балл – да0 баллов – нет1 балл – справка есть0 баллов – справки нет1 балл – рекомендации есть0 баллов – рекомендаций нет1 балл – мероприятия есть6

№ п/п

1.

2.

3.
4.

5.

6.
7.

8.

9.

10.
11.

ПоказательОценкаобразовательных результатов и олимпиад школьников0 баллов – мероприятий нетМаксимальный балл12 баллов
Образовательная организацияНаличие приказов об утверждении сроков, ответственных, порядка, регламентов проведения
3 балла – по всем процедурам
независимых оценочных процедур (ВПР, ОГЭ, ЕГЭ и олимпиад школьников)2 балла – по двум процедурам
1 балл – по одной процедуре0 баллов – отсутствие приказовНаличие приказа (или иного документа) об обеспечении объективности процедур оценки
1 балл – документ естькачества образования и олимпиад школьников, предусматривающего предварительное0 баллов – документа нетколлегиальное обсуждение подходов к оцениванию
Наличие принятых прозрачных критериев внутришкольного и итогового оценивания в ОО1 балл - документ есть0 баллов - документа нетНаличие системы подготовки общественных наблюдателей за процедурами оценки качества 1 балл – система подготовки естьобразования и олимпиад школьников0 баллов – системы подготовкинет
Наличие графика выходов общественных наблюдателей на наблюдение за проведением1 балл – график естьпроцедуры оценки качества образования и олимпиад школьников с указанием сроков,0 баллов – графика нетобразовательных организаций
Обеспечение видеонаблюдения за проведением процедуры оценки качества образования и1 балл – видеонаблюдение естьолимпиад школьников и проверки работ участников0 баллов – видеонаблюдения нетОтсутствие ситуации конфликта интересов в отношении учителей и общественных 1 балл – конфликта интересов нетнаблюдателей из числа родителей
0 баллов – конфликт интересовестьНаличие информационной (аналитической) справки о результатах обеспечения в1 балл – справка естьобразовательных организациях объективности проведения процедур оценки качества0 баллов – справки нетобразования и олимпиад школьников
Проверка всероссийских проверочных работ и олимпиад школьников осуществляется1 балл – дакомиссией образовательной организации, состоящей из педагогов, не работающих в классе,0 баллов – нетработы которого проверяютсяНаличие информационной (аналитической) справки о результатах процедур оценки качества1 балл – справка естьобразования и олимпиад школьников0 баллов – справки нетНаличие плана мероприятий по повышению объективности оценки качества образования и1 балл – план естьолимпиад школьников в образовательной организации0 баллов – плана нет7

№ п/п
12.
13.

14.
15.

16.

Показатель
Оценка
Наличие самостоятельно разработанных процедур общественной экспертизы качества
1 балл - даобразования в ОО0 баллов - нетСистематическая трансляция эффективного административного и педагогического опыта на 1 балл – не менее 2 мероприятий вдругие образовательные организациигод
0 баллов - менее 2 мероприятий вгодНаличие повышения объективности оценивания результатов независимых процедур оценки 1 балл - дакачества образования и олимпиад школьников (глубина 3 года)0 баллов - нетРеализация программ помощи учителям, имеющим профессиональные проблемы и дефициты 1 балл - дав части оценивания результатов обучающихся и олимпиад школьников (повышение 0 баллов - нетквалификации, внутришкольное обучение и самообразование, другое)Проведение учителями и методическими объединениями аналитической и экспертной работы 1 балл - дас результатами процедур оценки качества образования и олимпиад школьников0 баллов - нетМаксимальный балл18 баллов
ИТОГОВЫЙ максимальный балл30 баллов

Методика анализа1. Оценка обеспечения объективности процедур оценки качества образования и олимпиад школьников проводится в соответствии сустановленными критериями.
2. Для каждого индикатора устанавливается максимально возможное значение.
В случае если индикатор имеет негативную окраску, то присвоение баллов осуществляется в обратном порядке. В дихотомических
вопросах (вопросах, в которых предусмотрены варианты ответа «да/нет») максимальный балл индикатору присваивается при ответе «да», 0баллов – при ответе «нет».
3. Значение показателя рассчитывается методом суммирования индивидуальных значений индикаторов.
4. Итоговая оценка складывается из суммы баллов, перечень показателей и максимальное значение по каждому показателю
определяются учредителем самостоятельно.
5. Итоговый расчет осуществляется на основании границ сумм баллов:Итоговая оценка объективности (балл)
30-21
20–11
10–0

Высокий уровеньСредний уровеньНизкий уровеньУровень объективности оценки образовательных результато8

5. При проведении оценки могут быть выявлены показатели, приводящие к негативным последствиям для отдельных
категорий участников образовательных отношений и, как следствие, для системы образования, а также неэффективные показатели,мониторинг которых не приведёт к совершенствованию системы образования. Кроме того, такие показатели стимулируют к необъективному
оцениванию образовательных результатов обучающихся, демотивируют руководителей ОО и педагогов и т.д.
(Пример: использование результатов оценочных процедур для рейтингования ОО, (по среднему баллу, по отметкам); - рейтингованиеОО по проценту обучающихся, получивших «4» и «5» по результатам ВПР (или другой оценочной процедуры); выделение лидеров иаутсайдеров среди органов местного самоуправления муниципальных районов и городских округов в сфере образования по результатамВПР).
В случае, если на муниципальном уровне проведение данного анализа проводится на основании ранее утвержденного пакета
документов, при наличии таких неэффективных показателей и показателей, приводящих к негативным последствиям, от их применения
необходимо отказаться.

9Приложение 3.
Министерство общего и профессионального образования Свердловской области(наименование органа государственного контроля (надзора))ЛИСТ НАБЛЮДЕНИЯза проведением Всероссийской проверочной работы
«»г.

(дата присутствия)По адресу:(место проведения проверки)На основании
было проведено

20 1_(вид документа с указанием реквизитов (номер, дата)наблюдение за проведением ВПРот№проверка в отношении:(наименование образовательной организации)Показатели наблюдения
Наличие приказа о проведении ВПРНаличие обучающихся с ОВЗВремя начало и окончания проведения выполнения учащимися ВПРВыделена отдельная аудитория, соответствующая санитарным требованиям и условиям
Соблюдение времени на проведение ВПРОбеспечение порядка в аудитории в ходе выполнения обучающимися ВПРДоброжелательный настрой организаторов ВПРФорма рассадки участников ВПР (по 1 или по 2 участника)Обеспечение всех обучающихся контрольно-измерительными материалами
Наличие общественных наблюдателейОрганизаторы проводят инструктаж для участников и информируют о порядке проведения ВПРИсключение фактов использования обучающимися справочно-информационных материалов по теме ВПРИсключение фактов «подсказывания» обучающимся со стороны организаторов ВПРИсключение фактов выноса работ обучающихся и контрольно-измерительных работ во время проведения
ВПРОтметка

10Показатели наблюдения
Обеспечение сохранности данных при сборе и обработке результатов
Отсутствие фактов использования телефонов организаторами и участниками ВПР во время проведения ВПРОбеспечение объективности оценивания выполненных обучающимися работ

Отметка

Дополнительные комментарии по процедурам организации и проведения ВПР_____________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________________

Подпись должностного лица, осуществляющего наблюдение ___________________________

11Приложение 4Регламент обеспечения объективности ГИА, национально-региональных оценочных процедур

Способы з ащиты инеразглашения ЭМ,КИМ, темКонтроль за исполнением НПА,регламентов, МРТехнологические условияНаправленияУсловияобеспеченияобъективностиЕГЭИСИ-11ОГЭ

ИС-9ВПРДКРВидеонаблюдениеПрименяетсяЦелесообраз ноорганиз оватьприменение

Целесообраз ноорганиз оватьприменение

Целесообраз ноорганиз оватьприменение

Целесообраз ноорганиз оватьприменение

Целесообраз ноорганиз оватьприменениеВидеотрансляцияПортал«СмотриЕГЭ»Не применяетсяНе применяетсяНе применяетсяНе применяетсяНе применяетсяОбщественное
наблюдениеФедеральное,региональноеРегиональное,муниципальноеРегиональное,муниципальноеРегиональное,муниципальноеРегиональное,муниципальноеМуниципальноеКонтроль заисполнением
ПорядкаФедеральный,региональныйРегиональныйРегиональныйРегиональныйРегиональныйМуниципальныйВоз ложениеперсональнойответственностиз а качествопроведенияпроцедурыРуководитель ППЭДиректор ООРуководитель ППЭДиректор ООДиректор ООДиректор ООЗащитаобеспечиваетсятехнологиейшифрования

Темы раз мещаютсяна федеральномпортале воткрытом доступена ограниченный
период времени(з а один час допроцедуры)Защитаобеспечиваетсядоставкой вштрихкодированных
сейф-пакетах

Темы раз мещаютсяна федеральномпортале воткрытом доступена ограниченныйпериод времени(з а один час допроцедуры)КИМы раз мещаютсяна
специализированном федеральном
портале, воткрытом доступеотсутствуют

Защитаобеспечивается
доставкой вгерметичных
пластиковых
пакетах, а также
доставкой
посредством ЗКСЭкз аменационныематериалы,КИМ,темы ИС-9/ ИСИ-1112

Качество проверки экз аменационных работ участников ГИА,Направления

УсловияобеспеченияобъективностиЕГЭ

ИСИ-11ОГЭИС-9ВПР

ДКРДоставкаспециализированной организ ацией

ПрименяетсяНе требуетсяПредлагается
применять
с 2019 г.

Не требуетсяНе требуетсяНе требуетсяКвалификационные
испытанияЕжегодноЕжегодноЕжегодноЦелесообраз новвести с 2020 г.

?

Не применяетсяСогласование
подходов коцениваниюПрименяется сиспольз ованиемвебинаров ФИПИ,инструктажапредседателя ПКПрименяетсяпосредствоминструктажапредседателя ПКПрименяется сиспольз ованием
вебинаров ФИПИ,инструктажа
председателя ПК,ТППК?

?

Не применяетсяРегиональнаяпроверкаПрименяетсяНе применяетсяНе применяетсяНе применяетсяНе применяетсяПрименяется приналичии приказаМОПОСОРегиональнаяперепроверкаПрименяется
с 2017 г.

Не применяетсяПрименяется пораспоряжению
МОПОСО/ решениюГЭКНе применяетсяВводится
с 2019 г.

Не применяетсяПрименяетсяМуниципальнаяпроверкаНе применяетсяПрименяется

ПрименяетсяНе применяется

Целесообраз ноорганиз овать
применение

МуниципальнаяперепроверкаНе применяетсяМожетприменяться

Применяется науровне ТППКМожетприменятьсяМожетприменятьсяМожетприменятьсяФедеральнаяперекрестнаяпроверкаПрименяетсяНе применяетсяНе применяетсяНе применяетсяНе применяетсяНе применяется13Управленческий анализ качества
проведения процедуры

Качество проверкиэкз аменационных работ
участников ГИА,НаправленияУсловияобеспеченияобъективностиЕГЭИСИ-11ОГЭИС-9ВПРДКРРегиональнаяперекрестнаяпроверкаНе применяетсяНе применяетсяПрименяетсяНе применяетсяЦелесообраз ноорганиз оватьприменениеНе применяетсяУдалениеучастника приобнаружениинеразрешенных
справочных
материалов,средств связ и и др.
гаджетов

Использ уетсяРекомендуется
использ овать

Использ уетсяРекомендуется
использ оватьРекомендуется
использ оватьРекомендуется
использ оватьАнализрез ультатовпо з онам рискаПроизводится
с 2017 г.

Производится
с 2017 г.

Вводится
с 2019 г.

Вводится
с 2019 г.

Вводится
с 2019 г.

Производится
с 2018 г.

Производится
с 2017 г.
Применяется
шкалаРособрнадз ора.
Проводится нафедеральном ирегиональном
уровнях.

Вводится
с 2019 г.
Раз рабатывается
региональная
шкала.
Будетпроводиться нафедеральном ирегиональном
уровнях.
Необходимо и намуниципальном.

Вводится
с 2019 г.
Раз рабатывается
региональная
шкала.
Будетпроводиться нафедеральном ирегиональном
уровнях.
Необходимо и намуниципальным.

Вводится
с 2019 г.
Раз рабатывается
региональная
шкала.

Вводится
с 2019 г.
Раз рабатывается
региональная
шкала.

Анализэффективности
организ ационнотехническихусловий
проведенияПроизводится
с 2017 г.
Применяетсяшкала
Рособрнадз ора.
Проводится нафедеральном ирегиональном
уровнях.

14Приложение 5.
КОНЦЕПТУАЛЬНЫЕ ПОДХОДЫК ОБЕСПЕЧЕНИЮ ОБЪЕКТИВНОСТИ РЕЗУЛЬТАТОВОБРАЗОВАНИЯЧто должно пониматься под словами «объективная характеристика»результатов обучения.
Один из общепринятых подходов в этой области состоит в том, чтообъективность является следствием соблюдения заранее описанных правил, покоторым осуществляется как процедура оценивания, так и выставление
результирующей оценки (и, при необходимости – отметки). Чтобы подчеркнутьсоответствие заранее описанным правилам (стандартам), такое оценивание
называют стандартизированным.
Стандартизация имеет прямое отношение к требованиям к результатам
освоения основной образовательной программы. Однако, когда говорят остандартизированном оценивании, обычно имеют в виду более широкое
представление о стандартизации, чем просто соответствие образовательных
результатов требованиям ФГОС.
Рассмотрим более подробно, что может быть стандартизировано длядостижения максимальной объективности оценивания.
Как правило, для проведения стандартизированного оценивания
используется какой-то инструментарий. Это может быть контрольная,проверочная, диагностическая и другие формы работы. В качествеинструментария используется также анкеты, опросные листы, листы наблюдения
и т.д.
Кроме того, процедура стандартизированного оценивания сопровождается
инструктивно-методическим обеспечением, то есть полным и всесторонним
описанием и набором инструкций.
Как правило, для проведения процедуры оценивания используется какая-тотехнология, например, с применением машиночитаемых бланков или свыполнением заданий на компьютерах. Таким образом, стандартизированнаяпроцедура оценивания имеет и организационно-технологическое обеспечение.
Отдельно определяются требования к специалистам, участвующим впроцедуре оценивания, то есть описываются подходы к кадровому
обеспечению процедуры.
Ниже рассматривается более детально каждая из приведенных позиций.
Инструктивно-методическое обеспечение стандартизированного
оценивания
Концептуальное описание процедуры оценивания включает:1.
Описание целей и задач проведения процедуры оценивания, группучастников исследования.
2.
Установление периодичности и графика проведения оценивания всоответствии с его целями и задачами, (срез, вход-выход, лонгитюдное15исследование и т.д.).
3.
Описание методики формирования выборки участников процедуры
оценивания. Дело в том, что некоторые процедуры оценки проводятся «для всех»,а в некоторых случаях в процедуре участвует только специально отобраннаягруппа участников – выборка. Например, национальные исследования качества
образования – это выборочное исследование (обычно около 50 000 участников), аво всероссийских проверочных работах участвуют все обучающиеся во всехшколах в конкретной параллели. Если предполагается выборка, то методика ееформирования индивидуальна для каждого конкретного исследования,определяется его целями и задачами и обеспечивает репрезентативность для всехгрупп категорий участников, на которые предполагается распространить выводы,полученные в ходе исследования.
4.
Описание параметров, которые будут оцениваться, например,результаты обучающихся по какому-то разделу или за год обучения, предметныеили метапредметные результаты и т.п.
5.
Описание того, каким образом отбирается материал для оценивания.
Например, при проведении среза по какому-то тематическому разделу можно
ориентироваться на оценивание определенного важного навыка, а можно ставить
задачу оценить достижение максимально широкого круга требований ФГОС.
Кроме того, в тексте стандартов требования к результатам освоения основнойобразовательной программы сформулированы в обобщенном виде, и составлениезаданий, проверяющих достижение этих результатов, требует более точногоописания. Так, в ЕГЭ и в ОГЭ используются кодификаторы проверяемыхэлементов содержания и требований к уровню подготовки. Они представляютсобой многоуровневые списки (рубрикаторы), в которых все, что необходимопроверять, распределено по отдельным позициям. При составлениидиагностической работы каждое задание может быть отнесено к одному илинескольким пунктам такого рубрикатора.
6.
Общие подходы к оцениванию выполнения отдельных заданий иработы в целом. Например, может быть указано, используются ли в работезадания с развернутыми ответами, которые должны проверяться экспертами, илитолько задания, в которых предусмотрен краткий ответ. Или другой вариант –ответы вводятся на компьютере и проверяются автоматически.
7.
Обоснование методов сбора информации (наблюдение, испытание,опрос, интервью, фокус-группы и т.д.) и соответствующего инструментария(карты наблюдений, диагностическая работа, опросные листы и т.д.).
8.
Описаниеподходовкапробацииинструментариядлястандартизированного оценивания. Апробация – это набор мероприятий, которыепозволяют заранее проверить, что все реализуется именно так, как задумано.
9.
Описание подходов к стандартизации процедур и инструментария
оценочной процедуры. Более подробно этот пункт будет рассмотрен ниже.
10. Описаниеподходовкшкалированиюрезультатовстандартизированной оценочной процедуры, если результаты предполагаетсяпереводить в единую шкалу. Например, за выполнение каждого заданияконтрольной работы могут начисляться какие-то баллы, и требуется описать, как16полученная участником общая сумма баллов переводится в пятибалльную илистобалльную оценку. При этом итоговый балл не обязательно зависит от общей
суммы. Так, работа может состоять из нескольких частей, и может бытьприменено правило, в соответствии с которым положительный балл не ставится,если не набрано определенное количество баллов за каждую из частей (например,такое правило работает в некоторых предметах ОГЭ).
11. Описание набора сведений об образовательных организациях и/илиучастниках оценивания, которые подлежат сбору. Например, при проведении
исследований качества образования часто собирается информация о полеучастников и их текущих отметках.
12. Описание подходов к обработке результатов стандартизированного
оценивания. Например, какие алгоритмы, формулы и т.п. используются.
13. Перечень направлений анализа результатов стандартизированного
оценивания, соответствующий его целям.
14. Модели использования результатов оценивания с указанием групп
потребителей и круга возможных проблем, решению которых будет
способствовать использование результатов.
15. Механизм установления соответствия результатов заданным
критериям (если это предусмотрено целями оценивания). Например, может бытьуказана сумма баллов, являющаяся минимальной границей удовлетворительного
результата выполнения работы.
16. Описание путей обсуждения результатов оценивания. Например,может предполагаться обязательное обсуждение на конференциях или заседаниях
методических объединений.
Концептуальное описание стандартизированного оценивания может принеобходимости включать и другие элементы.
Организационно-технологическое обеспечение процедуры
стандартизированного оценивания
Организационно-технологическое обеспечение описывается порядком
проведения процедуры оценивания, описанным выше.
Основным требованием к организационно-технологическому обеспечению
процедуры оценивания является наличие организационных мер итехнологических инструментов для обеспечения объективности результатов:- единообразия условий проведения процедуры оценивания для всехучастников и образовательных организаций, в том числе с учетом наличия
различных категорий участников с особыми потребностями;- сохранности и конфиденциальности данных, обрабатываемых в процессе
проведения процедуры оценивания, в том числе:•конфиденциальности контрольных измерительных материалов на всехэтапах вплоть до окончания процедуры оценивания;•порядка в аудиториях в ходе выполнения участниками всех действийв рамках проведения процедуры оценивания;•сохранности выполненных участниками работ на всех этапах вплоть17до формирования базы результатов;•сохранности базы результатов процедуры оценивания;- мероприятий по мониторингу и контролю хода проведения процедуры
оценивания;- мероприятий по обеспечению единых подходов к экспертной оценке
результатов и любой другой экспертизе, осуществляемой в ходе процедуры
оценивания;- мероприятий по анализу результатов оценивания на предметобъективности.
Кадровое обеспечение при стандартизированном оценивании
Кадровое обеспечение описывается порядком проведения процедуры
оценивания, описанным выше.
Основным требованием к кадровому обеспечению процедуры оценивания
является наличие необходимых условий для обеспечения объективности
результатов процедуры оценивания, в том числе:- механизмы контроля обеспеченности кадрами всех этапов проведенияпроцедуры оценивания в соответствии с требованиями порядка проведения;- меры по обеспечению единообразия условий привлечения, подготовки и,при необходимости, аттестации специалистов для проведения процедурыоценивания;- меры по предотвращению конфликта интересов в процессе проведенияпроцедуры оценивания.

18