Введение

В программных документах, определяющих цели и направления развития системы образования в Российской Федерации, например, в Государственной программе «Развитие образования на 2013–2020 годы» отмечается большой прогресс в становлении общероссийской системы оценки качества образования. Однако одной из ключевых проблем ее развития является «недостаточная целостность и сбалансированность системы процедур и механизмов оценки качества образования и индивидуальных образовательных достижений, реализуемых на федеральном и региональном уровнях системы образования, что не позволяет обеспечить формирование и развитие единого образовательного пространства». Отмечается также недостаток механизмов и инструментов для оценки образовательных результатов и учета влияния различных факторов на результаты деятельности образовательных организаций. Все это затрудняет принятие эффективных управленческих решений, позволяющих повысить качество российского образования.

В связи с этим весьма актуальной является задача построения сбалансированной системы процедур оценки качества общего образования, позволяющей обеспечить получение надежной информации о состоянии различных компонентов региональных и муниципальных систем образования, в том числе, об их соответствии требованиям ФГОС, а также дающей возможность оценить состояние отдельных компонентов системы общего образования в Российской Федерации в целом.

Наиболее эффективно такая задача может быть решена путем проведения регулярных исследований качества образования, реализуемых на основе сбора и анализа широкого спектра данных о состоянии региональных и муниципальных систем образования. Поэтому в 2014 г. по инициативе Рособрнадзора в Российской Федерации начата реализация программы Национальных исследований качества образования (НИКО), целями которой являются:

• развитие единого образовательного пространства в Российской Федерации;

• содействие реализации поручений Президента Российской Федерации и программных документов Правительства Российской Федерации в части, касающейся качества образования;

• совершенствование механизмов получения достоверной и содержательной информации о состоянии различных уровней и подсистем системы образования, в том числе с учетом введения ФГОС;

• развитие информационно-аналитической и методологической базы для принятия управленческих решений по развитию системы образования в Российской Федерации;

• содействие эффективному внедрению ФГОС;

• содействие процессам стандартизации оценочных процедур в сфере образования.

Программа НИКО предусматривает проведение регулярных исследований качества образования по отдельным учебным предметам, на конкретных уровнях общего образования (не реже 2 раз в год), каждое из которых представляет собой отдельный проект в рамках общей программы.   

Подходы к реализации проектов в рамках программы НИКО

Каждый проект, реализуемый в рамках программы НИКО, имеет свои предмет исследования, цели и задачи, соответствующие актуальным направлениям развития системы общего образования, и является отдельным исследованием в области оценки качества образования.

В рамках каждого проекта предусматривается проведение среди обучающихся в организациях общего образования диагностических работ по отдельным учебным предметам или группам учебных предметов, сбор широкого спектра контекстных данных, непосредственно характеризующих процесс обучения в образовательных организациях, а также анкетирование участников исследования. Исследование влияния социально-экономического статуса семей обучающихся, иных факторов, относящихся непосредственно к семьям обучающихся, не предусмотрено[1].

Диагностические работы выполняются участниками исследований в присутствии организаторов и независимых (от образовательных организаций, в которых проводятся процедуры исследований) наблюдателей.  В процедурах могут принимать участие общественные наблюдатели ЕГЭ или ОГЭ. 

Каждый проект НИКО реализуется на основе единой для всех участников организационно-технологической схемы, определяемой спецификой этого проекта. В частности, могут применяться технологии, основанные на использовании машиночитаемых бланков ответов, а также технологии компьютерного тестирования.

Для реализации каждого проекта составляется план-график его проведения с указанием мероприятий, сроков и ответственных.

Представление и обсуждение результатов каждого проекта программы НИКО проводится на сайте программы edu-niko.ru, а также на очных межрегиональных конференциях по оценке качества общего образования.

По результатам каждого проекта, реализуемого по программе НИКО, выпускается итоговый доклад, создается открытый банк заданий для использования в оценочных процедурах в системе образования.

Формирование выборки образовательных организаций для участия в проектах программы НИКО

Каждый из проектов, реализуемых в рамках программы НИКО, является выборочным исследованием и организован таким образом, что полученные результаты позволяют судить не только о ряде аспектов качества подготовки непосредственных участников исследования, но и выявить показатели качества образования более широкой совокупности обучающихся, а именно:

• генеральной совокупности обучающихся соответствующих классов образовательных организаций Российской Федерации,

• совокупности обучающихся из группы субъектов Российской Федерации, имеющих схожие параметры с точки зрения формирования выборки.

Таким образом, исследования в рамках НИКО проводятся на выборке участников, являющейся репрезентативной как в масштабах Российской Федерации, так и в масштабах группы субъектов Российской Федерации, причем объединение различных групп, внутри которых достигается репрезентативность, в целом совпадает со всем списком субъектов Российской Федерации.

Конкретное разбиение всех субъектов Российской Федерации на группы (страты), внутри которых обеспечивается репрезентативность выборки участников исследования, определяется для каждого отдельного проекта программы НИКО с учетом особенностей данного проекта[2].

Выборка НИКО не является репрезентативной в рамках отдельных субъектов, составляющих каждый страт, и, тем более, в рамках отдельных муниципальных образований.

Подходы к отбору содержания для проведения диагностических работ в рамках проектов программы НИКО

Диагностические работы, проводимые в рамках проектов программы НИКО, основаны на системно-деятельностном и компетентностном подходах. Измерительные материалы представляют собой совокупность заданий, разнообразных инструкций, систем оценивания и шкал по одному или нескольким учебным предметам, а также бланков, анкет, протоколов. Используемые в инструментарии задания направлены на выявление у участников исследования широкого спектра предметных и метапредметных умений, а также сформированности универсальных учебных действий, обеспечивающих возможность успешного продолжения обучения, а именно: сформированности понятийного аппарата по проверяемым разделам содержания; знания основных правил, формул, законов и умение их применять; владения навыками смыслового чтения, понимания и адекватной оценки информации, представленной в различных знаковых системах (текст, таблица, различные виды диаграмм, чертежи и т.п.); умения применять изученные понятия, результаты, методы для решения задач практического характера; владения навыками решения широкого спектра учебных задач, в т.ч. с использованием ИКТ; способности использовать приемы анализа/синтеза, проводить классификации объектов по выделенным признакам, устанавливать причинно-следственные и другие связи, выстраивать логическую цепь рассуждений и распознавать логически некорректные рассуждения и др.

Содержание диагностических работ по программам начального образования соответствует Федеральному государственному образовательному стандарту начального общего образования (приказ Минобрнауки России от 06.19.2009 № 373).

Содержание диагностических работ по программам основного общего и среднего общего образования определяется Федеральным компонентом государственного стандарта основного общего образования (приказ Минобразования России от 05.03.2004 № 1089 «Об утверждении федерального компонента государственных стандартов начального общего, основного общего и среднего (полного) общего образования»). В части требований к уровню подготовки выпускников содержание диагностических работ, с учетом конкретных особенностей используемого инструментария, соответствует Федеральному государственному образовательному стандарту основного общего образования (приказ Минобрнауки России от 17.12.2010 № 1897).

Используемые в измерительных материалах тексты заданий в целом соответствуют формулировкам, принятым в учебниках, включенных в Федеральный перечень учебников, рекомендуемых Министерством образования и науки Российской Федерации к использованию при реализации имеющих государственную аккредитацию образовательных программ начального и основного общего образования (на соответствующий году проведения исследования и предыдущий учебный год).

Подходы к оцениванию выполнения диагностических работ участниками исследований в рамках программы НИКО

Результаты выполнения диагностических работ выдаются в первичных баллах. Суммарные первичные баллы, набранные участником исследования, могут быть по желанию образовательной организации или обучающегося переведены в отметки по пятибалльной шкале на основе рекомендаций, приведенных в спецификациях измерительных материалов соответствующих диагностических работ.

В диагностических работах используется два типа оценивания заданий: дихотомическое (за выполнение задания выставляется 0 баллов или 1 балл) и политомическое (за выполнение задания ставится балл от 0 до 2). В случае дихотомических заданий 1 балл ставится при наличии правильного ответа в заданиях с кратким ответом либо при наличии обоснованного решения и правильного ответа в заданиях с развернутым ответом. В политомических заданиях отдельным баллом оценивается каждый результативный шаг в продвижении участника исследования по пути выполнения задания.

Экспертная проверка развернутых ответов участников проектов НИКО осуществляется на основе стандартизированных критериев и только при условии прохождения экспертами соответствующего предварительного обучения и аттестации. В процессе проверки работ осуществляется выборочный контроль качества проверки.

Направления анализа результатов исследований в рамках программы НИКО

Предполагается проводить анализ результатов проведенных процедур исследований по следующим направлениям:

• анализ результатов выполнения заданий диагностической работы по проверяемым элементам содержания и проверяемым умениям;

• анализ характеристик групп участников с различным уровнем подготовки;

• анализ результатов выполнения заданий диагностической работы в сопоставлении с ответами участников исследования на вопросы анкеты;

• анализ результатов выполнения заданий диагностической работы в сопоставлении с контекстными данными об образовательной организации и участниках, собранными в процессе проведения исследований.

Анализ результатов проводится по совокупности участников исследования, а также по группам субъектов Российской Федерации (стратам), выделенным в процессе формирования выборки образовательных организаций для участия в исследовании. Предполагаются и иные модели кластерного анализа результатов.

Модели использования результатов проекта в рамках программы НИКО

Результаты каждого проекта программы НИКО могут быть использованы:

• На федеральном уровне – для формирования направлений государственной политики в области общего образования и разработки конкретных мер по реализации сформированных направлений;

• На региональном и муниципальном уровне – для разработки методических рекомендаций по совершенствованию преподавания учебных предметов, для совершенствования программ повышения квалификации учителей;

• Образовательными организациями – для совершенствования преподавания учебных предметов на основе методических рекомендаций, для повышения квалификации учителей;

• Родителями и детьми – для повышения информированности, развития моделей родительского оценивания, принятия обоснованных решений о выборе образовательной траектории ребенка.

Не предусмотрено использование результатов НИКО для оценки деятельности образовательных организаций, учителей, муниципальных и региональных органов исполнительной власти, осуществляющих государственное управление в сфере образования.

 [1] Соответствующие научные результаты изложены, например, в материалах международной программы по оценке образовательных достижений учащихся PISA, а также в исследовательском проекте, проведенном НИУ ВШЭ в 2010 году, «Комплексный анализ влияния разных групп факторов на результаты ЕГЭ и социально-экономических и педагогических эффектов введения ЕГЭ».

[2] Кокрен У.  Методы выборочного исследования. - М.: Статистика, 1976 г. - 440 с.

     Ядов В.А. Стратегия социологического исследования: описание, объяснение, понимание  социальной реальности. М.: Добросвет, 1998 г.

     Шварц Г. Выборочный метод. Руководство по применению статистических методов оценивания: пер. с нем. - М.: Статистика, 1978. - 213 с.

    Джесссен Р. Методы статистических обследований/ пер. с. англ.; под ред. и с пред. Е.М.Четыркина. - М.: Финансы и статистика , 1985  - 478 с.