Approach to integrated assessment of quality of educational institutions on the basis of the adapted methodology for assessing the effectiveness bodies of executive power subjects of the Russian Federation

Проблемой современного этапа развития региональной системы оценки качества образования, является недостаточная целостность и сбалансированность системы процедур и механизмов оценки качества образования, что затрудняет принятие эффективных управленческих решений, не позволяет добиваться эффективности принимаемых мер. Оценка качества регионального образования предполагает оценку образовательных объектов. Под образовательными объектами понимаются образовательные организации (ОО) различных типов: дошкольные, общеобразовательные организации, организации дополнительного и профессионального образования.

Комплексное оценивание качества деятельности ОО в регионе производится на основе проведенных мониторинговых исследований по трем направлениям: качество основных условий, качество реализации образовательного процесса, качество результатов. Каждый мониторинг состоит из множества индикаторов. Образовательный индикатор – это вычисляемый или измеряемый показатель, который характеризует качество образовательной деятельности организации, усилия властей, направленные на поддержание или улучшение ее состояния, отражающий степень достижения целевых значений образовательных индикаторов.

Для расчета комплексной оценки качества деятельности ОО используем адаптированную методику, утвержденной Постановление Правительства Российской Федерации ^[3]. В рамках данной методики рассчитывается показатель (`K` ) комплексной эффективности деятельности органов исполнительной власти муниципальных образований, который определяется значениями трех сводных показателей: сводного индекса показателя эффективности (`Ip` ), индекса среднего темпа роста показателя эффективности (`Ist` ), индекса среднего объема показателя эффективности (`Iso` ). В нашем случае попробуем применить данную методику на региональную образовательную систему. В качестве органов исполнительной власти будут выступать ОО.

Расчет оценки эффективности деятельности осуществляется поэтапно. На первом этапе проводится выбор и анализ показателей эффективности, и их нормирование ^[2]. Определяются базовые и дополнительные показатели. На втором этапе аналитической работы проводится сравнительная оценка нормированных значений показателей и расчет значений среднего объема `O_(i)=(P_(j)+P_(j-1)+P_(j-2))/(3)` и среднего темпа роста `T_(i)=root(3)(((P_(j))/(P_(j-1))) * ((P_(j-1))/(P_(j-2))))`, где `P_(j), P_(j-1), P_(j-2) > 0`, где `P_(j)` - значение показателя эффективности деятельности за отчетный год; `P_(j-1)` - значение показателя эффективности деятельности за год, предшествующий отчетному; `P_(j-2)` - значение показателя эффективности деятельности за год, предшествующий на два года отчетному.

В частных случаях, если какие-либо данные по ОО отсутствуют или равны нулю, то для расчета среднего темпа роста ( `T` ) воспользуемся следующими формулами:

• если `P_(j)=0`, при любых значениях `P_(j-1),P_(j-2),P_(j-3)`, то `T_(j)=0`;

• если `P_(j-1)=0, P_(j)>0, P_(j-2)>0`, то `T_(j)=root(P_(j)/P_(j-2))`;

• если `P_(j-2)=0, P_(j)>0, P_(j-1)>0`, то `T_(j)=root(P_(j)/P_(j-1))`;

• если `P_(j-2)=0, P_(j-1)=0, P_(j)>0`, то `T_(j)=1`.

Далее рассчитывается индекс среднего темпа роста `Ist_(i)=(T_(i)-T^(min))/(T^(max)-T^(min))` (в отношении индекса показателя, большее значения которого отражает меньшую эффективность `Ist_(i)=(T^(max)-T_(i))/(T^(max)-T^(min))`), где `T_(i)` - значение среднего темпа роста i-го показателя качества деятельности за отчетный год и два года предшествующие отчетному; `T^(min)` - минимальное значение среднего темпа роста показателя качества деятельности за отчетный год и два года, предшествующие отчетному; `T^(max)` - максимальное значение среднего темпа роста показателя качества деятельности за отчетный год и два года, предшествующие отчетному.

Рассчитывается средний объем `Iso_(i)=(O_(i)-O^(min))/(O^(max)-O^(min))` (в отношении индекса показателя, большее значения которого отражает меньшую эффективность по формуле `Iso_(i)=(O^(max)-O_(i))/(O^(max)-O^(min))`) по показателям эффективности деятельности за текущий год и два года предшествующие ему, где `O_(i)` - значение среднего объема роста показателя качества деятельности; `O^(min)` - минимальное значение среднего объема роста показателя качества деятельности; `O^(max)` - максимальное значение среднего объема роста показателя качества деятельности.

На третьем этапе производится расчет сводного индекса по базовым показателям `Ip_(i)=0,8*Ist_(i)+0,2*Iso_(i)`, где `Ist` - индекс среднего темпа роста показателя качества; `Iso` - индекс среднего объема роста показателя качества. Аналогично рассчитывается сводный индекс по дополнительным показателям.

Комплексная оценка качества деятельности ОО определяется по формуле ^[3] `K=0,8*((1/n)*sum_(i=1)^n Ip_(i) ) + 0,2*((1/m)*sum_(i=1)^m Is_(i))`, где `Ip` - сводный индекс значения показателя качества деятельности ОО по базовым показателям; `Is` - сводный индекс значения показателя качества деятельности ОО по дополнительным показателям; `n,m` - количество базовых и дополнительных показателей соответственно.

Результаты моделирования реализованы на примере модели комплексной оценке качества деятельности общеобразовательных организаций.
Произведем расчет комплексных показателей на примере трех ОО. Например, имеются показатели оценки результативности деятельности и показатели деятельности ОО подлежащей самообследованию ^[4]. Выберем из данных мониторингов базовые и дополнительные показатели. Пронормировав показатели (табл. 1, 2), рассчитаем комплексную оценку ОО.

Таблица 1

Базовые показатели качества деятельности общеобразовательной организации

Таблица 2

Дополнительные показатели качества деятельности общеобразовательной организации

Для каждого показателя качества рассчитаем индекс среднего темпа роста (`Ist` ), индекс среднего объема (`Iso` ) и сводный индекс (`Ip` ) индикатора эффективности деятельности по данным в таблицах 1 и 2. Далее вычислим комплексную оценку качества деятельности для каждой ОО. Получим `K_(1)=0,347` ; `K_(2)=0,374` ; `K_(3)=0,427` .

По степени отклонения комплексной оценки (`K` ) от среднего значения, организации в кластере ^[1] ранжируются по уровням достижения:

• высокой оценки качества деятельности;

• средней оценки качества деятельности;

• низкой оценки качества деятельности.

Среднее значения в кластере `K_(avg)=0,382` . Следовательно ранг ОО1 – средняя оценка качества деятельности, ОО2 – средняя оценка качества деятельности, ОО3 – высокая оценка качества деятельности.

Данный подход отличается от подходов рассмотренных в ^[2] тем, что не требуется знания весовых коэффициентов показателей, что облегчает процесс расчета комплексной оценки эффективности деятельности ОО.

` `

Таким образом, в статье исследован подход к оценке эффективности деятельности ОО. Доказано, что данный подход, основанный на адаптированной методике оценки ^[3], может использоваться для расчета комплексной оценки эффективности деятельности ОО в регионе. Проведены расчеты комплексных показателей качества деятельности ОО на примере общеобразовательных организации, при помощи данного подхода с использованием методов многокритериальной оптимизации ^[2]. Рассчитанные комплексные оценки показывают что, ОО3 имеет высокий уровень качества образовательной деятельности относительно двух других ОО.

Для расчета комплексных оценок используются результаты мониторинговых исследований, показатели которых являются унифицированными. Мониторинги проводятся ежегодно на всех уровнях образования и практически во всех регионах Российской Федерации. Таким образом, данный подход универсален и может использоваться не зависимо от региона и уровня образования.