Translate this page:
Please select your language to translate the article


You can just close the window to don't translate
Library
Your profile

Back to contents

Theoretical and Applied Economics
Reference:

Internal independent assessment of the quality of higher education: necessity, types and instruments

Dmitrieva Natalya Vladimirovna

PhD in Economics

Docent, the department of Management and Business Technologies, Kemerovo Institute (Branch) of Plekhanov Russian University of Economics

650992, Russia, Kemerovskaya oblast', g. Kemerovo, pr. Kuznetskii, 39

dmitrievanv@yandex.ru
Gabinskaya Ol'ga Sergeevna

Doctor of Technical Science

Professor, the department of Management and Business Technologies, Kemerovo Institute (Branch) of Plekhanov Russian University of Economics

650992, Russia, Kemerovskaya oblast', g. Kemerovo, ul. Pr. Kuznetskii, 39

gabinskayaos@mail.ru

DOI:

10.25136/2409-8647.2019.1.28661

Received:

14-01-2019


Published:

22-03-2019


Abstract: The subject of this research is the independent assessment of education quality. The issue is that the Law on Education determines such assessment as external, which creates certain difficulties of its implementation namely in the sphere of higher education. At the same time, the government recommends the educational organizations to form the mechanisms of internal independent assessment of education quality. The conducted in 2017 nationwide monitoring of the methods of internal assessment demonstrated that only 19% of universities have internal local documents for regulating such assessment. The authors classify the types of internal independent assessment of education quality according to its object, character, forms of results representation, and level experts’ participation. The article describes the specific assessment tools, as well as provides the general regulation of internal assessment. The conclusion is made on its key features, factors of efficiency, and relation to external assessment.


Keywords:

higher education, quality of education, internal independent assessment, type of assessment, assessment tool, procedures to evaluate, interaction with employers, engaging experts, student government, student portfolio


Федеральным законом «Об образовании в Российской Федерации» в 2012 году был расширен перечень негосударственных механизмов, направленных на повышение качества образования. Кроме общественной аккредитации и профессионально-общественной аккредитации предусматривается возможность проведения независимой оценки качества образования, которая «осуществляется в отношении организаций, выполняющих образовательную деятельность, и реализуемых ими образовательных программ в целях определения соответствия предоставляемого образования потребностям физического или юридического лица. Независимая оценка качества образования предназначена также для выявления уровня результатов освоения образовательных программ, корректировок программ по итогам экспертизы и составления рейтингов. Объектами независимой оценки качества образования являются качество подготовки обучающихся и качество условий осуществления образовательной деятельности [1]».

В указанном Федеральном законе не уточняется само понятие «независимая оценка качества образования», в методических рекомендациях Министерства образования и науки Российской Федерации она определена как «оценочная процедура, осуществляемая в отношении деятельности образовательных организаций и реализуемых ими образовательных программ в целях определения соответствия предоставляемого образования потребностям физических и (или) юридических лиц, в том числе самой образовательной организации, а также учредителя, общественных объединений и других заинтересованных лиц [3]. При этом законом указано то, что такая оценка «проводится юридическими лицами (организациями), которые устанавливают виды образования, группы обучающихся и (или) образовательных программ или их частей, в отношении которых проводится независимая оценка качества подготовки обучающихся, а также условия, формы и методы проведения независимой оценки [1]». За несколько лет, прошедших с появления статьи №95, накоплен определенный опыт, позволяющий говорить об особенностях независимой оценки и проблемах её осуществления.

Преимущества независимой оценки отмечены многими отечественными специалистами в сфере менеджмента образования. Так, О. А. Никишина отмечает её ориентированность на потребителя образовательных услуг в отличие от процедур лицензирования и аккредитации [8]. И. В. Соловьева и Е. Е. Пучкова указывают на такие характеристики как многосубъектность (оценка может проводиться не только аккредитующими организациями, но и работодателями, студентами, зарубежными органами аккредитации) и возможность использования разнообразных технологий оценки, опирающихся не только на жёсткие количественные показатели [10].

При этом сегодня в сфере независимой оценки качества образования есть ряд проблем, наиболее полно освещенных М. А. Измайловой, к главным из которых на наш взгляд относятся отсутствие реестра добросовестных участников рынка независимой оценки, дефицит кадров для её проведения и отсутствие целостного информационного пространства, необходимого для получения достоверных сведений (результаты, критерии оценки, списки программ) всеми участниками процесса [6].

Одной из главных причин перечисленных проблем является то, что по закону об образовании, независимая оценка качества носит внешний характер. Сегодня можно говорить пока лишь о сформированности механизмов такой оценки в сфере общего и профессионального образования. Региональные органы управления образованием создают общественные советы, на конкурсной основе определяют операторов оценки, которые оценивают дошкольные, общеобразовательные и профессиональные образовательные организации по следующим критериям: «удовлетворенность качеством оказания услуг», «доброжелательность, вежливость, компетентность работников организации», «открытость и доступность информации об организации», «комфортность предоставления услуг и доступность их получения». Что касается сферы высшего образования, то на сегодняшний день единый механизм независимой оценки пока находится «на стадии становления и развития, что подтверждается реализацией в последние годы многих проектов и программ — как на государственном уровне, так и на международном (мониторинг независимой оценки квалификации работников, модель оценки качества высшего и дополнительного профессионального образования, AHELO и др.) [9]».

В 2018 г. Министерство образования и науки сформировало методические рекомендации по проведению внутренней независимой оценки качества образования (далее ВНКО), в которых отмечено то, что «действующее законодательство Российской Федерации в сфере образования не регламентирует реализацию внутренней независимой оценки качества образования с привлечением преимущественно внутренних ресурсов образовательной организации. В отличие от внешней оценки внутренняя оценка качества образования может осуществляться образовательными организациями непрерывно. Кроме того, результаты такой оценки могут быть более оперативно учтены в деятельности образовательной организации [2]».

Данные рекомендации, по нашему мнению, являются абсолютно обоснованными, так как ВНКО способствует совершенствованию структуры и содержания образовательных программ; улучшению ресурсного обеспечения образовательного процесса; повышению квалификации преподавателей; повышению мотивации студентов; укреплению связей вуза с профильными организациями; противодействию коррупционным проявлениям. И, кроме того, внутренняя независимая оценка предшествует и положительно влияет на результат внешней оценки, процесс которой в современных условиях является необратимым и неизбежным.

Созданию указанных рекомендаций предшествовал мониторинг технологий проведения ВНКО, применяемых вузами РФ. В мониторинге приняли участие 368 образовательных организаций. По итогам мониторинга 53% образовательных организаций, реализующих основные образовательные программы в очной форме обучения, осуществляют процедуры ВНОКО в отношении всех указанных программ (75% в очно-заочной форме обучения, 65% — в заочной форме). Однако, детальный анализ локальных нормативных актов образовательных организаций, регламентирующих ВНОКО, показал, что в подавляющем большинстве вузов организация оценки носит несистемный характер и является узконаправленной (ограничивается несколькими элементами). Лишь 19% оцениваемых вузов располагают локальными нормативными актами, определяющими непосредственно содержание ВНОКО и регламент её проведения. В 18 % вузов локальные нормативные акты, каким-либо образом регламентирующие ВНОКО, вообще отсутствуют [11]. В остальных вузах отдельные элементы оценки регламентируются, как правило, локальными нормативными актами, определяющими порядок организации и реализации образовательного процесса в целом (например, Положением о текущем контроле успеваемости и промежуточной аттестации обучающихся по образовательным программам высшего образования), а также документами системы менеджмента качества.

В Кемеровском институте РЭУ им. Г.В. Плеханова разработана и реализуется система внутренней независимой оценки освоения основных образовательных программ, которая регламентируется внутренним нормативным актом «Положение о внутренней независимой оценке качества образования по образовательным программам высшего образования – программам бакалавриата, программам специалитета и программам магистратуры». При реализации такой оценки предусмотрены разные виды ВНКО, которые можно классифицировать по нескольким признакам (рисунок):

Рисунок — Классификация видов внутренней независимой оценки

Приведенная выше классификация даёт представление о и разнообразии видов внутренней независимой оценки, её многосубъектности и многообъектности. В рамках перечисленных видов Кемеровский институт (филиал) РЭУ им. Г.В. Плеханова использует ряд разнообразных конкретных инструментов оценки.

Оценка представителей внешней среды прежде всего представлена участием в приеме зачётов, экзаменов, в защите курсовых и выпускных работ специалистов и руководителей профильных организаций-работодателей, представителей отраслевых союзов и ассоциаций, органов власти и других экспертов (например, научно-педагогические работники других образовательных организаций, реализующие аналогичные дисциплины). Более того, при проведение итоговой государственной аттестации (междисциплинарный экзамен и защита выпускной квалификационной работы) их присутствие является обязательным. Согласно Положению о порядке проведения государственной итоговой аттестации доля ведущих специалистов — представителей работодателей и/или их объединений в составе экзаменационных комиссий должна быть не менее 50%. Эта оценка носит качественный характер. В вузе разработана форма отзыва эксперта, позволяющая дать рекомендации относительно уровня подготовки обучающихся, содержания оценочных средств, процедуры проведения оценки. Нередко по итогам экзаменов и защит студенты получают приглашения на стажировку или работу в организациях.

Что касается оценки представителей внутренней среды, то она реализуется с помощью нескольких инструментов. Во-первых, в приеме экзаменов может участвовать преподаватель, ведущий данную дисциплину в других группах, который может независимо и компетентно оценить содержание оценочных материалов, уровень знаний и навыков студентов, организацию процесса приёма экзамена или зачета. Во-вторых, в вузе есть практика присутствия на экзаменах представителей студенческого самоуправления – членов студсоветов факультетов, студсовета института, уполномоченных по качеству образования от студентов, членов студенческого профкома. Их участие позволяет оценить степень соблюдения нормативно-правовых актов, регламентирующих промежуточную и итоговую аттестацию. В-третьих, косвенными потребителями образовательных услуг являются и родители студентов, более того — при договорной форме обучения родители выступают непосредственными заказчиками образовательной услуги, так как подавляющем большинстве случаев договор на оказание образовательных услуг заключается с одним из родителей обучающихся. Родители наравне с представителями студенческого самоуправления так же могут быть субъектами независимой оценки. По данным инструментам внутренней оценки так же разработаны формы отзывов экспертов.

Важнейшим инструментом оценки представителей внутренней среды выступает онлайн-анкетирование студентов, направленное на оценку эффективности реализации отдельных учебных дисциплин, которое проводится в вузе с 2007 года. После завершения дисциплины, сдачи зачета / экзамена в следующем семестре обучающиеся участвуют в анонимном онлайн-опросе. В ходе опроса они оценивают эффективность преподавания дисциплины по таким параметрам как оправдание ожиданий от дисциплины; практическая направленность изучаемых тем (для дисциплин базовой и вариативной частей); степень интереса к дисциплине; уровень учебно-методического обеспечения; оценка своей подготовки к занятиям; требовательность преподавателя; справедливость оценки знаний; умение преподавателя привлечь внимание, доступно донести информацию, привести примеры, установить партнерские отношения с обучающимися и, создать благоприятную атмосферу; степень понимания дисциплины [5]. Результаты анкетирования доводятся руководства вуза, отдельных подразделений и преподавателей (преподаватели имеют возможность сравнить свои оценки со средними значениями по вузу) и служат основанием для совершенствования образовательного процесса, а также учитываются при конкурсном отборе и при поощрении преподавателей.

Оценка без участия эксперта чаще носит количественный характер. Наиболее распространенным инструментом в данном случае является тестирование, которое может быть

· входным (определение степени владения необходимыми (базовыми) знаниями и умениями для изучения предлагаемой дисциплины),

· текущим (оценка степени освоения отдельных пройденных разделов и тем дисциплины, инструмент текущего контроля),

· итоговым (объективная оценка результатов обучения, которая ориентирована как на характеристику освоения содержания курса, так и на дифференциацию учащихся в рамках используемой многобалльной (стобалльной) шкалы оценок знаний при промежуточной аттестации)

· тестированием остаточных знаний (оценка уровня знаний, которые остались в памяти по истечении времени (не менее шести месяцев) после сдачи зачета или экзамена).

Эта оценка является независимой, так как в вузе в рамках существующих фондов оценочных средств разработаны комплекты тестов по большинству учебных дисциплин с использованием виртуально-обучающей среды Moodle. Такой формат даёт возможность проводить оценку знаний без участия преподавателя, ведущего дисциплину и с высокой степенью объективности определять уровень полученных знаний.

Отдельно можно сказать о таком виде оценки как оценка внеучебных достижений. Данный вид оценки включает в себя проведение олимпиад, конкурсов, а также анализ иных внеучебных достижений, представленных в электронных портфолио. Электронное портфолио обучающегося – база данных, представляющая совокупность индивидуальных достижений практически во всех видах деятельности: не только в учебной, но и в научной, социальной, творческой во время обучения в институте. Электронное портфолио обучающегося включает следующие разделы/подразделы:

• профиль;

• обучение — успеваемость, курсовые работы, практика, выпускные квалификационные работы;

• наука и проекты — научные мероприятия, публикации, гранты, НИР;

• достижения — общественные мероприятия, культурно-творческая деятельность, спортивная деятельность, стипендии, награды, упоминания новостях.

Электронное портфолио обучающегося позволяет формировать независимую рейтинговую оценку индивидуальных достижений обучающихся. Достижения обучающихся оцениваются баллами. В вузе поддерживается позиция, отраженная в работах В. А. Литвинова и В. Э. Баумтрога, заключающаяся в том, что наличие или отсутствие в портфолио обучающегося дипломов и грамот влияет на высший уровень владения компетенциями [10], что так же подтверждается и исследованиями специалистов Кемеровского института РЭУ им. Г.В. Плеханова, подтверждающими то, что работодателю важен не диплом, а знания, которые молодой специалист более глубоко изучает самостоятельно [4]. В соответствии с начисленными баллами формируется учебный и общий рейтинг. Результаты рейтинговой оценки учитываются при назначении именных и повышенных стипендий, при формировании «Золотого фонда» института и т.д.

Применение вышеописанных видов и инструментов ВНОКО регламентируется соответствующими разделами Положения. Конкретные мероприятия по реализации ВНОКО отражаются в Программе развития вуза на учебный год, в протоколах структурных подразделений, оформляются приказами и распоряжениями. По итогам учебного года Центр менеджмента качества вуза проводит оценку реализации данных мероприятий, осуществляя сбор информации на уровне руководителей образовательных программ, кафедр и факультетов. Результаты оценки реализации мероприятий в рамках ВНОКО обсуждаются на заседании Совета по качеству. На основании представленной информации формируется План мероприятий по устранению нарушений и недостатков, выявленных по результатам оценки, а также мероприятий по совершенствованию качества образовательного процесса. Свидетельства выполнения данного плана являются критериями ежегодных внутренних аудитов.

Рассмотрев указанные виды независимой внутренней оценки качества образования и используемые в их рамках инструменты, можно сделать ряд следующих выводов:

1. Внутренняя независимая оценка качества образования наравне с внешней обладает такими признаками как многосубъектность и многообразие используемых технологий, и так же, как и внешняя, по большей части ориентирована на интересы потребителей образовательных услуг.

2. Независимый характер ВНОКО во многом зависит от наличия, полноты и актуальности фондов оценочных средств, в том числе тестовых материалов, позволяющих провести объективную оценку качества без личного участия преподавателей.

3. Внутренняя независимая оценка качества образования может служить предварительным подготовительным этапом для последующей внешней оценки, оказывая непосредственное положительное влияние на её последующие результаты.

References
1. Federal'nyi zakon ob obrazovanii v Rossiiskoi Federatsii : prinyat Gos. Dumoi 12 dekabrya 2012 goda // Konsul'tantPlyus [Elektronnyi resurs]. – Rezhim dostupa : http://www.consultant.ru/document/cons_doc_law_140174 , svobodnyi – data obrashcheniya 15.01.2019.
2. O metodicheskikh rekomendatsiyakh (vmeste s "Metodicheskimi rekomendatsiyami po organizatsii i provedeniyu v obrazovatel'nykh organizatsiyakh vysshego obrazovaniya vnutrennei nezavisimoi otsenki kachestva obrazovaniya po obrazovatel'nym programmam vysshego obrazovaniya-programmam bakalavriata, programmam spetsialiteta i programmam magistratury") : pis'mo departamenta gosudarstvennoi politiki v sfere vysshego obrazovaniya Minobrnauki RF ot 15.02.2018 g. № 05-436 // Konsul'tantPlyus [Elektronnyi resurs]. –Rezhim dostupa : http://www.consultant.ru/document/cons_doc_LAW_298168/ , svobodnyi – data obrashcheniya 15.01.2019/
3. O metodicheskikh rekomendatsiyakh po vnedreniyu NSOKO (vmeste s «Metodicheskimi rekomendatsiyami po provedeniyu nezavisimoi sistemy otsenki kachestva raboty obrazovatel'nykh organizatsii») : pis'mo Minobrnauki RF ot 14.10.2013 № AP1994/02 // Konsul'tantPlyus [Elektronnyi resurs]. – Rezhim dostupa : http://www.consultant.ru/document/cons_doc_LAW_153274/, svobodnyi – data obrashcheniya 15.01.2019.
4. Boluchevskaya, A.A. Vybor professii – vybor budushchego /A.A. Boluchevskaya, N.A. Frigina, T.V. Frolova // Nauka, obrazovanie, innovatsii, aprobatsiya rezul'tatov issledovanii: Materialy Mezhdunarodnoi (zaochnoi) nauchno-prakticheskoi konferentsii. pod obshchei redaktsiei A.I. Vostretsova. – Neftekamsk : Mir nauki, 2018. – S. 695-699.
5. Dmitrieva, N.V. Klientorientirovannost': sostavlyayushchie i osobennosti realizatsii v vuze / N.V. Dmitrieva, O.S. Gabinskaya // Kreativnaya ekonomika. – 2018. – №6. – S. 865-876.
6. Izmailova, M.A. Problemy nezavisimoi otsenki kachestva obrazovaniya / M.A. Izmailova // Vestnik Finansovogo universiteta. – 2015. – № 1. – S. 103-111.
7. Litvinov, V.A. Otsenka sformirovannosti kompetentsii obuchayushchegosya na osnove ego portfolio / V.A. Litvinov, V.E. Baumtrog // Sovremennoe obrazovanie. – 2017. – № 1. – S. 88-98.
8. Nikishina, O.A. Normativnye osnovy nezavisimoi otsenki kachestva obrazovaniya / O.A. Nikishina // Vestnik Mininskogo universiteta. – 2014. – № 2. – S. 22-23.
9. Raev, K.V. Instrumentarii i rezul'taty aprobatsii polikomponentnoi modeli nezavisimoi otsenki kachestva vysshego obrazovaniya / K.V. Raev // Vestnik universiteta (gosudarstvennyi universitet upravleniya). – 2018. – №5. – S. 181-188.
10. Solov'eva, I.V. Novye protsedury nezavisimoi otsenki kachestva obrazovaniya v vuze / I.V. Solov'eva, E.E. Puchkova // Pedagogicheskoe masterstvo i pedagogicheskie tekhnologii. – 2015. – №2(4). – S. 165-170.
11. Temnov, E.S. Analiz tekhnologii vnutrennei nezavisimoi otsenki kachestva obrazovaniya, ispol'zuemykh v rossiiskikh vuzakh / E.S. Temnov [i dr.]. // Izvestiya tul'skogo gosudarstvennogo universiteta. Pedagogika. – 2018. – №3. – S. 124-132.