The experience of project evaluation of the socially oriented non-profit organizations of Sverdlovsk Region

Во взаимоотношениях государства и общества одно из важнейших мест занимают взаимоотношения государства с молодежными организациями. Развитие молодежных общественных объединений актуализирует проблему соотношения процессов конкуренции и интеграции в их взаимодействии. Главная задача государства в этом процессе – создание эффективной системы взаимодействия всех субъектов социального партнерства, деятельность которых направлена на создание оптимальных условий для самореализации молодежи.

По данным переписи населения в Свердловской области проживает 971 518 молодых граждан, что составляет более 25% жителей Среднего Урала.

Губернатор Свердловской области Е.В. Куйвашев подчеркивает: «Молодежь Свердловской области - это колоссальный кадровый и интеллектуальный потенциал региона. Именно им в ближайшие десятилетия предстоит стать основой экономики, управления и производства. Именно от молодежи Среднего Урала зависит будущая конкурентоспособность нашей области на российском и на мировом рынке. Поддержка молодежи - важнейшая задача региональной власти». Согласно федеральному закону «О государственной поддержке молодежных и детских общественных объединений», действующему с 1995 года, под государственной поддержкой молодежных и детских объединений понимается совокупность мер, принимаемых органами государственной власти Российской Федерации в соответствии с законодательством Российской Федерации в области государственной молодежной политики в целях создания и обеспечения правовых, экономических и организационных условий деятельности таких объединений, направленной на социальное становление, развитие и самореализацию детей и молодежи в общественной жизни, а также в целях охраны и защиты их прав.

Среди мер государственной поддержки молодежных общественных объединений особое место принадлежит предоставление из областного бюджета субсидий для реализации проектов. Государственные гарантии Свердловской области предоставляются некоммерческим организациям, прошедшим отбор, в порядке, предусмотренном бюджетным законодательством Российской Федерации, законодательством Свердловской области об управлении государственной собственностью Свердловской области и настоящим Законом, а также нормативными правовыми актами Свердловской области, принимаемыми Правительством Свердловской области.

Министерством физической культуры, спорта и молодежной политики Свердловской области проводятся конкурсы некоммерческих негосударственных организаций не являющихся государственными и муниципальными учреждениями на предоставление субсидии из областного бюджета на реализацию проектов по работе с молодежью и по патриотическому воспитанию молодых людей в Свердловской области. Данный конкурс содержит в себе процедуры, регламентированные Постановлением Правительства Свердловской области.

Результаты проведенного нами ранее исследования свидетельствуют об отсутствии в России унифицированной системы оценки социальных проектов. В Свердловской области, как и в других регионах, существует собственная практика оценки социальных проектов. В 2016 году нами была проанализирована конкурсная процедура оценки социальных проектов, представленных для получения государственной субсидии в Министерство физической культуры, спорта и молодежной политики Свердловской области. Для распределения субсидий Министерством создана комиссия в составе 9 членов из представителей органов государственной власти Свердловской области, Общественной палаты Свердловской области, средств массовой информации, органов молодежного самоуправления, работников государственных и муниципальных учреждений сферы молодежной политики, ученых, которая руководствуется постановлением Правительства Свердловской области от 20.01.2015 № 25-ПП «Об утверждении порядка определения объема и условий предоставления субсидий из областного бюджета некоммерческим организациям, не являющимся государственными и муниципальными учреждениями, на реализацию проектов по работе с молодежью в 2015-2020 годах».

Оценка проектов осуществляется в два этапа - заочное дистанционное рассмотрение заявлений и проектов участников конкурса в электронном виде, и выставление баллов по критериям оценки проектов для заочного рассмотрения, а затем очная защита проектов, отобранных для второго этапа конкурса. По результатам двух этапов утверждается сумма выделенных субсидий. Каждый член конкурсной Комиссии оценивает отдельно каждый проект, указанный в заявлении, поданном на конкурс, по результатам которого организациям предоставляются субсидии на софинансирование проектов, выставляя баллы согласно критериям оценки проектов.

Представляет особый интерес анализ критериев, по которым производится оценка представленный проектов – для заочного и очного этапов соответственно. Форма оценки для экспертов представлена в таблице 1.

Таблица 1

Критерии оценки социальных проектов

Максимальная сумма баллов всех членов комиссии для одного проекта для заочного и очного этапов определяется суммированием баллов, выставленным каждым экспертом.

На основании суммы баллов, выставленных членами комиссии по критериям № 1 – 6 на заочном этапе конкурса, комиссия в каждом направлении конкурса формирует рейтинг проектов.

Очный этап конкурса проводится в форме открытой презентации проектов. По итогам очного этапа конкурса формируется единый итоговый рейтинг проектов на основании суммы баллов очного этапа конкурса. Размер субсидии рассчитается по определенной формуле на основании суммы баллов по критерию № 11.

К безусловным достоинствам существующей практики оценки можно отнести наличие методики определения объема средств, предоставляемых некоммерческим организациям на реализацию проектных мероприятий; разработанность балльной системы оценок для определения сообразности выделения финансовых средств; учет организационных параметров НКО, что создает предпосылки надежности в отборе участников конкурса для предоставления субсидий; дифференцированный подход, учитывающий специфику проектной тематики. Однако наличие положительного опыта реализации социально значимых проектов и их оценки не исключает ряда существенных недостатков, весьма характерных для большинства существующих в подобной практике методик. В частности: отсутствие полисубъектной модели оценки проектов; преобладание критериев, связанных с организационными характеристиками НКО, что приводит к неравенству стартовых возможностей субсидирования НКО; преобладание количественных критериев в ущерб качественных; отсутствие собственно критериев проектосообразности; отсутствие этапности мониторинговой работы – оценка социальных проектов осуществляется преимущественно на этапе предварительной экспертизы проектов, отсутствует срединная и итоговая оценка; дифференцированный подход, учитывающий специфику проектной тематики, унифицирует систему критериев и методику определения объема выделяемых средств, но не выделяет специфические критерии проектов по разным направлениям региональных программ поддержки СО НКО; при наличии балльной системы оценок отсутствует весовая значимость различных групп критериев оценки; отсутствует учет социальных ожиданий и предпочтений основных участников социального проектирования.

Как мы видим, в методике не содержится конкретных рекомендаций внутри критерия, по которым эксперт мог бы четко определить количество баллов, полученных проектом. Отметим, что данная особенность методики вносит существенный элемент субъективизма со стороны члена Комиссии при выставлении оценок проектам-участникам Конкурса.

После проведения конкурса проектов НКО в 2016 г. нами был проведено 7 экспертных интервью с членами Комиссий конкурсов на предоставление субсидий, организуемых Министерством физической культуры, спорта и молодежной политики Свердловской области.

Все эксперты отметили, что в целом они знакомы с проектной технологией. В процессе оценки проектов респондентами были отмечены существенные недостатки процедуры и трудности методики оценивания, которые зафиксированы в Таблице 2.

Таблица 2

Недостатки процедуры и трудности методики оценки проектов

В представленных результатах две позиции (1 и 6) относятся к организации процедуры конкурсного отбора. Очевидно, что она нуждается в совершенствовании как по срокам для предоставления экспертам большего времени для изучения проектов на заочном этапе конкурса, так и по совершенствованию формы конкурсной заявки. Конкурсная заявка содержит, собственно, описание организационных характеристик НКО и проекта. Содержание проекта ограничивается только пятью пунктами, представленными в Таблице 3.

Таблица 3

Описание содержания проекта

Второй главной сложностю в оценке эксперты отметили отсутствие ярких инновационных идей проектов. Очевидно, что этот недостаток выходит за рамки предмета данной статьи и является чрезвычайно люботным аспектом содержательного рассмотрения конкурсного отбора проектов для получения государственной субсидии.

Три отмеченных экспертами недостатка используемой в данный момент методики оценки проектов относится к группе проектосообразных критериев. Причем, позиция 5 «Неточные формулировки целей и задач проектов» является прямой причиной позиции 3 «Встречающиеся в проектах противоречия между целями и задачами, мероприятиями, а также между ожидаемыми результатами и сметой». Трудность оценки проектов, содержащих противоречивые цели и задачи, и в силу этого (в соответствии с технологией проектной деятельности) недостоверной сметой и сроками реализации проекта – заложены в предлагаемой форме представления проектов, приведенной в Таблице 3. В пяти приведенных пунктах в свернутом виде содержатся все этапы разработки и реализации проекта в соответствии с международным стандартом проектной деятельности. Приведенная форма никаким образом не позволяет разработчику проекта описать точные и необходимые параметры проекта, а эксперту - оценить проект, применяя проектосообразные параметры. Отсюда – неудовлетворенность экспертов позициями, связанными с собственно содержанием проекта, ни по качеству проекта, ни по параметрам оценки.

С указанными недостатками непосредственно связаны и предлагаемые экспертами изменения в процедуре и методике оценки проектов. Результаты опроса представлены в Таблице 4.

Таблица 4

Предлагаемые изменения в процедуре и методике оценки проектов

Из семи позиций в приведенных ответах шесть относятся к совершенствованию процедуры проведения конкурса и одна – по совершенствованию методики. Вторая и шестая позиции очевидно описывают одно и то же – унификацию формы представления проектов и методику оценки на основе более ясных и обоснованных критериев.

Что касается формы представления проектов, то в практике разработки и реализации проектов существуют международные и российские стандарты, использующие унифицированные инструменты, содержание и структуру проектов. В данном случае было бы целесообразно разработать более подробную форму представления проекта на конкурс, являющуюся кратким изложением стандартной структуры проекта.

Применение методики оценки проектов социально ориентированных НКО, разработанная авторским коллективом Уральского федерального университета в составе Л. Н. Борониной, Е. В. Зверевой, А. А. Кузьминчук, А. В. Пономарева, З. В. Сенук, А. А. Шпак в 2014 г. по заказу Министерства социальной политики Свердловской области, по нашему мнению, позволяет избежать недостатков в процессе оценки проектов, которые были указаны выше. В ходе нашего исследования была произведена оценка проектов-победителей конкурса в 2016 г. при помощи параметрической методики авторского коллектива УрФУ. Результаты представлены в Таблице 5.

Таблица 5

Оценка проектов-победителей конкурса в 2016 г. по параметрической методике

На полную оценку 34 проектов по параметрической модели оценки социальных проектов было затрачено полных 12 часов, т.е. в среднем оценивание одного проекта занимает 21 минуту. Как следует из Таблицы 5 лишь семь проектов преодолели границу в 60%, большая часть проектов получила оценки в пределах 50-60%. Как следует из математических закономерностей, заложенных в параметрическую методику оценки, высокое качество проекта с полным обоснованием всех подсистем проекта, таких обязательных как смета, риски, команда, а также с правильным контентом задач проекта, достигается только с уровня оценки 70-80%.

Низкие оценки проектов-победителей, зафиксированное в оценке по параметрической методике, подтверждает экспертное мнение о несовершенстве предлагаемой формы заявки и представления проекта на конкурс, которая даже не предполагает тщательную разработку собственно проектных инструментов и содержательных компонентов, а также существенных недостатках актуальной методики оценки проектов, применяемой Министерством физической культуры, спорта и молодежной политики. Этот недостаток влечет за собой невозможность составить точную смету проекта, управлять рисками, удовлетворить интересы стейкхолдеров, а также осуществлять мониторинговые процедуры на всех этапах реализации проекта.

Эти выводы подтверждаются и результатами опроса разработчиков проектов в молодежных организациях Свердловской области. Результаты проведенного анкетирования приведены в Таблице 6.

Таблица 6

Мнение респондентов о существующей системе оценки проектов

Критическое отношение к проведению процедуры конкурсного отбора и низкая удовлетворенность существующей системой оценки среди разработчиков проектов проявляется в их предложенпиях по совершенствованию того и другого. В частности, самыми распространенными предложениями стали обучение разработчиков и экспертов технологии проектной деятельности, и совершенствание самой процедуры конкурсного отбора.