Отдельные методики оценки вузов

1.4 Отдельные  методики определения и оценки  результативности и эффективности  деятельности высших учебных  заведений

1.4.1 Типовая  методика по оценке результативности  научно-исследовательских организаций  Министерства образования и науки  Р.Ф.

Для оценки результативности высших учебных заведений в настоящее время не создано универсальной методики. Для того чтобы иметь возможность глубокого анализа и опираться на предшествующий опыт, полезным будет ознакомиться с методикой оценки результативности, которая создана Министерством образования для научно-исследовательских организаций 14 октября 2009 года во исполнение пункта 2 Постановления Правительства Российской Федерации от 8 апреля 2009 г. N 312 "Об оценке результативности деятельности научных организаций, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения". Вузы имеют схожесть по выполняемым функциям с научно-исследовательскими организациями в части некоторых моментов деятельности, поэтому данную методику необходимо взять на вооружение при подготовке универсальной методики оценки результатов деятельности вузов.

Типовая методика оценки Министерства образования и  науки определяет порядок проведения оценки результативности деятельности научных организаций, подведомственных федеральным органам исполнительной власти или государственным академиям наук, выполняющих научно-исследовательские, опытно-конструкторские и технологические работы гражданского назначения.

Целью проведения оценки результативности деятельности является формирование эффективной системы научных организаций, увеличение их вклада в социально-экономическое развитие страны и повышение эффективности принятия управленческих решений в сфере науки.

Оценка результативности проводится на основе анализа и сопоставления показателей оценки результативности деятельности научных организаций по следующим направлениям:

• научный потенциал и эффективность научных исследований;
• вовлеченность научной организации в национальное и мировое научно-образовательное сообщество;
• коммерциализация и прикладное значение результатов исследований;
• кадровая обеспеченность научной организации;
• ресурсная обеспеченность научной организации;
• состояние финансовой деятельности научной организации.

Критериями  оценки результативности являются:

1. По направлению  "научный потенциал и эффективность  научных исследований":

1) общая характеристика  научного потенциала;

2) публикационная  активность;

3) объекты интеллектуальной  собственности. 

2. По направлению  "вовлеченность научной организации в национальное и мировое научно-образовательное сообщество":

1) участие в  международном научно-техническом  сотрудничестве;

2) интеграция  науки и образования. 

3. По направлению  "коммерциализация и прикладное  значение результатов исследований":

1) использование  инновационных технологий;

2) взаимодействие  с реальным сектором экономики; 

3) инновационная  инфраструктура.

4. По направлению  "кадровая обеспеченность научной  организации":

1) обеспеченность  исследователями и их структура; 

2) подготовка научных кадров.

5. По направлению  "ресурсная обеспеченность научной  организации" - обеспеченность научным  оборудованием и необходимыми  условиями научной работы.

6. По направлению  "состояние финансовой деятельности  научной организации":

1) доходы организации;

2) расходы организации; 

3) структура  внутренних затрат на исследования  и разработки.

В случае необходимости  учета особенностей деятельности научных  организаций федеральные органы исполнительной власти или государственные  академии наук при разработке методик могут дополнять перечень вышеизложенных показателей.

Оценка результативности деятельности научной организации  включает следующие этапы:

1. формирование оценочной комиссии;
2. проведение оценки результативности деятельности научной организации;
3. подготовка заключения об оценке результативности деятельности научной организации.

Сам же анализ производится по показателям представленным в  таблице 1.1.

Таблица 1.1 - Показатели оценки результативности деятельности научных учреждений (данные за последние 5 лет с разбивкой по годам)

Направление оценки	Критерии оценки	Показатели оценки
1.Научный потенциал  и эффективность научных исследований	1.1 Общая характеристика научного потенциала	Удельный вес внутренних затрат на исследования и разработки в общем объеме услуг (%) выполненных  научной организацией работ.   Внутренние затраты на исследования и разработки, отнесенные к численности исследователей (тыс. рублей/чел.)                                                                     Число защищенных за период оценки работниками  научной организации докторских и кандидатских диссертаций, отнесенное к численности исследователей                                                                     Перечень государственных  и международных премий, призов, наград, почетных званий, полученных научной  организацией или отдельными ее работниками  за период оценки
	1.2 Публикационная активность	Число публикаций работников научной   организации в Российском индексе научного цитирования (далее - РИНЦ), отнесенное к численности исследователей (за каждый год из последних пяти лет, начиная с года, предшествующего                                    текущему)                       Цитируемость работников научной  организации                     в РИНЦ (Общее число ссылок на публикации работников научной организации  в РИНЦ (за каждый год из последних пяти лет, начиная с года, предшествующего текущему), отнесенное к численности исследователей научной организации  в году, предшествующем текущему)                                                                      Число публикаций работников научной   организации в Web of Science, отнесенное к численности исследователей (Число  публикаций за последние пять лет (сумма,  начиная с года, предшествующего текущему).   Численность исследователей в году, предшествующем текущему)                                                                    Цитируемость работников научной организации в Web of Science (Общее  число ссылок на публикации работников                                     научной организации в Web of Science (сумма  за последние пять лет, начиная с года, предшествующего текущему), отнесенное к численности  исследователей  научной организации  в году,  предшествующем текущему)                                                                            Импакт-фактор публикаций работников научной                         организации в Web of Science (Число  публикаций работника научной организации  в журнале, зарегистрированном в Web of Science (за каждый год  из последних пяти лет, начиная  с года, предшествующего                                   текущему), умножается на импакт-фактор данного журнала в соответствующем году; сумма полученных значений (по годам, работникам и журналам) делится  на общее (за последние пять лет) число  публикаций работников научной  организации в Web of Science)                                                                                Число опубликованных докладов, тезисов докладов, представленных работниками научной организации  на крупных  конференциях, симпозиумах  и чтениях (более 150 участников), а также конференциях, организованных в соответствии с планами федеральных органов исполнительной власти,                                     государственных академий наук   или на средства российских и    международных фондов (включая  РФФИ и РГНФ), отнесенное к численности исследователей                                                                                      Число монографий и глав в монографиях, учебников и глав в учебниках, отнесенное к численности  исследователей
	Объекты интеллектуальной собственности	Число охраняемых объектов       интеллектуальной собственности, принадлежащих научной  организации, отнесенное к численности  исследователей                                                                     Число отечественных и зарубежных патентов (свидетельств) на объекты интеллектуальной собственности, полученных научной  организацией и ее работниками за период оценивания, отнесенное к численности  исследователей
2. Вовлеченность научной  организации в научно – образовательное и    мировое сообщество	2.1 Участие в международном  научно-техническом сотрудничестве	Удельный вес средств  иностранных источников во внутренних затратах на исследования и разработки (%)     Удельный вес средств, полученных по отечественным грантам и целевым программам во внутренних затратах наисследования и разработки (%)                                                                       Перечень основных научных  мероприятий (конференций, семинаров  и др.), проведенных научной организацией, вкоторых участвовали зарубежные и отечественные ученые, не являющиеся работниками данной организации (с указанием общего числа участников, из них числа зарубежных ученых и числа отечественных ученых, не являющихся работниками данной научной организации)
	2.2 Интеграция науки  и образования	Число научно-образовательных  структур (базовых кафедр, лабораторий, научно- образовательных центров и др.), созданных совместно с высшими  учебными академиями                                                                                         Численность работников научной  организации, ведущих  преподавательскую  деятельность, отнесенное к численности исследователей (%) организации
3 Коммерциализация и  прикладное  значение         результатов         исследований	3.1 Использование инновационных  технологий	Объем средств, поступивших  от передачи технологий, отнесенный к  численности работников научной  организации (тыс. рублей/чел.)
	3.2 Взаимодействие с  реальным сектором экономики	Объем средств, поступивших  по договорам с предприятиями  на выполнение НИОКР (оказание научно-технических  услуг), отнесенный к численности работников научной организации (тыс. рублей/чел.)                                                                     Число подразделений  опытной базы и совместных с предприятиями  структур (научных центров, лабораторий  и других)
	3.3 Инновационная инфраструктура	Перечень элементов  инновационнойинфраструктуры, созданных научной организацией или с ее участием (с указанием показателей масштабов  и результатов их деятельности                                                                      Количество созданных малых  инновационных предприятий
4. Кадровая обеспеченность  научной организации	4.1 Обеспеченность исследователями  и их структура	Удельный вес исследователей в общей численности работников научной  организации (%)                   Численность высококвалифицированных специалистов (кандидатов наук и докторов наук), отнесенная к  общей численности исследователей (%)                                                                                  Численность исследователей в возрасте до 39 лет, отнесенная к  численности исследователей (%)
	4.2 Подготовка научных  кадров (%)	Численность аспирантов, докторантов, отнесенная к численности  исследователей
5. Ресурсная обеспеченность  научной организации	5.1 Обеспеченность научным  оборудованием и необходимыми условиями научной работы	Доля в основных  фондах:         зданий и сооружений (%) машин и оборудования (%)        - нематериальных основных фондов (%)   Доля площадей, занятых научным  оборудованием (%)                                                                                   Доля площадей, не сдаваемых  в аренду в общей площади зданий (%)                                                                            Удельный вес машин  и оборудования в возрасте до трех лет включительно в  общей стоимости машин и оборудования (%)                                                                     Среднегодовая стоимость  основных средств исследований и  разработок в расчете на одного работника  научной организации (тыс. рублей/чел., фондовооруженность)                                                                     Среднегодовая стоимость машин  и оборудования в расчете на одного исследователя (тыс. рублей/чел., техновооруженность)                                                                                 Среднемесячная заработная плата  работников научной  организации                                                                      Среднемесячная заработная плата  исследователей научной  организации
6. Состояние финансовой  деятельности научной организации	6.1 Доходы научной организации	Доля доходов от обычных  видов   деятельности в общих  доходах научной организации (%)                   Доля доходов от сдачи зданий, помещений в аренду в общих доходах научной организации (%)                                                                                     Доля доходов от сдачи  машин и   оборудования в аренду в общих доходах научной организации   (%). Коэффициент валовой  рентабельности (отношение  валовой прибыли  к среднегодовой стоимости основных  фондов научной организации)                                                                                        Коэффициент оборачиваемости кредиторской задолженности (за исключением бюджетных учреждений) (отношение выручки от реализации продукции к среднегодовой кредиторской задолженности)
	6.2 Расходы научной  организации	Доля расходов от обычных видов  деятельности в общих  фактических расходах научной организации (%)
	6.3 Структура внутренних  затрат на исследования и разработки	Доля во внутренних затратах на  исследования и  разработки:      бюджетных средств, выделенных на внеконкурсной основе (бюджетная смета, бюджетные субсидии - в  зависимости от организационно-правовой формы научной организации); средств, полученных на выполнение  проектов в рамках  федеральных целевых программ; средств,  полученных на выполнение  заказов хозяйствующих субъектов реального сектора российской экономики;  средств, полученных  от сдачи имущества в аренду

    

По результатам  проведения оценки результативности деятельности научных организаций Комиссия готовит  заключения об оценке для федерального органа исполнительной власти или государственной академии наук по отнесению научной организации к одной из категорий:

• 1 категория - научные организации-лидеры;
• 2 категория - стабильные научные организации, демонстрирующие удовлетворительную результативность;
• 3 категория - научные организации, утратившие научный профиль и перспективы развития.

На основе данного  заключения формируется эффективная  система научных организаций  посредством увеличения эффективности  принятия управленческих решений в сфере науки, и, тем самым, повышения вклада в  социально-экономическое развитие страны.

Как видно из рассматриваемых показателей, многие из них могут быть применены и  в области высшего образования.

1.4.2 Коэффициентный  подход к оценке эффективности деятельности вузов

В настоящее  время образовательный сектор рассматривается  государством в качестве приоритета одной из национальных точек роста, а инвестиции в повышение качества человеческого капитала являются условием развития всех секторов российской экономики.

В этой связи  государственная политика в РФ всё  больше смещается от субсидирования сферы высшего образования к  созданию конкурентного рынка образовательных  услуг.

В этих условиях актуализируется задача повышения  эффективности и конкурентоспособности вуза. Для решения этой задачи необходимо разработать более совершенную методику оценки эффективности деятельности вуза, которая должна учитывать специфику рыночной экономики, рассматривать вуз как целостную систему и обеспечивать высокую степень достоверности и объективности результатов оценки.

Данная проблема была рассмотрена и учеными Московского государственного университета экономики, статистики и информатики. Статья на тему «Методические подходы к оценке эффективности деятельности вуза» была опубликована в журнале ВАК «Региональные проблемы преобразования экономики»  в феврале 2010 года.

Согласно данной статьи рассматриваются следующие  положения.

Эффективность деятельности вуза - оптимальность  затрат на увеличение человеческого  капитала обучаемого и соответствие уровня человеческого капитала выпускника требованиям работодателей. Соответственно с этим вводится понятие «оптимума», отражающего соответствие уровня функционирования вуза конкурентным требованиям рынка. В состоянии оптимума все элементы вуза функционируют с максимально возможной степенью эффективности.

Уровень эффективности  функционирования вуза оценивается  как приближенность результатов  оценки к состоянию оптимума. Для  этого вводится «интегральный показатель оценки эффективности деятельности вуза» (Eedu).

Для расчета  величины интегрального показателя оценки эффективности, предлагается следующая  формула:

Eedu = ω · Kedu + (1-ω) · Nedu,

где Kedu – показатель, характеризующий эффективность деятельности вуза во внешней среде (его конкурентоспособность);

Nedu – показатель, характеризующий эффективность деятельности вуза во внутренней среде;

ω – весовой коэффициент, отражающий степень зависимости вуза от внешней среды.

С позиций понимания  эффективности деятельности вуза как  повышения стоимости реализованного человеческого капитала, предложен ряд следующих обобщенных результирующих параметров эффективности функционирования вуза.

1. Народнохозяйственная  эффективность образовательной  деятельности вуза (Emacro). Общий вид формулы для определения данного параметра можно представить в следующем виде:

ΣΔPvp Emacro = Z ,

где ΣΔPvp – показатель, характеризующий сумму среднего за год прироста величины произведенной добавленной стоимости (по всем группам выпускников за последние n лет), рублей (для выпускников предыдущего за отчетным года за базу берётся средняя по отрасли годовая производительность труда сотрудника, не имеющего профессионального образования);

Z - показатель, характеризующий средние (за последние n лет) годовые затраты на подготовку 1 студента), рублей;

n – средний фактический (по всем группам выпускников) срок обучения выпускника в данном вузе, лет.

2. Персональная эффективность  образовательной деятельности вуза (Eind) .

Общий вид формулы для  определения данного параметра  можно представить в следующем виде:

Eind = ΣΔST ,

где ΣΔT – показатель, характеризующий сумму среднего за год прироста величины оплаты труда (по всем группам выпускников за последние n лет), рублей (для выпускников предыдущего за отчетным года за базу берется средняя по отрасли годовая заработная плата сотрудника, не имеющего профессионального образования);

S - показатель, характеризующий среднюю (за последние n лет) стоимость обучения 1 студента, рублей;

 n – средний фактический (по всем группам выпускников) срок обучения выпускника в данном вузе, лет.

3. Уровень конкурентоспособности  вуза на рынке образовательных  услуг

(Kedu) рассчитывается как средневзвешенная величина народнохозяйственной эффективности и персональной эффективности образовательной деятельности вуза в отношении к максимальным значениям по отрасли.

Общий вид формулы для  определения данного параметра  можно представить в следующем  виде:

Kedu = (1-m) · maxE{mEamcraocro Eind i} + m · max {Eind i} ,

где max{Emacro i} – показатель, характеризующий максимальное значение народнохозяйственной эффективности (по всем вузам, готовящим специалистов схожей специальности, входящим в top-10 рейтинга вузов по оценкам работодателей);

max{Eindi} – показатель, характеризующий максимальное значение персональной эффективности (по всем вузам, готовящим специалистов схожей специальности, входящим в top-10 рейтинга успешности выпускников вузов);

m – средняя доля студентов с полным возмещением затрат на обучение в общей численности обучающихся вуза за n лет.

Разделение эффективности деятельности вуза на народнохозяйственную и персональную, а также средневзвешенная оценка их вклада в показатель конкурентоспособности вуза позволяют сравнивать вузы коммерческие, государственные и со смешанным финансированием.

Народнохозяйственная  эффективность деятельности вуза может  быть равной нулю в том случае, если все выпускники вуза не работают в  экономике или не происходит прироста их производительности в результате получения профессионального образования (ΣΔPvp = 0 à Emacro = 0).

В этом случае деятельность вуза не оказывает полезного действия на экономику страны, даже если вуз  успешен с точки зрения прибыльности и рейтинга.

Достаточно  распространен случай, когда обучающийся (в особенности без отрыва от производства), получив диплом, длительное время продолжает работать на том же месте без изменения своей производительности (это особенно характерно для государственных служащих). В современной действительности это явление носит массовый характер, но не распространяется абсолютно на всех выпускников вуза. Значительная часть выпускников начинает свою трудовую деятельность с более высокой производительностью, чем они могли обеспечить до своего поступления в вуз. Если же выпускник вуза работает с меньшей производительностью, чем аналогичный работник без образования, то это случай неэкономической природы ценообразования на рынке труда. Поскольку методика разработана для вуза, функционирующего в рыночной экономике, то предлагаемая методика не рассматривает случай отрицательной суммарной производительности выпускников (ΣΔPvp < 0) и отрицательной народнохозяйственной эффективности (Emacro < 0).

Таблица 1.2 - Направленность и ограничения расчетных и  итоговых показателей оценки  эффективности

Затраты на подготовку специалистов (Z) по своей экономической природе не могут быть равны нулю или меньше нуля.