Вопрос оценки эффективности научных исследований является одним из важных в методологии оценки научной деятельности. В проведении таких оценок прежде всего заинтересован заказчик исследований, которому необходимо знать, насколько быстро окупятся вложения в проведение научно-исследовательской работы прикладного либо фундаментального характера. Зачастую желательно оценить получаемую выгоду от реализуемого проекта еще до его начала, т.к. таким образом заказчик имеет возможность определить целесообразность проведения исследования и внедрения созданной инновационной технологии или продукции.

В целом эффект от внедрения научно-исследовательских результатов работы можно представить как их совокупность научного, экономического и социального характера в результате внедрения. В свою очередь, эффективность проведенного исследования является характеристикой реализации научно-исследовательской работы, которая определяется как отношение профицита от внедрения (то есть эффекта научного инновационного исследования) к затратам на выполнение работы и ее внедрение.

Понятия эффекта и эффективности реализации научно-исследовательской работы следует отличать от понятия продуктивности научного исследования. Так, при оценке продуктивности научного исследования социально-экономический эффект не учитывается от внедрения результатов научно-исследовательской работы в практику. В то же время продуктивность научно-исследовательской работы — это количество научной продукции (научной информации), полученное научным работником или организацией за определенный промежуток времени. Именно поэтому внедрению результатов инновационной деятельности в практику предшествует проведение оценки эффекта и эффективности научно-исследовательской работы. Существует целая система оценок эффективности научных исследований [1][2]. В эту систему кроме непосредственно оценок эффективности научно-исследовательской работы входят также оценки эффективности работы научных сотрудников и научных организаций.

При этом не стоит забывать, что в целом оценка выгод и затрат научно-исследовательской деятельности является базой для принятия управленческих решений, дающей возможность ответить на следующие вопросы:

Ответы на вопросы выглядят следующим образом.

Также существует вербальный анализ полученных результатов научно-исследовательской работы — подход в теории и практике многокритериальной оценки и сравнения альтернатив, который разрабатывается в течение многих лет в Институте системного анализа РАН и успешно применяется при решении различных практических задач. Особенностью этих задач является описание рассматриваемых объектов (вариантов, альтернатив) при помощи многих признаков, наличие среди признаков как количественных, так и качественных факторов, причем последние играют в процессе оценки не меньшую роль, чем первые. Групповой вербальный анализ решений с применением аппарата теории мультимножеств предлагается в качестве инструментария для анализа многокритериальной оценки научно-технических результатов [3–6].

Также не стоит забывать, что в условиях рыночной экономики решающее значение имеет принятие обоснованных и оперативных управленческих решений, что невозможно без качественного информационного обеспечения. Важнейшей составляющей механизма формирования и раскрытия полезной экономической информации об ограниченных ресурсах хозяйствующего субъекта является инвестиционный анализ, который позволяет не только выявить закономерности и связи между экономическими явлениями и процессами инвестиционного характера и на этой базе спрогнозировать их возможные последствия и динамику, но и оценить результаты и риски самой инвестиционной деятельности. В условиях быстро меняющейся рыночной среды на первый план выходят глубокие знания теории инвестиционного анализа, его методологии, практических методик, что позволяет приспособиться к изменениям как во внешней, так и во внутренней среде хозяйственной деятельности организации и обеспечивает обоснование принятия качественных управленческих решений в целях задействования всех резервов развития научного потенциала организации, роста количества успешно выполненных проектов и приумножения доходов предприятия [7][8].

Результаты анализа опыта развитых стран в части использования организационных структур и интеграционных форм взаимодействия науки и бизнеса для стимулирования инновационной деятельности применительно к региональному уровню социально-экономических преобразований показывают отдельные возможности их использования с учетом реалий современной российской экономики и создания условий для интеграции научных учреждений и производственных предприятий в целях развития инновационной деятельности в российских регионах [9]. При этом в самом общем смысле можно утверждать, что затраты на научные исследования эффективны тогда, когда они порождают накопление научно-технических знаний, образовательного и культурного потенциала общества и в итоге обеспечивают экономический рост [10][11]. Однако количественная оценка макроэкономической эффективности затрат на науку до сих пор сталкивается с рядом методологических и технических (последние обусловлены в первую очередь отсутствием необходимых статистических данных) проблем. В то же время корректная оценка эффективности затрат на научные исследования позволит решить проблему эффективного распределения общественных ресурсов, в том числе на научные исследования и инновации, что актуально не только для России, но и для остальных развитых стран. Признанные авторитеты в этой сфере, в частности Э. Денисон, Э. Мэнсфилд, Р. Солоу, Дж. Эрроу, единогласны в том, что полная оценка эффективности науки в целом (фундаментальные исследования, прикладные исследования, разработки) путем сопоставления затрат и результатов не приводит к корректному результату прежде всего потому, что достижения фундаментальных исследований не всегда поддаются стоимостной оценке, так как любой научный труд обусловлен частично трудом современников, а частично использованием того, что создано предшественниками [12].

Стоит обратить внимание, что инструментарий анализа эффективности реализации научно-исследовательских проектов может также основываться на показателях оценки инвестиционных проектов, но с учетом специфики разработки и реализации проектов по его этапам. Тогда при проведении анализа научно-исследовательских работ стоит придерживаться следующих принципов [13]:

В результате анализ эффективности научно-исследовательских проектов можно разделить на следующие этапы.

Доказано, что эффективность является одним из важных критериев для оценки качества любой профессиональной деятельности, в том числе и научной. В общем случае эффективность определяется как соотношение между использованными ресурсами и достигнутым результатом. Единицей научной деятельности можно считать проект, имеющий тематическую направленность. Тогда оценка эффективности научных исследований будет определяться через понятия ресурсов и результатов реализации такого проекта.

Главной проблемой измерения эффективности в научно-исследовательской деятельности является тот факт, что в большинстве случаев научно-исследовательская деятельность не направлена напрямую на получение экономического эффекта, особенно если речь идет о результатах фундаментальной науки. Другая объективная проблема оценки эффективности инвестиций в науку носит больше технический характер и заключается в нехватке статистических ресурсов. Неполнота статистических данных значительно ограничивает возможности анализа научно-технической деятельности и затрудняет проведение оценки проектной деятельности.

Также методика оценки эффективности научных исследований и их результатов напрямую связана с типом проводимых исследований. Для проектов арктической направленности, как и для иных научных проектов, можно выделить 4 основных типа научно-исследовательской деятельности:

Результаты фундаментальных и поисковых исследований, как правило, не подлежат коммерциализации, а нацелены на признание через публикацию в научных изданиях. Кроме того, результаты этих исследований могут иметь неопределенный временной характер взаимосвязи с прикладными научно-исследовательскими и опытно-конструкторскими работами. Разрыв между фундаментальным и поисковым исследованием и непосредственно технологической инновацией, основанной на результатах фундаментальных исследований, может составлять от нескольких месяцев до десятков лет. Таким образом, чисто экономический эффект результатов фундаментальных исследований зачастую рассчитать не удается и может быть дан лишь качественный прогноз экономической рациональности тематики исследований, достижение которой возможно в будущем. Оценка эффективности фундаментальных исследований базируется в основном на качественных показателях, характеризующих обоснованность и новизну результатов исследования, широту их применения в различных областях деятельности человека, а также возможность проведения на их основе прикладных исследований. Важным показателем является также индекс цитируемости публикаций, выполненных по результатам исследования.

Напротив, по прикладным исследованиям и опытно-конструкторским работам помимо научного и технического возможно выявление экономического эффекта и результативности.

В целом можно выделить следующие основные методы оценки эффективности реализации научных проектов:

Необходимо также принять во внимание, что ресурсы (Р) для научного проекта складываются из двух основных составляющих:

Второй ресурсный показатель в денежной интерпретации выражается как объем заработной платы на период реализации проекта, выплаченный научным сотрудникам дополнительно к объему финансирования проекта.

Для наукометрического (библиометрического) метода главными критериями оценки становятся продукты научной деятельности (ПНД), включая публикации и их цитирование, а также результаты интеллектуальной деятельности (РИД), полученные в результате реализации проекта в виде количественного показателя. В этом случае эффективность реализации проекта будет рассчитываться по формуле (1):

 (1)

где Р — объем затрачиваемых ресурсов, млн руб.,

ПНДi — i-й продукт научной деятельности,

ωi — весовой коэффициент, учитывающий значимость продукта научной деятельности (например, квартиль журнала, вид РИД и т.п.).

Эффективность в данном случае будет интерпретироваться как объем финансирования на единицу результата научных исследований арктической направленности.

В качестве возможного варианта, принимая вариабельность весового коэффициента ωi в пределах от 0 до 1, можно предложить следующие значения ωi в зависимости от значимости результата научной деятельности:

Для финансово-экономического метода можно выделить два основных подхода:

 (2)

и интерпретироваться как степень возврата от финансовых вложений в научные исследования арктической направленности;

 (3)

где ОДi — i-й вид отложенного дохода.

Эффективность такого вида будет интерпретироваться как величина дохода от вложенной единицы финансирования в научные исследования арктической направленности. Необходимо отметить, что данный вид эффективности может носить прогностический характер.

Для экспертного метода оценки эффективности реализации научно-технического проекта должна быть разработана система критериев социальной, экономической и государственной значимости результатов научно-технической деятельности, полученных при выполнении программы. Такая система включает несколько групп критериев, специфичных для той или иной программы и соответствующих проекта. Вместе с тем имеется несколько групп критериев, учитывающих основополагающие принципы, цели и задачи программы, которые используются при оценке абсолютного большинства научно-исследовательских проектов.

Эффективность в этом случае будет рассчитываться по формуле (4):

 (4)

где Кi — i-й коэффициент значимости результата;

ωi — весовой коэффициент, учитывающий значимость критерия оценки эффективности реализации проекта.

В качестве возможного варианта, принимая вариабельность весового коэффициента ωi в пределах от 0 до 1, можно предложить следующие значения комбинаций коэффициента значимости результата Кi и весового коэффициента ωi, в зависимости от значимости результата научной деятельности:

Для повышения обоснованности экспертной оценки каждый результат независимо оценивается несколькими (не менее чем двумя) экспертами. Эксперт изучает представленный ему объект экспертизы, оценивает полученный научно-технический результат по критериям, приведенным в экспертной анкете, а также дает свое письменное агрегированное заключение о значимости результата, которое служит основой для подготовки обобщенного экспертного заключения. Обобщив и проанализировав все полученные по основным критериям характеристики, можно получить сводную (итоговую) оценку эффективности результатов научно-технических проектов и программ, как средневзвешенное значение оценок, полученных от всех экспертов.

В целом, исходя из типизации самих исследований и методов оценки их эффективности можно указать, что:

Оценку эффективности научной деятельности организаций возможно проводить на основе совокупных показателей, но принимая во внимание тип организации, реализующей научные проекты арктической направленности. Можно выделить три основных типа организаций:

Предполагается, что исходными данными для предлагаемой методики является информация, размещаемая в Единой государственной информационной системе учета научно-исследовательских, опытно-конструкторских и технологических работ гражданского назначения (ЕГИСУ НИОКР), а также данные мониторинга развития науки и технологий в Арктической зоне, проводимого Минобрнауки России.

В результате проведенного исследования предложена методология оценки эффективности реализации научных исследований арктической направленности. Данная методика может быть предложена для внедрения в практику деятельности федеральных и региональных органов власти для оценки эффективности реализации подведомственными научными и научно-образовательными организациями научно-исследовательских проектов в зависимости от направленности и вида научно-исследовательской работы.

При этом для проведения корректных оценок эффективности реализации научно-исследовательского проекта необходимо рекомендовать всем федеральным и региональным органам власти, подведомственные учреждения которых проводят научно-исследовательскую и научно-технологическую деятельность в Арктической зоне Российской Федерации, включить необходимые для проведения оценки эффективности реализации научных исследований арктической направленности параметры в перечень обязательных для предоставления в качестве отчетных, в частности в Единую государственную информационную систему учета результатов научно-исследовательских, опытно-конструкторских и технологических работ гражданского назначения (ЕГИСУ НИОКТР). Кроме того, ЕГИСУ НИОКР важно включить необходимые для проведения оценки эффективности реализации научных исследований арктической направленности параметры в перечень обязательных для предоставления при заполнении отчетных форм по реализации проекта.