Модернизация информационно-аналитических методик анализа результативности научной деятельности организации
Автор: Лопатина Наталья Викторовна, Булдина Галина Ивановна
Журнал: Вестник Московского государственного университета культуры и искусств @vestnik-mguki
Рубрика: Научно-исследовательская деятельность
Статья в выпуске: 3 (95), 2020 года.
Бесплатный доступ
Статья посвящена совершенствованию подходов к анализу результативности научной деятельности организаций (высших учебных заведений, научно-исследовательских институтов, учреждений науки). Конкретизированы задачи научного поиска критериев, позволяющих раскрыть характер участия отдельных организаций, коллективов или учёных в национальной или мировой научной деятельности. Авторы предлагают включить в систему оценок результативности научной деятельности организации анализ документных потоков диссертаций, её инновационной активности. Представлен опыт апробации наукометрической методики, разработанной авторами, при исследовании вклада Московского государственного института культуры в изучение и разработку информационной инфраструктуры общества, которое осуществлено на основе анализа массива диссертаций, подготовленных в институте в 1980-2000-е годы. Предложенная методика ориентирована на отраслевую специфику документопотока и характеризует его посредством специфических содержательных декомпозиций.
Наукометрия, результативность научной деятельности организации, диссертация, библиотечно-информационные науки, информационная инфраструктура, московский государственный институт культуры, инновационная активность, инновационный индекс организации
Короткий адрес: https://sciup.org/144160877
IDR: 144160877 | УДК: 001.89 | DOI: 10.24412/1997-0803-2020-10314
Modernization of information and analytical methods for analyzing the effectiveness of scientific activity of the organization
The article is devoted to improving approaches to analyzing the effectiveness of scientific activities of organizations (higher educational institutions, research institutes, scientific institutions). The tasks of scientific search for criteria allowing to reveal the nature of participation of individual organizations, collectives or scientists in national or world scientific activities are specified. The authors propose to include the analysis of dissertations' document flows and the analysis of innovation activity in the system of evaluation of the organization's scientific performance. The article presents the experience of testing the scientometric methodology developed by the authors in the study of the contribution of the Moscow State Institute of Culture to the study and development of the information infrastructure of society, which is based on the analysis of the array of dissertations prepared at the Institute in 1980-2000. The proposed method focuses on the industry specifics of the document flow and characterizes it by means of specific content decompositions.
Текст научной статьи Модернизация информационно-аналитических методик анализа результативности научной деятельности организации
Одной из наиболее обсуждаемых в научных кругах проблем является применение количественных методов оценки результативности научной деятельности организации и отдельных учёных. Наукометрическая методология вошла в предметное поле науки в 1960-х годах [3; 10], её инструментарий активно и эффективно разрабатывался в 1970–1990-е годы (создав базу для особого сектора мирового информационного рынка), но история организации науки показывает локализацию данного дискурса в библиотечно-информационных науках вплоть до 2010-х. Между тем масштабное использование наукометрии на современном этапе не выходит за рамки нескольких клишированных инструментов.
Применение ограниченного круга наукометрических инструментов и моделей не позволяет эффективно (то есть с получением нового аналитического знания) раскрыть характер участия отдельных организаций, коллективов или учёных в национальной или мировой научной деятельности. Необходим системный мониторинг документо-потоков [5], позволяющий выявлять закономерности и тенденции развития науки и трансфера научного знания; модернизация информационно-аналитического инструментария в русле интеллектуализации [7; 8] и учёта новых ориентиров оценки научно-исследовательской деятельности – вклада научного знания и результатов интеллектуальной деятельности конкретной ор- ганизации в социально-экономическое развитие и увеличение рейтинговых позиций государства в Глобальном инновационном индексе [9]. Неотложность задач совершенствования информационно-аналитического арсенала обусловлена «новыми форматами научно-информационной деятельности, функционирования научно-технической информации, повседневных практик научной коммуникации, информационного обслуживания науки и техники, формирования экспертных сообществ» [4]. В связи с этим актуальна разработка методов и моделей с многоаспектным набором параметров, учитывающих механизмы отраслевой адаптации инструментов, и применение дифференцированного подхода в информационной аналитике [2].
Для решения данной научной задачи начато исследование на основе выделенных экспериментальным путём параметров количественного анализа отраслевого научного документопотока, сформированного в ходе научной деятельности конкретной организации – Московского государственного института культуры. Для проверки информативности предлагаемых нами параметров оценки научной деятельности организации эвристичность показали методы исторического анализа, которые в данном исследовательском контексте заключались не только в ретроспективном анализе документопотоков на основе библиографии как универсального научного метода [6]. Основной акцент был сделан на анализе результатов научных исследований, выполненных в МГИК, с точки зрения их дальнейшего применения в отраслевой науке и практике и с точки зрения их инновационного значения для развития экономики и социокультурной сферы на долгосрочный период. Апробация таких эксперимен- тальных параметров оценки невозможна на уровне ситуативного анализа, а требует рассмотрения наукометрических объектов в динамике, выявления и сопоставления уровней развития отраслевой науки и практики.
Апробируя данную информационно-аналитическую методику, мы сконцентрировали внимание на методологических, теоретических и практико-ориентированных разработках библиотечно-информационных наук, представленных в кандидатских диссертациях, которые были защищены в МГИК в 1980–2000-х годах [1]. Выбор для этой цели диссертационных исследований обусловлен их комплексным характером и информативностью для многоаспектного анализа трансфера знаний и отраслевых инновационных процессов. Предметное и тематическое разнообразие диссертационных работ по библиотековедению, библиографоведению и книговедению в данном исследовании приведено к «единому знаменателю» с помощью концепта информационной инфраструктуры общества, которая понимается как система социальных институтов, субъектов, структур, процессов, удовлетворяющих информационные потребности личности и общества и обеспечивающих функционирование социальных коммуникаций. Именно с точки зрения инновационного вклада в развитие информационной инфраструктуры общества, которая в заявленный временной период вступала в первые этапы грандиозных трансформаций, на основе авторской методики было проанализировано содержание 376 диссертационных работ.
Исследование позволило проследить и оценить динамику количества работ, направленных на изучение и проектирование основных подсистем информационной ин-
Таблица 1
Распределение диссертационных работ на основании предметной и целевой направленности исследования на одну из подсистем информационной инфраструктуры изучаемого временного периода (абсолютные величины)
В ходе исследования было проведено распределение диссертаций (см. таблицу 2) по характеру изучения информационной инфраструктуры общества по следующим группам: исследования фундаментального характера, исторические исследования, исследования педагогического характера, исследования социологического характера, исследования в области экономики и управ-
Таблица 2
Распределение диссертационных работ по характеру научных исследований информационной инфраструктуры общества (абсолютные величины)
Учитывая специфику научных задач библиотековедения, библиографоведения и книговедения, проанализировано распределение выбранного массива диссертационных работ по трём группам в зависимости от временной направленности проведённых исследований: «Исследование прошлого», «Изучение и анализ настоящего», «Проектирование будущего» (см. таблицу 3). Проведённый дополнительно анализ тематических направлений в рамках групп «Проектирование будущего» и «Изучение и анализ настоящего» позволил реконструировать процесс социальной диффузии тех идей, которые через 20 лет станут мейнстримами развития информационной инфраструктуры, но в рассматриваемый нами период только возникают «как предчувствие» и двигаются по «лестнице инноваций» к прототипированию или экспериментальному внедрению.
Анализ участия вуза в отраслевых инновационных процессах в конкретный исторический период обусловил выделение в качестве исследовательской декомпозиции распределение тематики и результатов исследований в альтернативе «традиционные элементы информационной инфраструктуры – инновационные элементы информационной инфраструктуры» (см. таблицу 4).
Таблица 3
Распределение диссертационных работ по характеру временной направленности исследования (абсолютные величины)
|
По характеру временной направленности исследования |
19801984 |
19851989 |
1990-1994 |
1995-2000 |
|
«Исследования прошлого» |
17 |
31 |
18 |
18 |
|
«Изучение и анализ настоящего» |
56 |
72 |
47 |
51 |
|
«Проектирование будущего» |
17 |
23 |
17 |
9 |
Таблица 4
Распределение тематики и результатов исследований в альтернативе «традиционные элементы информационной инфраструктуры
– инновационные элементы информационной инфраструктуры» (%)
|
19801984 |
19851989 |
1990-1994 |
1995-2000 |
|
|
Исследования традиционных элементов информационной инфраструктуры |
84,5% |
88,1% |
76,8 % |
84,7 % |
|
Разработка инновационных элементов информационной инфраструктуры |
15,5% |
11,9 % |
23,2 % |
15,3% |
Полученные в ходе анализа данные позволяют фиксировать показатели высокого уровня инновационной активности МГИК в библиотечно-информационной деятельности изучаемого периода.
Отраслевая специфика анализируемых диссертационных работ определила интерес к сфере применения полученных в них результатов интеллектуальной деятельности (см. таблицу 5).
Группа «для отдельных подсистем информационной инфраструктуры» включает диссертации, направленные на исследова- ние и развитие институций информационной инфраструктуры в соответствии с изучаемым временным периодом: библиотеки, органы научно-технической информации, книгоиздание, средства массовой информации (периодическая печать), ресурсы, информационные структуры в организациях, профильное образование, кадры. Исследования этой группы рассматривают данные институции по вопросам методик, технологий, управления на следующих уровнях: международном, национальном (в том числе на республиканском уровне и на уровне
Таблица 5
|
Уровень направленности исследований |
19801984 |
19851989 |
1990-1994 |
1995-2000 |
|
для отдельных подсистем информационной инфраструктуры |
39 |
64 |
49 |
37 |
|
для обслуживаемых отраслей / целевых и потребительских аудиторий |
29 |
22 |
28 |
10 |
|
для общества в целом |
22 |
40 |
21 |
31 |
Распределение диссертационных работ по направленности научных результатов (абсолютные величины)
СССР), региональном, корпоративном уровнях, на уровне отдельных социальных институтов (наука, образование и т.д.).
Группа «для обслуживаемых отраслей / целевых и потребительских аудиторий» включает диссертации, результаты которых направлены на развитие информационной поддержки конкретных отраслей, а также на решение народно-хозяйственных задач «обслуживаемых» отраслей.
Группа «для общества в целом» включает диссертации, направленные на создание результатов общекультурного характера, имеющих значение для социального, информационного и культурного развития общества в целом, отдельных социальных групп (например, отдельных возрастных категорий). Данная группа исследований далеко не всегда напрямую связана с библиотечным или библиографическим предметным полем (например, диссертации по общей теории чтения, по формированию читательской активности «не библиотечными» средствами) [10].
Заключительная задача описанного исследования связана с характеристикой ин- новационных ориентиров тех диссертаций, которые отнесены к группе «Проектирование будущего» (см. таблицу 3, таблицу 6). Отмечено, что наибольшая доля в данном фрагменте документного потока принадлежит диссертационным работам, в которых содержатся разработки новых информационных продуктов (продуктов с оригинальными качественными характеристикам) и новых технологий (информационных, педагогических, библиотечных). Вместе с тем дополнительно проведённые исследования показали, что, обладая в значительно части случаев патентоспособностью, разработки не были оформлены как интеллектуальная собственность и не имели перспектив для рационального использования в те периоды, когда они были максимально востребованы практикой.
Таким образом, диссертационные исследования информативны для комплексной оценки научной деятельности, однако требуют многоаспектной методики анализа. Наукометрический анализ массивов и потоков диссертационных работ не должен ограничиваться только приравнивани-
Таблица 6
Распределение диссертационных работ, отнесённых в таблице 3 к группе «Проектирование будущего», по характеру инновационных ориентиров (%)
Предложенная методика, ориентированная на отраслевую специфику доку-ментопотока и характеризующая его посредством специфических содержательных декомпозиций, позволяет глубже анализировать результативность научной деятельности организации.
Данная методика даёт возможность оценивать инновационную активность организации не с позиций соответствия моде и конъюнктурным клише, а исходя из до- полнительной ценности, которую дают результаты данных исследований для экономики, культуры, дальнейшего роста эффективности и качества отраслевых продуктов и услуг.
Анализ результативности научной деятельности организации не может считаться полным, если объектом изучения выступает только документный поток. Принципиальное значение имеет анализ документных массивов и банков знаний, в основе которых – результаты научных исследований и разработки организации, а также их оформление в качестве объектов интеллектуальной собственности.
Проведённое исследование позволило наметить и новые направления и задачи научной работы:
-
• формирование инновационного индекса вуза/НИИ как комплексной характеристики оценки научной деятельности, в том числе его структуры, системы субиндексов, параметров и методик их оценивания, системы целесообразных критериев и показателей;
-
• разработка методов оценки внедрения результатов диссертаций в отраслевую практику. В качестве параметров анализа выделены и ожидают апробации: (1) доля внедрённых результатов от общего количества защищённых работ; (2) длительность жизненного цикла внедрённых результатов; (3) соотношение внедрённых фундаментальных и практико-ориентированных работ; (4) динамика этих показателей во времени;
-
• анализ величины временного лага между выполнением/публикацией первых результатов/защитой диссертации и внедрением их в информационные практики; сопоставление периодов жизненного цикла результатов диссертационных исследований с экономическими циклами;
-
• разработка инструментов повышения результативности научной деятельности современного вуза. В их числе – науч-
- ная политика вуза, которая включает систему принципов финансового инвестирования в науку, развитие кадрового капитала и воспроизводство научных кадров, модернизацию отношения к результатам научного труда (охрана результатов научной дея-
- тельности, их продвижение, коммерциализация, создание условий для широкого внедрения в практику);
-
• проведение прикладных исследований массивов и потоков научной информации как показателя научной деятельности организации для получения информативных, свободных от спекуляции данных об уровне её результативности;
-
• создание типовых, стратегически ориентированных решений в области организации и управления наукой.
P.S. Проводя это исследование, мы рассматривали МГИК только в качестве одного из кейсов, того, который нам знаком более всего, и не стремились определить причины динамики показателей, выявить факторы, события, персоны, которые повлияли на историю развития отрасли. Но эти задачи интересны для изучения, ибо история любого вуза всегда неразрывно связана с историей его научной деятельности, и она невольно обрастает мифами, которые оказываются более устойчивыми для социального образа, нежели факты и цифры. И именно точные наукометрические инструменты доказывают, насколько высоким является вклад МГИК в развитие информационной инфраструктуры общества, информатизацию культуры, другие аспекты современной жизни, у истоков которой стоял наш институт.
Список литературы Модернизация информационно-аналитических методик анализа результативности научной деятельности организации
- Библиографический указатель работ, защищённых в Диссертационном совете К 092.07.02 по присуждению учёной степени кандидата наук за 20 лет (в период с 1980 по 2000 г.) при Московском ордена Трудового Красного Знамени государственном институте культуры (МГИК) / составитель Г. И. Булдина. Москва: МГУКИ, 2011. 99 с.
- Лопатина Н. В., Зубов Ю. С., Неретин О. П. Информационно-аналитическое обеспечение приоритетных направлений науки и техники: отраслевой и дифференцированный подходы // Научно-техническая информация. Серия 1: Организация и методика информационной работы. 2017. № 5. С. 15-21.
- Налимов В. В., Мульченко З. М. Наукометрия. Изучение науки как информационного процесса. Москва: Наука, 1969. 192 с.
- Неретин О. П., Суконкин А. В., Рыбакова Ю. В. Теоретические основания изучения и модернизации научных коммуникаций в информационной инфраструктуре цифровой экономики // Культура: теория и практика: электронный научный журнал. 2019. № 3 (30). URL: http://theoryofculture.ru/issues/106/1241
- Сладкова О. Б. Информационный мониторинг: учебник для студентов высших учебных заведений, обучающихся по направлению 080800 - "Прикладная информатика (по областям)" и другим экономическим специальностям. Москва: МГИК, 2002. 124 с.
- Сляднева Н. А. Библиография в системе Универсума человеческой деятельности: Опыт системно-деятельностного анализа: монография. Москва: МГИК, 1993. 226 с.
- Сляднева Н. А. Информационно-аналитическая деятельность: проблемы и перспективы // Информационные ресурсы России. 2001. № 2 (57).
- Сляднева Н. А. Социально-информационные технологии в современном культурогенезе // Культура: теория и практика: научный электронный журнал. 2015. № 3 URL: http://theoryofculture.ru/issues/48/767
- Россия в зеркале международных рейтингов. Информационно-справочное издание / отв. ред. В. И. Суслов; ИЭОПП СО РАН. Новосибирск: Автограф, 2015. 115 с.
- Pritchard A. (1969) Statistical Bibliography or Bibliometrics. Journal of Documentation. No. 25 (4): 348-349.