Павлова Н.П. Открытое заседание редколлегии сборника «Научные и технические библиотеки» на Международном Крымском форуме

Сукиасян Э.Р. Сравнительный анализ моделей различных ИПЯ. Статья 2

Зильберборд А.Л., Коленко Л.В. Областная научная библиотека – территория, содействующая защите патентных, авторских и смежных прав читателей

Ядрова Г.В. Опрос удаленного пользователя как инструмент изучения и оценки электронных ресурсов вузовской библиотеки

Таращенко А.А. Роль и содержание чтения в условиях изоляции в пенитенциарных учреждениях. Часть 1

БИБЛИОМЕТРИЧЕСКИЙ АНАЛИЗ В НАУЧНЫХ ИССЛЕДОВАНИЯХ

Глянцель В., Дебакер К. Использование библиометрических показателей при выработке научной политики: возможности и ограничения

Вагнер-Доблер Р. Система индикаторов в исследованиях и разработках

Фюлес-Убах С. Оценка активности обращений к веб-сайту. (О трудностях получения статистических показателей)

ЗАЩИТА ДИССЕРТАЦИЙ

Клапиюк В.Т. В диссертационном совете при МГУКИ

АНОНС НОВОГО ИЗДАНИЯ

Проект учебника-монографии нового типа «Электронные издания, ресурсы, фонды, библиотеки»

Земсков А.И. Электронные документы, ресурсы, библиотеки

НАША ПРОФЕССИЯ

Березкина Е.И. Профессиональное самосознание современного библиотекаря университетской библиотеки: социологический анализ

ПРОФЕССИОНАЛЬНОЕ КРЕДО

Хамаганова Р.И. Обсуждение проекта "Этического кредо библиотекаря" Ю.Н. Столярова в Национальной библиотеке Республики Бурятия

НАША ИСТОРИЯ

Каратыгина Т.Ф. Римма и Командор

ОБЗОРЫ. РЕЦЕНЗИИ

Смирнова Е.М., Ступникова Л.А. От библиотечного обслуживания – к информационному сервису

НАШИ АВТОРЫ

В статье Р. Вагнера-Доблера развивается очень интересный и глубоко продуманный (хотя, может быть, и не бесспорный) подход к оценке эффективности научных исследований, опирающийся на разветвленную систему показателей (индикаторов). При этом библиометрические показатели являются лишь частью общей системы.

Во-первых, сами исследования условно разделены на три взаимосвязанных группы – фундаментальные работы, прикладные работы, экспериментальные и конструкторские работы.

Во-вторых, к оценке эффективности каждой из этих групп применяется система неких унифицированных блоков (или групп) показателей: входные показатели (их можно назвать вложения), выходные показатели (их можно назвать отдача от вложений) и их соотношение (т. е. отдача на  единицу вложений), которую и предлагается считать мерой эффективности данной группы исследований.

В третьих, внутри каждой группы показателей вводятся единые типы (аспекты) показателей – людские ресурсы, финансовые средства, технологические средства и информационная поддержка. В результате получается довольно сложная, но тем не менее логичная и методологически связная картина. Попытайтесь ее понять и применить у себя. Желаем успехов!

Земсков А.И.

УДК 002.001.1

Вагнер-Доблер Р.

Система индикаторов в исследованиях и разработках

Наука становится индустрией, большая наука становится большим бизнесом. В любой отрасли промышленности обычно имеются наборы самых разнообразных служб различного назначения. Наука также нуждается в обслуживании – чтобы работать эффективно. Достаточно вспомнить о службах, необходимых для функционирования научных лабораторий, о компьютерных центрах, издательских, полиграфических, информационных статистических службах и т. д. Конечно, не нужно забывать и о библиотечном обслуживании, совершенно необходимом как для чистой, так и для прикладной науки. Нелепо и смешно даже говорить о том, что этот вид научного обслуживания якобы исчезнет, «потому что появился Интернет»! Напротив, в будущем понадобится еще больше информации, обмена знаниями, информационного обслуживания, чтобы сохранить высокую продуктивность научных исследований, в том числе обеспечить функционирование электронных библиотек и обработку электронных ресурсов.

Каждому предприятию, компании, организации приходится решать задачи контроля и оценки уровня работы отдельных сотрудников, подразделений и организации в целом. Такого рода деятельность достаточно бессмысленна, если понимать ее обращенной в прошлое – разве что для составления отчетов и подготовки справок. Главная цель таких оценок – это улучшение качества будущих решений.

Итак, можно сказать, что система оценок составляет основу будущего развития организации. С этой точки зрения контроль и оценка качества и производительности работы – задача особо сложная и трудная, если говорить о научных организациях (я так считаю, хотя доказать это не могу). И здесь на помощь приходит библиометрия.

Библиометрию иногда воспринимают как методику оценки качества научных исследований с помощью библиографической статистики. Но я считаю это определение ошибочным, уводящим от цели, а может быть, и бессмысленным. Вспомните для примера об эконометрике – эта наука никоим образом не может рассматриваться как оценка состояния экономики на базе экономической статистики.

Я хочу напомнить простое и элегантное определение, данное Энтони ван Рааном из Лейдена: библиометрия – это количественное изучение печатной продукции научных исследований.

По моему мнению, такого рода исследования были предприняты в последнее десятилетие с целью содействия более глубокому пониманию функционирования науки как самоорганизующейся системы. Были рассмотрены и другие подобные системы, проведены теоретические и модельные исследования, и в результате удалось пролить свет на механизм функционирования науки, столь сильно способствовавшей прогрессу последних десятилетий.

Итак, библиометрические описания и модели содействовали более ясному и более прозрачному пониманию характера научного процесса. В течение длительного времени невозможно было и подумать о том, чтобы получить простую описательную картину того, что происходит в какой-либо специфической научной отрасли, если сами вы в ней не работаете.

Сегодня это стало возможным: с помощью библиометрических индексов можно получить базовую информацию об основных участниках научных исследований; институтах, публикующих наиболее часто цитируемые работы; основных направлениях исследований и т. д. Оказалось, что применение этих методов может дать в некотором отношении более объективную картину, чем опрос индивидуальных экспертов, хотя мнение этих же экспертов может быть совершенно незаменимым при истолковании результатов ваших библиометрических наблюдений.

Это справедливо не только для исследований в области естественных наук. Известный философ Николас Решер (еще 25 лет назад он использовал элементы библиометрии в своей основополагающей книге «Прогресс в науке») как-то заявил, что для получения адекватной картины происходящего в области философии нужно обращаться к библиометрическому анализу наряду с анализом содержания (контент-анализом), необходимость которого никто, конечно, не отрицает. Все это не имеет отношения к оценкам, а скорее относится к статистике и обеспечению прозрачности. Очевидно, что библиометрия может в принципе содействовать процессу оценок, но только как часть, одна из компонент, из которых складывается целостная картина. Такого рода профессиональный вклад я бы назвал частью системы научного обслуживания, понимая, что это часть индустрии, обслуживающей науку.

Система индикаторов

Одна из возможностей изучения библиометрических индикаторов (либо в качестве средства измерения, либо в качестве методики для изучения исследовательского процесса) – исследование их роли и места в процессе производства знания. При этом на различных этапах производства знания понадобятся различные библиометрические индикаторы.

Мы можем разделить процесс производства знания на стадии (этапы):

• фундаментальные исследования, ведущие к научным открытиям;

• прикладные работы;

• технологические разработки, завершающиеся патентами и изобретениями.

Эти этапы не нужно воспринимать в качестве линейной и обязательной последовательности, скорее это некая функциональная зависимость. Успех в технологических разработках может стимулировать фундаментальные работы или предшествовать им.

Для дальнейшего хода рассуждений нам нужно договориться о том, что такое входные и выходные параметры и показатели эффективности.

Входные параметры необходимы при производстве знаний; это финансовые средства, оборудование, лаборатории и т.д.

Выходными параметрами при производстве знания могут быть доказанные теоремы, статья в авторитетном журнале и т.п.

Эффективность соотносит вложения с результатами и для технологических разработок этот показатель особенно важен.

Для каждой из приведенных трех категорий и трех стадий исследовательского процесса я хотел бы выделить четыре статистических показателя, которые касаются кадров, финансовых средств, технологических средств и информационных индикаторов. Большинство из рассматриваемых показателей не являются библиометрическими, но учитывать их нужно.

Входные параметры

Сводная схема описания параметров представлена в таблице.

Среди предлагаемых показателей фундаментальных исследований важное место занимает подготовленный персонал, в том числе уровень образования сотрудников.

Рассматривая вторую группу показателей – технологической оснащенности исследований, полезно отметить, что при постоянно растущей стоимости лабораторного оборудования и приборов удельный выход неизбежно будет падать. В общем те же требования выдвигаются и к специалистам в области прикладных исследований. Для конструкторских разработок ценность опубликованной информации, возможно, и не столь высока; здесь более существенную роль может сыграть накопленный опыт – ноу-хау.

Замечания по поводу информационных входных показателей

В литературе пока нет данных о наличии какого-либо систематического подхода к определению роли и значимости информационных входных показателей. Не ставя под сомнение важность информационной поддержки и поставки формальных документов, следует все же сказать, что в прикладных исследованиях и конструкторских разработках существенную роль играют беседы, встречи, неформальные записки и доклады, какие-либо наброски идей – все это формирует среду научной или конструкторской организации.

Параметры, показатели и индикаторы в науке и технологии

Специалисты по информации обеспечивают поставку внешней информации из внешних источников (Интернет, система доставки документов и т.п.). Неудивительно, что сотрудники информационных служб в первую очередь обращают внимание на данный канал, хотя его значимость для таких видов научной работы, как например исследование инноваций, еще нужно доказать.

Можно сослаться на эмпирическую очевидность наблюдений: успешно работающие в области инноваций компании намного шире используют внешние источники информации по сравнению с неудачниками в этой сфере. Детальные наблюдения могут выявить роль информационной поддержки (информационного вклада) на базе анализа статей, докладов и особенно библиографических ссылок и списков литературы. Существует бесконечное число работ по этой методике.

Я бы назвал еще один метод анализа прикладных работ и конструкторских разработок – это наличие ссылок на фундаментальные исследования: чем активнее практики ссылаются на серьезную науку, тем больше им доверия.

Еще одно дополнительное практическое наблюдение: чем больше сотрудники какой-либо фирмы пользуются услугами внешних специальных библиотек, тем интенсивнее они продвигаются. Так что мониторинг внешних заимствований может сказать о многом профессиональному библиотекарю.

Выходные показатели и показатели эффективности

Безусловным достижением последних трех десятилетий в управлении наукой является осознание того факта, что помимо входных показателей нужно не забывать и об отдаче, т. е. об измерении выходных параметров научных исследований, среди которых библиометрические показатели играют важнейшую роль.

Для оценки качества фундаментальных работ, конечно, подойдут статистические замеры цитирования выполненных исследований, но для конструкторских разработок это не годится – конструктору незачем часто публиковаться, иногда это просто глупо выглядело бы. (Если конструктор изобрел что-то стоящее, разумнее получить патент и защитить свои права.) Прикладные научные работы в этом смысле занимают промежуточное место.

Прошедшие десятилетия ознаменовались значительным прогрессом в области библиометрии. Например, отказались учитывать самоцитирование, уточнили разбиение по научным специальностям, ввели ряд новых расчетных показателей. К сожалению, до сих пор в большинстве случаев невозможно определить, существует ли связь между числом доказанных теорем, их глубиной и значимостью и количеством цитирования. Может быть, введение дополнительных «технометрических» показателей (см. табл.) поможет прояснить картину. Показателями качества конструкторских разработок могут считаться, например, эффективность созданного двигателя, скорость вычислений нового компьютера, надежность работы оборудования и т.п.

Заключение

Одна из задач этой публикации – обоснование полезности комплексного, многопараметрического подхода к оценкам научной и конструкторской работы.

Не стоит понимать библиометрию только как обслуживающую дисциплину; обогащение чисто статистических подходов путем рассмотрения более широких аспектов результативности. Продолжение теоретических исследований в этой области очень полезно, ибо сама наука может быть обозначена как часть экономики страны (и мира), а именно – когнитивная, познавательная часть экономики.

Давние традиции немецкой библиометрии и статистики, восходящие к работам Дилтхи (Dilthey) 1883 г., в настоящее время ждут активного продолжения и расширения.