В современном науковедении и социологии науки уже давно накоплен обширный пласт литературы, посвященной этому вопросу. Если кратко изложить его содержание, то существуют две противоположные точки зрения: о том, что использовать показатели цитируемости для оценки ученых можно, но с оговорками, и о том, что использовать совсем нельзя.
Первый подход в целом предполагает, что количественные показатели деятельности ученого каким-то образом коррелируют с эффективностью его работы. Второй подход имеет принципиальные возражения против самой возможности подобной оценки, в корне сводящиеся к тому, что, несмотря на кажущуюся «беспристрастность» цифровых показателей, мы не можем до конца быть уверенными в том, что именно отражают эти цифры.
При проведении любой оценки нужно понимать, что и как мы измеряем, поэтому, когда мы пользуемся индексами цитирования, неплохо было бы владеть основными теориями, касающимися анализа цитирований (citation analysis) и соответствующей методологией. Было бы полезно отвлечься на некоторое время от практической стороны дела и обратиться к теории, т.е. посмотреть на корень, из которого растут все проблемы с использованием индексов цитирования. А растут они из того, что мы, по сути, не понимаем, что же на самом деле отражают цитирование и ссылочные связи, и какой смысл ученые вкладывают в цитирование друг друга.
В русском языке с самим термином «индекс цитирования» произошел любопытный казус. Английский термин «citation index» правильнее было бы перевести как «список литературы» или «указатель ссылок», потому что он представляет собой базу библиографических ссылок. В русском же языке понятие «индекс» отчетливо несет оценочную составляющую, подразумевающую значимость данной статьи, которая вычисляется на основе последующих публикаций, ссылающихся на данную работу. При этом даже в официальных конкурсных документах не всегда определено, что же отражает этот показатель – суммарное количество цитирований автора, среднее число ссылок на статью или что-нибудь еще…
Экскурс в историю
Традиционно возникновение и развитие индексов цитирования связывают с деятельностью Юджина Гарфилда и созданного им Института научной информации (г. Филадельфия, США). В 1963 г. был издан первый выпуск Science Citation Index (SCI). SCI обладал двумя принципиальными особенностями: а) в нем одновременно учитывалась текущая периодическая литература сразу по нескольким научным дисциплинам и б) в него включались библиографические ссылки, используемые в индексируемой работе.
Ключевая идея Гарфилда состояла в том, чтобы вместо формальных дескрипторов, применявшихся для обработки статей и распределения их по тематическим категориям, использовать библиографические ссылки. При помощи ссылок можно было уловить связи между идеями, высказываемыми в статьях, которые были незаметны при использовании традиционных дескрипторов.
В СССР первым, кто стал рассматривать ссылки как особый язык научной информации, показывающий влияние публикаций на развитие мировых информационных потоков, стал В.В. Налимов, ему же принадлежит изобретение самого термина «наукометрия». Налимов первым поставил вопрос о создании специального информационного центра для статистического изучения развития науки.
Во время создания и разработки первого индекса цитирования Гарфилд и его коллега Ирвинг Шер работали над проблемой создания топологических карт науки и написания истории развития отдельных научных идей [20]. Поэтому они были одними из первых, кто предложил и теоретически обосновал возможность использования языка библиографических ссылок для изучения самой науки – анализа связи между идеями, прослеживания истории развития этих идей и их влияния друг на друга.
Любопытно, что на самой заре возникновения индексов цитирования Гарфилд несколько раз прямо предостерегал об опасности использования индексов цитирования для оценки ученых. По его мнению, невозможно оценивать качество или значимость работы на основании подсчетов частоты или количества цитирований, поскольку цитирование отражает «влияние» (impact), а это не то же самое, что «важность» или «значение». Впоследствии он поменял свою точку зрения и уже разрабатывал вопросы практического применения индексов цитирования в области сравнения ученых или исследовательских организаций между собой.
Кроме того, Гарфилд ввел в оборот понятие импакт-фактора. В настоящее время под импакт-фактором понимается показатель значимости научного журнала, представляющий собой среднее число ссылок, приходящихся на одну статью журнала. С 1973 г. Институтом научной информации выпускается ежегодное приложение Journal Citation Report, в котором рассчитываются импакт-факторы для всех журналов, индексируемых в базе.
Гарфилд во время разработки своей идеи создания подобного индекса вел переписку с Робертом Мертоном и интересовался его мнением по поводу возможностей использования подобного инструмента для исследования науки. Здесь нужно отметить, что, по сути, именно на основе мертонианской версии социологии науки вырастает идея использовать индексы цитирования для принятия управленческих решений в сфере науки.
Мертон является автором нормативной теории, согласно которой наука – это социальный институт, управляемый системой норм, вознаграждений и санкций. Ученые работают ради признания, а признание они могут получить только со стороны коллег, и одной из форм подобного признания является цитирование чужих работ. Цитируя работу, ученый признает ее важность и полезность для собственных исследований, а также еще раз подтверждает ее качество. Для ученого очень важно зафиксировать свой вклад в знание, а также утвердить приоритет открытия, потому что в науке действует принцип, согласно которому «первый получает все». Это обеспечивает кажущийся парадоксальным характер интеллектуальной собственности, которая утверждается за счет предоставления результатов исследования во всеобщее и свободное использование. Таким образом, система научных коммуникаций (реферируемые журналы) является основой для вознаграждения и определения статусов внутри института науки.
Однако в 1970-е годы некоторые мертоновские положения были серьезно подорваны как проводимыми эмпирическими исследованиями мотивов цитирования, так и новыми теоретическими концепциями в социологии науки (конструктивистский подход). Как выяснилось в ходе этих исследований, на самом деле для цитирования существует ряд мотивов, никак не связанных с теми идеями вознаграждения, о которых писал Мертон. Автор может цитировать работу просто для того, чтобы показать, что он знаком с ключевой литературой по исследуемому вопросу; ссылки на авторитетные статьи могут служить дополнительным средством убеждения; в конце концов, оказались не так редки случаи, когда авторы цитировали работы только для того, чтобы польстить журналу или рецензенту.
Наука воспринимается конструктивистами как процесс переговоров по поводу того, какое знание считать релевантным и обоснованным. Цитирование в этой концепции – это один из видов борьбы за обоснованность своей позиции, исследователи используют ссылки, чтобы получить поддержку и убедить читателей в обоснованности своих претензий.
Этот подход получил свое наиболее полное завершение в работах Б. Латура, который рассматривает науку как процесс «создавания», как социальное конструирование научных фактов в лабораториях. Научные факты возникают в результате консенсуса между учеными, на основе того, что коллеги признали их научными, а не на основе их так называемой «объективности». Ключевым моментом в этом подходе является то, что для конструктивистов цитирование связывается не с ценностью самой работы, т.е. не с ее смысловым содержанием, а скорее с тем, какую позицию занимает ее автор в стратификационной структуре науки.
Некоторые социологи делали попытки разрешить нормативно-конструктивистский спор, предлагая многомерные (multivariate, multi-dimensional) модели изучения цитирования. В многомерной теории цитирования (С. Козенс) делается попытка примирить эти два подхода. Согласно С. Козенс ссылка находится на пересечении трех систем в структуре науки. Ссылка признается в качестве одного из инструментов в системе вознаграждения, в то же время она играет значительную роль и в риторической системе (посредством которой ученые пытаются убедить друг друга в значимости своих притязаний), и, наконец, в процессе коммуникации в науке также используются механизмы цитирования. Таким образом, делается вывод о том, что при цитировании ученый одновременно руководствуется несколькими мотивами, и различать их можно только с аналитической точки зрения, но сделать это на практическом материале невозможно.
Еще один взгляд на цитирование в науке представил американский социолог Г. Смолл, который обратил внимание на то, что ссылка несет в себе смысловую нагрузку и всегда как-то связана с тем текстом, на который ученый ссылается. Часто цитируемые тексты воспринимаются уже как стандартные символы, т.е. имеют одно и то же значение для целых групп ученых, и в этом случае ссылки выступают в качестве единиц особого языка.
Выводы
Мы перечислили, конечно, далеко не полный набор мнений, который существует в социологии науки по вопросу, что представляет собой цитирование и какие существует классификации мотивов цитирования, однако обозначили ключевые точки этой проблемы, вокруг которых вращаются споры.
В литературе уже отмечалось, что существует значительный разрыв между практиками, занимающимися библиометрическими изысканиями и теоретиками, социологами науки, изучающими природу и механизмы цитирования. И методологическая незрелость, и теоретическая непроработанность может приводить к серьезным ошибкам в использовании индексов.
Нам кажется, вполне разумно и полезно было бы использовать богатый статистический материал, которые предоставляют нам индексы цитирования, в исследовательских целях для изучения структуры науки, того, как она организована в социальном и когнитивном плане. Это чисто научный, познавательный интерес.
Можно ли на основе данных о цитирования выносить какие-то административные решения? Когда от показателей цитируемости начинает зависеть не только репутация ученого в научном сообществе, но и позиции в университете, карьерный рост и выделение средств на исследования, то в этом случае цена неверной оценки оказывается слишком высокой. Поэтому нельзя основываться исключительно на показателях цитирования, в любом случае работу с индексами цитирования нужно сочетать с другими способами оценки.
В противном случае, когда чиновники пытаются установить минимальное количество цитирований, которое должен получить ученый, или количественную норму выработки статей в год, или какие-то другие «нормы работы», то в этом случае они добиваются толь-
ко того, что гонка за цифрами подменяет собой первоначальную цель работы ученых – поиск знания.
Однако если применять количественные показатели для оценки работы индивидуальных ученых довольно сложно, то нам кажутся обоснованными выводы, которые можно сделать, работая на больших массивах: сравнивая между собой положение науки в разных странах или положение отдельных научно-исследовательских организаций в одной стране, ранжируя научные журналы по импакт-факторам (в пределах одной дисциплины) и т.д. И вот уже на основе этих выводов возможно принимать стратегические решения в области управления наукой.
Ирина Жукова, «Управление большими системами». Специальный выпуск 44: «Наукометрия и экспертиза в управлении наукой»
Опубликовано в сокращении. С полным текстом статьи вы можете ознакомиться в приложенном файле.
Фото - www.myshared.ru
- Войдите или зарегистрируйтесь, чтобы отправлять комментарии