Ошибки в оценке науки, или как правильно использовать библиометрию

Ошибки в оценке науки, или как правильно использовать библиометрию

Ив Жэнгра – профессор Квебекского университета в Монреале, один из основателей и научный директор канадской Обсерватории наук и технологий. В предлагаемой книге излагается ретроспективный взгляд на успехи и провалы наукометрических проектов, связанных с оценкой научной деятельности, использованием баз цитирования и бенчмаркинга. Автор в краткой и доступной форме излагает логику, историю и типичные ошибки в применении этих инструментов. Его позиция: несмотря на очевидную аналитическую ценность наукометрии в условиях стремительного роста и дифференциации научных направлений, попытки применить ее к оценке эффективности работы отдельных научных учреждений на коротких временных интервалах почти с неизбежностью приводят к манипулированию наукометрическими показателями, направленному на искусственное завышение позиций в рейтингах. Основной текст книги дополнен новой статьей Жэнгра со сходной тематикой и эссе, написанным в соавторстве с Олесей Кирчик и Венсаном Ларивьером, об уровне заметности советских и российских научных публикаций в международном индексе цитирования Web of Science. Издание будет интересно как научным администраторам, так и ученым, пребывающим в ситуации реформы системы оценки научной эффективности.

Жанры: Техническая литература, Проектирование, Машиностроение
Цикл: Не является частью цикла
Год публикации: 2018

Читать онлайн Ошибки в оценке науки, или как правильно использовать библиометрию


Благодарности

Эта книга обязана своим появлением Катрин Доннар, в июне 2011 года пригласившей меня прочитать лекцию об использовании библиометрии в Национальном институте агрономических исследований (Institut National de la Recherche Agronomique, INRA). Это приглашение убедило меня в том, что настало время разобраться с многочисленными и зачастую бессодержательными дебатами по поводу использования библиометрии в оценке научных исследований. За последние пятнадцать лет мне неоднократно приходилось выступать на эту тему на разных публичных площадках. Здесь я воспроизвожу и отчасти подробнее развиваю некоторые из этих выступлений, чтобы нарисовать как можно более полную картину того, как следует и как не следует использовать библиометрию[1]. Мне хотелось бы поблагодарить коллег, которые прочитали этот текст и сделали полезные замечания: Жерома Бурдье, Мишеля Гроссетти, Йохана Хейлброна, Камий Лимож, Венсана Ларивьера, Франка Пупо, Виктора Штоцковски и Жан-Филиппа Уаррена. Я также признателен Жан-Пьеру Робитаю и Филиппу Монжону за подготовку графиков. Разумеется, я несу полную ответственность как за содержание этой книги, так и за ошибки, которые могут в ней обнаружиться.

Введение

«Оценка»… Это слово вот уже несколько лет сотрясает академический и университетский мир. Особенно это ощущается в Европе, где с начала 2000-х годов идет процесс реформирования высшего образования[2]. Оценивать стремятся всех и вся: преподавателей, профессоров, исследователей, учебные программы и сами университеты. Показателей превосходства (excellence) и качества становится все больше, однако не всегда понятно, на каких основаниях эти показатели сконструированы.

Среди инструментов, используемых для создания многочисленных индикаторов превосходства, которые менеджерский подход к высшему образованию и науке повсеместно навязывает как некую очевидность, одно из почетных мест принадлежит сегодня библиометрии. В качестве критериев оценки научной продукции и ее различных применений этот исследовательский метод использует научные публикации и их цитирование. Подсчет числа публикаций и ссылок, производимый с целью рейтингования университетов, лабораторий или исследователей, часто выдается за объективную меру ценности тех или иных научных результатов.

Реагируя на распространение этих количественных показателей, многие исследователи критикуют библиометрию, ее изъяны и побочные эффекты, связанные с тем, что количество публикаций, а главное, число ссылок на них стали показателем качества и импакта их работ. Однако, как ни парадоксально, зачастую сами исследователи, принадлежащие к разным дисциплинам, спешат упомянуть об импакт-факторе журналов, в которых они публикуются, и кичатся своим индексом Хирша, как будто это гарантия их ценности и успеха. При этом они не всегда указывают на источник этих цифр и даже не вполне понимают реальное значение подобных показателей. Иными словами, невозможно всерьез вменять в вину одним лишь бюрократам всю эту «измерительную лихорадку». Ее сопровождает бешеная гонка к вершинам многочисленных рейтингов университетов, тогда как – и мы это покажем – эти рейтинги не имеют под собой ни малейшего научного основания.

Во Франции в результате принятия закона 2007 года об автономии университетов и попыток реформирования организации научных исследований возникла повышенная чувствительность к вопросам оценивания, которые прежде мало обсуждались во французских академических кругах. Под влиянием этого контекста и несмотря на то что использование библиометрии редко является единственным критерием оценки, утвердилось ложное и опасное представление о тождестве между библиометрией и оцениванием, как если бы библиометрия была нужна лишь для оценки исследователей. А ведь именно отсутствие серьезной методологической рефлексии дает простор для хаотического, если не сказать дикого использования библиометрии. Например, на страницах журналов


Вам будет интересно
Что представляет собой научное знание? Существуют ли социальные и культурные факторы, которые способствуют развитию науки? Какие институты содействуют или препятствуют этому развитию? Кто такие ученые? Почему возникают споры в науке? Рассматривая взаимосвязи между наукой и обществом, социологи науки ставят под сомнение сложившиеся представления об устройстве научного знания. Вопреки иногда завораживающему, иногда зловещему образу ученого, который в одиночку совершает открытия в своей лаборатории...
Читать онлайн
От наших способностей использовать технологии, контролировать и совершенствовать их, а также создавать новые – зависит наше будущее. Эта книга посвящена развитию умения понимать и описывать любую технологию, в чем бы она ни заключалась. Представленные концепции и подходы будут полезны дизайнерам, технологам, разработчикам интерфейсов и всем, кто хочет разобраться в современных и будущих технологиях....
Читать онлайн
Книга о том, как создавать сложные многоэкранные инсталляции и проектировать видеостены.Будет особенно интересна менеджерам и инженерам интеграционных компаний, которые хотят получить сжатую и практическую информацию по теме.Читатель найдет в книге готовые схемы по созданию проектов, рекомендации по работе с оборудованием и ссылки на проверенных вендоров....
Читать онлайн
Теория решения изобретательских задач (ТРИЗ) широко внедряется в инженерную работу по всему миру. Однако до сих пор эта методика требует достаточно большого времени и усилий для освоения. Целью данной книги является создание простой методики на базе инструментов ТРИЗ, которую сможет использовать широкой круг инженеров.Книга предназначена для студентов, инженеров и просто креативных людей, желающих использовать методику ТРИЗ, но не имеющих большого количества времени на обучение....
Читать онлайн
В книге рассматриваются вопросы информационно-коммуникационных технологий и систем связи. Отец мне говорил слова с огромным смыслом: «Ударила жизнь по голове, а ты все равно гордо вставай сразу с колен, сотри грязь, пот и кровь и опять иди вперед напролом, никого не боясь, и постоянно доказывай себе и окружающим, что ты личность, что ты сможешь преодолеть любую преграду и трудности – тебе плевать на трудности и преграды. Главное – ты видишь цель, и ты должен ее покорить, и не вздумай отступать!»...
Читать онлайн
Автор, в качестве аккредитованного журналиста неоднократно посещавший автосалоны во Франкфурте, Женеве и Париже, рассказывает об увиденных им зарубежных концептуальных автомобилях (концепт-карах) и прототипах конца XX – начала XXI века.Временные рамки книги: осень 1997 года (Франкфуртский автосалон) – осень 2006 года (Парижский автосалон)....
Читать онлайн
Эта книга для начинающих изучать теорию решения изобретательских задач (ТРИЗ).Она описывает наиболее общие способы решения нестандартных (изобретательских) задач и получения новых идей.Материал легко усваивается, наглядно показывая, что изобретать можно по определенным правилам и методам. Кроме того, изучение книги создает у читателей мотивацию в освоении следующего материала.Книга рассчитана на широкий круг читателей и будет особенно полезна тем, кто хочет быстро получать новые идеи....
Читать онлайн
Книга рассказывает об украинской истории создания и развития органов и систем специальных видов (шифрованной документальной, правительственной и конфиденциальной) связи в структуре КГБ УССР, Службы безопасности Украины (СБУ), Государственной службы специальной связи и защиты информации Украины и на территории Закарпатской области в частности, а также о фактах подслушивания СБУ телефонных переговоров и методах контроля коммуникаций....
Читать онлайн
Радиоразведка появилась вместе с радиосвязью в начале ХХ века, а компьютерная разведка – вместе с глобальной сетью Интернет в 1980-х годах. Книга рассказывает историю рождения и эволюции техники и методов американской радиоэлектронной разведки и контрразведки; разработки и создания системы глобального контроля «Эшелон» и программного обеспечения компьютерной разведки США; описывает успехи радиоразведки страны по перехвату информации.«Кто владеет информацией, тот владеет миром» (Натан Ротшильд)...
Читать онлайн
В этой книге Эми Тэнжерин рассказывает о небольших, но важных повседневных изменениях, которые постепенно позволят вам построить жизнь, наполненную творчеством и радостью. А первыми шагами к ней послужат упражнения, которые можно найти на страницах. Вооружитесь блокнотом, цветными ручками или карандашами и уделите время себе и своей душе. Это ваш день!На русском языке публикуется впервые....
Читать онлайн
История "Страх" разворачивается в 1982 году на территории США. На контененте Северной Америки возникла аномальная вспышка, которая даровала малому количеству людей неизвестные всему миру способности. Конечно все это привело к весьма ожидаемым проблемам. Началась война внутри самой Америки, война с её же жителями. И во время этой борьбы против собственного народа, появляется организация, которая и становиться главной опорой защиты Америки… Спустя 38 лет пламя войны все же смогло стихнуть, но её у...
Читать онлайн
«Кто бы мог подумать, что незначительный случай решит мою судьбу.В то время я был холост и жил в доме научных работников. В один из весенних ленинградских вечеров я сидел у открытого окна и любовался на деревца сквера, покрытые светло-зеленым молодым пушком. Верхние этажи домов пылали палевыми лучами заката, нижние погружались в синие сумерки. Вдали виднелись зеркало Невы и шпиль Адмиралтейства. Было удивительно хорошо, не хватало только музыки. Мой ламповый радиоприемник испортился. Нежная мело...
Читать онлайн
«– Нет, трудно в наше время быть «собственным корреспондентом». Я, как говорится, выбит из седла и не знаю, о чем теперь писать. Вы помните мой рождественский фельетон? Я сделал любопытный подсчет, сколько десятков миллионов бутылок вина и шампанского выпили берлинцы за праздники и сколько сотен миллионов килограммов съели свинины и гусей. Немцам это показалось обидно. «А, он хочет доказать, что нам совсем не плохо живется и что, следовательно, мы можем гораздо аккуратнее платить военные долги?»...
Читать онлайн