Кот-ученый с индексом Хирша 12: как фейковые статьи выявили уязвимости научных метрик
Исследователи создали фейковый профиль ученого-кота на платформе ResearchGate, опубликовав 12 статей по математике. Через систему искусственных цитирований эти работы получили 132 упоминания, что обеспечило вымышленному автору индекс Хирша, равный 12. Этот случай вновь поднимает вопрос о надежности метрик, используемых для оценки научной значимости.
Системы научного цитирования, такие как индекс Хирша, играют ключевую роль в карьере исследователей, влияя на финансирование, продвижение и признание. Однако эксперимент аспиранта Северо-Западного университета Риз Ричардсон и специалиста по научным нарушениям Ника Уайза показал, насколько эти метрики уязвимы для манипуляций. Ученые создали профиль кота по имени Ларри Ричардсон и разместили от его имени 12 статей на ResearchGate — популярной платформе для научного обмена.
Механизм искусственного цитирования
Для накопления цитирований исследователи зарегистрировали 12 вымышленных авторов, каждый из которых ссылался на все работы Ларри. В результате каждая из 12 статей получила по 12 упоминаний, что формально соответствовало индексу Хирша 12. Google Scholar, автоматизированная система поиска научных публикаций, не смогла эффективно отфильтровать поддельные материалы: из 12 статей только одна была помечена как фейковая, остальные 11 с 132 цитированиями оставались в системе неделю до удаления.
Профиль кота-ученого до сих пор доступен в поисковой системе, что подчеркивает сложности автоматической верификации контента. Этот эксперимент не первый в своем роде: в 2010 году специалист по информатике Сирил Лаббе создал профиль исследователя Ike Antkare, чьи работы в Google Scholar сделали его шестым по цитируемости среди информатиков.
Контекст и последствия
По словам авторов эксперимента, их вдохновила реклама сервисов, предлагающих ученым искусственно повысить цитируемость и индекс Хирша за плату. На таких платформах, включая ResearchGate, размещаются статьи с бессмысленным текстом, содержащие ссылки на работы заказчика, после удаления которых цитирование сохраняется. Это указывает на формирование теневого рынка услуг по накрутке метрик.
Ник Уайз отмечает, что невозможно создать метрику, которую нельзя обмануть, что ставит под вопрос объективность существующих систем оценки. Возможно, эти системы устарели и требуют пересмотра, либо от них следует отказаться в пользу более комплексных подходов. Эксперименты с фейковыми профилями демонстрируют не только технические уязвимости, но и этические проблемы в научной коммуникации.
Случай с котом Ларри актуализирует дискуссию о качестве рецензирования и модерации на научных платформах. Хотя автоматические системы, такие как Google Scholar, эффективны для агрегации данных, они не всегда способны выявлять скоординированные манипуляции. Это создает риски для доверия к научным метрикам, которые используются при принятии кадровых и финансовых решений.
В долгосрочной перспективе подобные инциденты могут стимулировать разработку более сложных алгоритмов проверки и усиление роли экспертной оценки. Однако, как показывает эксперимент, даже базовые манипуляции остаются незамеченными в течение значительного времени, что указывает на необходимость системных изменений в оценке научной продуктивности.
Комментарии
0 всего