Исследование более 15 000 журналов открытого доступа с помощью искусственного интеллекта (ИИ) выявило признаки сомнительных изданий, которые ставят прибыль выше научной достоверности. Анализ, опубликованный в журнале Science Advances, выявил более 1000 таких журналов, что составляет около 7% выборки. Это крупнейшее на сегодняшний день применение ИИ для выявления потенциально проблемных журналов.
Свободно доступный инструмент проверки, описанный исследователями, не совершенен, но может помочь ученым и людям, которые интересуются наукой, избегать сомнительных изданий.
«Меня воодушевляет потенциал этих работ для поддержки решений о выборе журналов», — сказала Джоанна Болл, управляющий директор Directory of Open Access Journals, который ведет список изданий с проверенными стандартами качества.
Проблемы с качеством публикаций в науке встречаются давно. Некоторые журналы обещают невероятно быстрые сроки рецензирования или позволяют авторам слишком часто ссылаться на свои же работы. В современных журналах открытого доступа, где авторы платят за публикацию, издатели заинтересованы выпускать как можно больше статей и экономить на проверке качества. Самые проблемные журналы иногда называют «хищными», хотя этот термин порой несправедливо применяют к изданиям из развивающихся стран.
Исследователь Дэниел Акунья из Университета Колорадо в Боулдере отмечает:
«В работе не указаны конкретные журналы или издательства, чтобы избежать судебных исков. По моим данным, большинство сомнительных изданий расположены в развивающихся странах, особенно в Индии и Иране, хотя есть и журналы известных издательств из богатых стран»
ИИ анализировал данные о цитировании и другие библиографические сведения, используя базы Microsoft Academic Graph и Unpaywall, а также учитывал стандарты качества DOAJ (Directory of Open Access Journals, международного каталога научных журналов открытого доступа) и характеристики редакционных коллегий. Двое авторов исследования и библиотекарь проверили корректность решений ИИ на части выборки.
Результаты показали, что ИИ отнес 1092 журнала к сомнительным, но при этом ошибочно включил в этот список еще 345 добросовестных изданий и, наоборот, не заметил 1782 действительно проблемных журнала. Настройка алгоритма повышала чувствительность к проблемным журналам, но увеличивала количество ошибок.
Эксперты отмечают, что инструмент позволит сэкономить огромное количество времени и проводить более объективную оценку журналов по сравнению с субъективными классификациями, которые часто вызывают споры. По оценкам команды, число статей в сомнительных журналах с 2000 по 2020 год выросло более чем в 10 раз и достигло примерно 45 тысяч — и эта тенденция продолжает усиливаться.
Келли Коби из Оттавского университета добавляет, что алгоритм необходимо постоянно обновлять, чтобы отслеживать журналы, меняющие тактики и названия, чтобы избежать обнаружения.
Коби подчеркивает:
«Сомнительные журналы будут существовать, пока научные институты оценивают исследователей в основном по количеству публикаций. Если перейти к оценке по качеству, многие из таких журналов просто перестанут приносить прибыль».
Ученые отмечают, что инструмент нуждается в тщательной проверке, поскольку DOAJ отбирает лишь около четверти из 8000 ежегодных заявок и исключает журналы при несоответствии стандартам.
Выяснилось, как искусственный интеллект влияет на успеваемость студентов
Искусственный интеллект нашел пять новых материалов для батарей будущего
Подписывайтесь и читайте «Науку» в Telegram