Assessing Results of University Research Activities: Indicators of Openness in Rankings

Cover Page

Cite item

Full Text

Abstract

Open access to scientific results and research data becomes an engine for the successful development of modern science. The article examines popular rankings of world universities: the CWTS Leiden Ranking, the Times Higher Education World University Rankings (THE Rankings), the QS World University Rankings (QS), the SCImago Institutions Rankings (SIR) and the Academic Ranking of World Universities (ARWU). The objective of the research was to study the ranking methodologies in the ratings under consideration and to determine the place of the openness criteria in them. A comparative analysis of world’s and Russia’s top universities in rankings is provided. The author has made an assessment of the significance of openness indicators in the world rankings, on the basis of which it has been concluded that only two world rankings pay due attention to these ranking criteria. Of those considered, only the evaluation methodologies of the CWTS Leiden Ranking and the SCImago Institutions Rankings take into account a quantitative analysis of open access publications and altmetric impact indicators. The rest of the considered rankings focus mainly on standard bibliometric indicators from different blocks related to the assessment of education, research, academic impact and international cooperation. Thus, in 2019–2022, the University College London (UK) was the top university in the CWTS Leiden Ranking in terms of the share of open access publications (90.8%) and Moscow Institute of Physics and Technology was ranked the first among Russian universities (66.6%).

About the authors

Olga M. Udartseva

State Public Scientific Technological Library SB RAS

Email: udartseva@spsl.nsc.ru
ORCID iD: 0000-0002-6491-0412
SPIN-code: 8692-7340
ResearcherId: I-9589-2018
Candidate of Pedagogy, Researcher, Department of Scientific Research of Open Science Novosibirsk, Russia

References

  1. Research integrity: A landscape study / J. Metcalfe, K. Wheat, M. Munafò, J. Parry // Vitae : [сайт]. 2020. May 30. URL: https://vitae.ac.uk/vitae-publications/reports/research-integrity-a-landscape-study/view (дата обращения: 19.07.2024).
  2. Predictors of citations in the urological literature / D. L. Willis, C. D. Bahler, M. M. Neuberger, P. Dahm // BJU International. 2011. Vol. 107, № 12. P. 1876–1880. doi: 10.1111/j.1464-410X.2010.10028.x.
  3. Герасименко П. В. Модификации индекса Хирша для дифференцированной оценки результатов творческой деятельности ученых // Управление наукой и наукометрия. 2020. Т. 15, № 1. С. 55–71. doi: 10.33873/2686-6706.2020.15-1.55-71. EDN XYHWFG.
  4. Комарица В. Н. Преимущество использования открытого доступа: анализ цитирования // Научно-техническая информация. Серия 2: Информационные процессы и системы. 2022. № 7. С. 36–41. doi: 10.36535/0548-0027-2022-07-4. EDN TDYVHJ.
  5. The relationship between institutional factors, citation and altmetric counts of publications from Finnish universities / K. Holmberg, T. Bowman, F. Didegah, J. Lehtimäki // Journal of Altmetrics. 2019. Vol. 2, № 1. Art. 5. doi: 10.29024/joa.20.
  6. Sharma J. G. A correlation study between altmetrics and citations using the parameters of title rendering, open access, and funding status // DESIDOC Journal of Library & Information Technology. 2023. Vol. 43, № 6. P. 406–413. doi: 10.14429/djlit.43.06.18726.
  7. How does open access publication impact readership and citation rates of lumbar spine literature? / C. P. Lynch, E. D. K. Cha, M. R. Patel [et al.] // Clinical Spine Surgery. 2022. Vol. 35, № 6. P. E558–E565. doi: 10.1097/BSD.0000000000001303.
  8. Открытый доступ: история, современное состояние и путь к открытой науке : монография / М. В. Вахрушев, М. В. Гончаров, И. И. Засурский [и др.] ; под общ. и науч. ред. д-ра техн. н., проф., чл.-корр. РАО Я. Л. Шрайберга. СПб. [и др.] : Лань, 2020. 165, [1] с. ISBN 978-5-8114-5034-3. EDN BSMMGI.
  9. Редькина Н. С. Библиотека в информационной структуре открытой науки. Новосибирск : ГПНТБ СО РАН, 2022. 226 с. ISBN 978-5-94560-338-7. EDN XFEEQU.
  10. Трищенко Н. Д. Открытый доступ к науке: анализ преимуществ и пути перехода к новой модели обмена знаниями / под ред. И. И. Засурского. М. : Ассоциация интернет-издателей ; Екатеринбург : Кабинетный учёный, 2017. 198 с. ISBN 978-5-7584-0154-5. EDN TYLSQX.
  11. Wenaas L. Choices of immediate open access and the relationship to journal ranking and publish-and-read deals // Frontiers in Research Metrics and Analytics. 2022. Vol. 7. Art. 943932. doi: 10.3389/frma.2022.943932.
  12. Analytical support for bibliometrics indicators: Open access availability of scientific publications : Final report // Science-Metrix : [сайт]. January 2018. URL: https://science-metrix.com/sites/default/files/science-metrix/publications/science-metrix_open_access_availability_scientific_publications_report.pdf (дата обращения: 10.07.2024).
  13. Laakso M., Björk B.-C. Open access journal publishing in the business disciplines: A closer look at the low uptake and discipline-specific considerations // Journal of Librarianship and Information Science. 2022. Vol. 54, № 2. P. 216–229. doi: 10.1177/09610006211006769.
  14. Larivière V., Sugimoto C. R. Do authors comply when funders enforce open access to research? // Nature. 2018. Vol. 562. P. 483–486. doi: 10.1038/d41586-018-07101-w.
  15. Poljak Bilić L., Posavec K. FAIRness of research data in the European humanities landscape // Publications. 2024. Vol. 12, № 1. Art. 6. doi: 10.3390/publications12010006.
  16. Soh K. The seven deadly sins of world university ranking: A summary from several papers // Journal of Higher Education Policy and Management. 2017. Vol. 39, № 1. P. 104–115. doi: 10.1080/1360080X.2016.1254431.
  17. Comparison of bibliographic data sources: Implications for the robustness of university rankings / C.-K. Huang, C. Neylon, C. Brookes-Kenworthy [et al.] // Quantitative Science Studies. 2020. Vol. 1, № 2. P. 445–478. doi: 10.1162/qss_a_00031.
  18. Analysis of patterns in the university world rankings webometrics, Shanghai, QS and SIR-SCimago: Case Latin America / M. Torres-Samuel, C. L. Vásquez, A. Viloria [et al.] // Data mining and big data : Proceedings of the Third International conference, DMBD 2018 (Shanghai, China, June 17–22, 2018). Ed. by Y. Tan, Y. Shi, Q. Tang. Cham : Springer, 2018. P. 188–199. doi: 10.1007/978-3-319-93803-5_18.
  19. Fuzzy data definitions distort fair comparability of universities in university rankings: Results from Italy and Belgium on the Times Higher Education Ranking / H. Poelmans, L. Sacchetti, S. Vancauwenbergh, S. Piazza // Quality in Higher Education. 2024. Vol. 30, № 1. P. 75–96. doi: 10.1080/13538322.2023.2173967.
  20. Mia R., Abdullah A. M. M., Hui W. Research prospects, higher education and world university ranking in China: A review // World Studies in Education. 2021. Vol. 21, № 2. P. 59–73. doi: 10.7459/wse/21.2.05.
  21. Эбзеева Ю. Н., Смирнова Ю. Б. Позиции российских вузов в мировых рейтингах в 2022 году // Вестник Российского университета дружбы народов. Серия: Социология. 2022. Т. 22, № 4. C. 909–918. doi: 10.22363/2313-2272-2022-22-4-909-918. EDN RHMTMV.
  22. A contrast pattern-based scientometric study of the QS World University Ranking / O. Loyola-González, M. A. Medina-Pérez, R. A. C. Valdez, K.-K. R. Choo // IEEE Access. 2020. Vol. 8. P. 206088–206104. doi: 10.1109/ACCESS.2020.3037665.
  23. Редькина Н. С. Информационная экосистема открытой науки: ключевые аспекты развития // Научно-техническая информация. Серия 1: Организация и методика информационной работы. 2022. № 7. С. 10–18. doi: 10.36535/0548-0019-2022-07-2. EDN JAQBQA.

Supplementary files

Supplementary Files
Action
1. JATS XML
Download


Creative Commons License
This work is licensed under a Creative Commons Attribution 4.0 International License.

Согласие на обработку персональных данных с помощью сервиса «Яндекс.Метрика»

1. Я (далее – «Пользователь» или «Субъект персональных данных»), осуществляя использование сайта https://journals.rcsi.science/ (далее – «Сайт»), подтверждая свою полную дееспособность даю согласие на обработку персональных данных с использованием средств автоматизации Оператору - федеральному государственному бюджетному учреждению «Российский центр научной информации» (РЦНИ), далее – «Оператор», расположенному по адресу: 119991, г. Москва, Ленинский просп., д.32А, со следующими условиями.

2. Категории обрабатываемых данных: файлы «cookies» (куки-файлы). Файлы «cookie» – это небольшой текстовый файл, который веб-сервер может хранить в браузере Пользователя. Данные файлы веб-сервер загружает на устройство Пользователя при посещении им Сайта. При каждом следующем посещении Пользователем Сайта «cookie» файлы отправляются на Сайт Оператора. Данные файлы позволяют Сайту распознавать устройство Пользователя. Содержимое такого файла может как относиться, так и не относиться к персональным данным, в зависимости от того, содержит ли такой файл персональные данные или содержит обезличенные технические данные.

3. Цель обработки персональных данных: анализ пользовательской активности с помощью сервиса «Яндекс.Метрика».

4. Категории субъектов персональных данных: все Пользователи Сайта, которые дали согласие на обработку файлов «cookie».

5. Способы обработки: сбор, запись, систематизация, накопление, хранение, уточнение (обновление, изменение), извлечение, использование, передача (доступ, предоставление), блокирование, удаление, уничтожение персональных данных.

6. Срок обработки и хранения: до получения от Субъекта персональных данных требования о прекращении обработки/отзыва согласия.

7. Способ отзыва: заявление об отзыве в письменном виде путём его направления на адрес электронной почты Оператора: info@rcsi.science или путем письменного обращения по юридическому адресу: 119991, г. Москва, Ленинский просп., д.32А

8. Субъект персональных данных вправе запретить своему оборудованию прием этих данных или ограничить прием этих данных. При отказе от получения таких данных или при ограничении приема данных некоторые функции Сайта могут работать некорректно. Субъект персональных данных обязуется сам настроить свое оборудование таким способом, чтобы оно обеспечивало адекватный его желаниям режим работы и уровень защиты данных файлов «cookie», Оператор не предоставляет технологических и правовых консультаций на темы подобного характера.

9. Порядок уничтожения персональных данных при достижении цели их обработки или при наступлении иных законных оснований определяется Оператором в соответствии с законодательством Российской Федерации.

10. Я согласен/согласна квалифицировать в качестве своей простой электронной подписи под настоящим Согласием и под Политикой обработки персональных данных выполнение мною следующего действия на сайте: https://journals.rcsi.science/ нажатие мною на интерфейсе с текстом: «Сайт использует сервис «Яндекс.Метрика» (который использует файлы «cookie») на элемент с текстом «Принять и продолжить».