Критерии оценки качества и эффективности использования институциональных репозиториев

В седьмом выпуске научного журнала «Научные и технические библиотеки» за 2026 год опубликована статья «Критерии оценки качества и эффективности использования институциональных репозиториев», написанная А. А. Стукаловой – кандидатом педагогических наук, старшим научным сотрудником отдела научных исследований открытой науки ГПНТБ СО РАН.

Формирование и развитие репозиториев дало преимущества для поиска и доступа к научной информации: функциональные возможности, открытый доступ (ОД) и агрегаторы архивов позволили управлять поиском и расширили способы получения информации. Однако ресурсная база и функционал репозиториев неравны, и не все авторы положительно относятся к размещению работ в ОД. Существуют демотивирующие факторы: дополнительные усилия, нежелание предоставлять труды в ОД, опасение недобросовестного использования результатов. Возникают проблемы и при использовании репозиториев. На первый взгляд, поиск информации в репозитории не требует никаких дополнительных знаний, но пользователю приходится изучать особенности каждого репозитория, осваивать правила поиска информации в нем.

Возникают проблемы и при использовании репозиториев: вопросы управления авторским правом, трудности, связанные с поиском информации в репозиториях, вопросы доступности, регулярности пополнения ИР, полноты и корректности ввода метаданных, проблемы обмена данными репозиториев научных публикаций.

Цель статьи — разработка критериев оценки качества и эффективности использования институциональных репозиториев (ИР). На основе контент-анализа документальных источников информации и исследования сайтов отечественных репозиториев научных и образовательных учреждений выявлены основные проблемы, препятствующие эффективности их использования: вопросы авторского права, доступность, регулярность пополнения, полнота и корректность ввода метаданных, трудности, связанные с поиском информации и др.

Исследование сайтов отечественных научных и образовательных организаций показало, что практика ведения ИР в них развита неравномерно. В научных учреждениях репозитории создаются гораздо реже, чем в образовательных организациях. Однако половина ИР вузов закрыта для удаленного пользователя. Кроме того, не все объекты репозиториев содержат полный текст документа, ссылки на внешние источники не всегда корректны. Ресурсная база ИР вузов значительно выше, чем в научных учреждениях, поскольку помимо трудов сотрудников включает образовательные коллекции и студенческие работы. На основе полученных результатов разработана методика оценки качества ИР (рис. 1).

Рис. 1. Методика оценки качества и эффективности использования ИР

Комбинирование недостатков репозиториев с факторами, способствующими их успешной работе, позволило разработать критерии оценки качества и эффективности использования репозиториев. В ходе исследования были определены следующие показатели, определяющие успешность работы ИР:

1. Надежность. Исследование репозиториев российских научных и образовательных учреждений показало нестабильность работы серверов. Это проявляется как в медленном процессе поиска информации, так и в ошибке доступа к ИР. Определены следующие аспекты для анализа данного показателя:

1.1.  Стабильность работы сервера

1.2. Быстрота осуществления поисковых процедур

2. Доступность. Поиск репозиториев на сайтах организаций и анализ их содержимого показали, что найти такие ИР бывает непросто, а даже при успешном обнаружении не всегда для пользователей доступен их контент. Определены следующие аспекты для анализа данного показателя:

2.1. Видимость репозиториев

2.2. Доступность контента репозиториев

3. Ресурсная база ИР. Проведенное исследование сайтов ИР показало, что ресурсная база большинства репозиториев невелика. Очень редко ИР включают более 100 тыс. документов. С одной стороны, хронологический охват некоторых репозиториев ограничен изданиями последних лет, с другой – не актуализирован за последние годы. Большое значение имеет также содержание ИР. Определены следующие аспекты для анализа данного показателя:

3.1. Хронологический охват

3.2. Оперативность предоставления информации

3.3. Содержание

4. Система поиска:

4.1. Режимы поиска

4.2 Средства повышения результативности поиска

4.3. Поисковые словари

4.4. Управление результатами поиска

5. Метаданные.

5.1. Полнота предоставления метаданных

5.2. Корректность заполнения метаданных в репозиториях

6. Комфортность использования ИР. Для повышения удобства использования репозиториев необходимо предоставление инструкций по регистрации и поиску документов, улучшение визуального оформления ИР. Анализ ИР показал, что в репозиториях, как правило, предоставляются только общие рекомендации по поиску, визуальное оформление и размер шрифтов приемлемы, однако не предусмотрены размеры шрифтов для слабовидящих. Эти факторы влияют на комфортность использования ИР. Определены следующие аспекты для анализа данного показателя:

6.1. Система подсказок

6.2. Визуальное оформление

6.2.1. Размеры шрифтов

6.2.2. Цветовое оформление

6.2.3. Размещение информации в ИР

7. Снабжение данных дополнительной информацией.

7.1. Предоставление сведения об альметриках. Анализ сайтов ИР показал, что альтметрические показатели слабо представлены в репозиториях. Внутренние счетчики не дают полной информации о востребованности материалов ИР, а альтметические сервисы от коммерческих агрегаторов практически не применяются. В то же время альтметрика является одним из инструментов, позволяющих измерить значимость, влиятельность научных публикаций репозиториев.

8. Предоставление информации о репозиториях во внешних системах. Исследование сайтов отечественных образовательных и научных учреждений показало, что их участие в проектах по созданию совместных архивов ОД проявляется неравномерно. Определены следующие аспекты для оценки качества данного показателя:

8.1. Участие в проектах по созданию совместных архивов ОД

8.2. Регистрация в международных агрегаторах репозиториев

Показатели, предложенные в разработанных критериях оценки качества и эффективности репозиториев, предусмотрены прежде всего для анализа ИР. Они могут варьироваться в зависимости от типа и вида репозитория, его задач, особенностей контента, контингента пользователей и других характеристик. В совокупности они обеспечивают более полное представление о преимуществах и недостатках ИР, соответствии его качества информационным потребностям пользователей.

Источник: Стукалова А. А. Критерии оценки качества и эффективности использования институциональных репозиториев // Научные и технические библиотеки. 2026. № 7. С. 81-106. https://doi.org/10.33186/1027-3689-2026-7-81-106.