Index Copernicus

Методология оценки

Основываясь на почти 20-летнем опыте оценки научных журналов, команда Index Copernicus International разработал модель ICI Publishing Stars. Это позволяет измерить достижения редакции научных журналов в функциональных областях, которые выражаются в увеличении показателей распространения и цитирования. Таким образом, результат оценки в ICI Journals Master List - индекс Index Copernicus Value (ICV) является показателем силы научного журнала - говорит о том, насколько быстро он сможет достичь своих целей.

Критерии оценки ICI Journals Master List

Оценка в базе данных ICI Journals Master List состоит из двух компонентов:

1. КАЧЕСТВО ЖУРНАЛА - измеряется на основе уровня соответствия критериям модели ICI Publishing Stars, которая в настоящее время сосредоточена на двух аспектах работы журнала - его оцифровки и интернационализации. Он состоит из следующих элементов:

• Стандарты - в качестве редакционных стандартов была принята адаптация материала, публикуемого в журнале, к международным требованиям. Среди таких элементов: прозрачность и эстетичность структуры статей и всего журнала, публикация процедуры рецензирования или участие рецензентов с внешней аффиляцией, составляющие основу, без которой журнал не сможет построить устойчивое развитие. В этой области редакцию спрашивают в первую очередь о рецензируемой модели функционирования журнала или о требованиях от авторов различных заявлений, направленных на проверку соблюдения принципов этики публикации.
• Стабильность - периодичность и регулярность журнала направлены на оценку редакционной и управленческой эффективности редакции. Регулярность публикации следующих номеров журнала является важным элементом оценки в авторитетных международных базах данных.
• Оцифровка - доступность журнала в онлайн версии является отличным средством для его продвижения. Готовность интегрироваться с базами данных, легкость доступа к опубликованному контенту - это критерии, несоблюдение которых может стать препятствием для развития журнала, а выполнение - стимулом для развития и укрепления контактов с учеными со всего мира. В области «Оцифроки» редакция размещает, среди прочего, информацию об индексации периодического издания в научных базах данных, публикацию номеров DOI (Digital Object Identifier) или публикацию статей в режиме «ahead of print». С 2017 года команда Index Copernicus ввела дополнительный критерий, который заключается в размещении информации о содержании отдельных выпусков журнала - метаданных научных статей и библиографии за период как минимум 4 лет, предшествующих год заполнения анкеты.
• Интернационализация - количество языковых версий как веб-сайта журнала, так и контента, публикуемого в нем, участие авторов и рецензентов с заграничной аффилиацией влияет на развитие международного сотрудничества, увеличивает охват, узнаваемость и влияние научного журнала. 

2. СИЛА ВЛИЯНИЯ - определяется путем анализа тенденций цитирования журнала, проиндексированного в базах данных ISI Web of Science и Scopus, что отражает интенсивность, с которой журнал уже был замечен в научном мире.

В каждой из областей указаны критерии, выполнение которых увеличивает шансы на увеличение значений цитирования. Для каждого из критериев можно определить действия, которые должна предпринять Редакция журнала, чтобы обеспечить качество научного журнала и силу его влияния.

Оценка

Окончательная параметрическая оценка в базе данных ICI Journals Master List предполагает, что общий балл по всему критерию «Качество журнала» не может превышать 100 баллов. Журнал может получить отрицательные баллы (за задержку печати или выпуск комбинированных номеров) - максимум до 4 баллов, что свидетельствует о издательских и управленческих проблемах редакции.

Журнал может получить более 100 баллов ICV благодаря критерию «Сила влияния», если он в настоящее время индексируется в базе данных ISI Web of Science и / или Scopus. Показатель состоит из следующих элементов:

• Цитирование журнала - рассчитывается на основе текущих показателей IF (Impact Factor) и SJR (SCImago Journal Rank),
• Динамика цитирования журналов - измеряется на основе изменений значений индекса IF и SJR, а также количества цитирований, определенных в базах Journal Citation Reports и Scimago Journal & Country Rank.

Проверка данных

Index Copernicus International собирает и обрабатывает подробную информацию о научных журналах со всего мира посредством ежегодных оценок. После того, как редакции отправят заполненную оценочную анкету, заявленная информация о журнале проверяется в три этапа. Первый из них носит системный характер - специально подготовленный алгоритм предназначен для указания того, какие из введенных данных могут быть неверными. Второй этап предполагает проверку информации, которая получила статус возможной ошибки. Данные, заявленные в актуальной анкете, сравниваются с данными предыдущих лет. Последним этапом является ручная проверка информации, то есть проверка, соответствуют ли она фактическому функционированию журнала. На данном этапе проверяются, среди прочего такие элементы как:

• надаются ли номера DOI статьям,
• используется ли электронная система публикации и редактирования,
• проводиться ли сбор статистики загрузок статей с сайта журнала,
• индексация в базах данных,
• публикация статей в режиме «ahead of print» / «early birds».

Предоставление недостоверной или неверной информации приводит к отказу в индексации журнала в базе данных ICI Journals Master List за определенный год. Журналы, которые не соответствуют стандартам оценки, не получают показатель ICV, но остаются полноправными владельцами паспорта в базе данных ICI World of Journals. Редакции могут обновлять данные журнала на постоянной основе, вводить опубликованные статьи и выслать анкету для оценки в следующем году.

Прозрачность редакционной деятельности

С 2017 года команда Index Copernicus решила заменить текущую экспертную оценку показателями прозрачности и прозрачности редакционной деятельности. Кроме того, оценивается прозрачность веб-сайтов журналов, а также полнота и актуальность информации об опубликованных статьях, размещенная в Паспорте журнала. Это действие было предпринято по двум причинам.

1. Программа подсчета цитирования
Index Copernicus является одним из немногих объектов в мире, который распознает сноски (библиографию) между объектами и, таким образом, машинным способом подсчитывает количество цитирований журналов, зарегистрированных в базах данных ICI. На основании библиографии, размещенной зарегистрированными журналами, были определены цитирования за 2010-2017 годы, последующие постоянно обновляются. В настоящее время ведутся работы по совершенствованию инструментов, и коэффициенты цитирования еще не включены в методологию оценки ICI Journals Master List (узнайте больше о проекте подсчета цитировани)

2. Политика противодействия практике «Predatory journals»
С 2017 года Index Copernicus внедрил в методологию оценки ICI Journals Master List политику противодействия использования практики «Predatory journals». Выявление научных изданий, которые используют такую практику, является одной из величайших задач, стоящих перед миром науки.

В качестве базового принципа противодействия практике «Predatory journals» был принят принцип прозрачности редакционной деятельности, заключающийся во внесении в базу данных ICI World of Journals полной информации о содержании отдельных выпусков (номеров), опубликованных в период 2016–2017 гг., минимум в виде:

• метаданных статьи (т. е. заголовки и аннотации на английском языке, ключевые слова, авторы и их аффиляция),
• списка библиографии.

(узнайте больше о политике противодействия практике „Predatory journals”).

Завершенный процесс оценки в базе данных ICI Journals Master List, обеспечение прозрачности практик и поддание журнала процессу проверки научным сообществом, увеличивает информацию о зарегистрированных научных изданях.

ICI Journals Master List - это международная база, в которой каждый год оцениваются периодические издания на протяжении почти 20 лет. Условием индексации является положительное прохождение многомерной параметрической оценки, основанной в настоящее время на более чем 100 критериях. Процесс оценки бесплатный и к нему могут приступить все зарегистрированные в базе данных ICI World of Journals научные издания. Периодические издания, которые соответствуют как формальным, так и предварительным условиям индексации, получают - действительный в течение 1 года индекс ICV (Index Copernicus Value), который отражает уровень развития журнала и его влияние на мир науки. Также стоит подчеркнуть, что база ICI Journals Master List - одна из немногих баз, которая проводит детальную оценку каждый год, это единственный польский мировой бренд в науке. Благодаря этому редакции, которые заботятся о непрерывности индексации, имеют возможность следовать многолетнему пути и динамике развития журнала.

Результат оценки - Index Copernicus Value ICV

Index Copernicus Value является показателем оценки научных изданий. Уникальный характер оценки ICV определяется тем фактом, что она позволяет ежегодно составлять список научных изданий со всего мира в пределах ICI Journals Master List и дает - в расширенной форме - конкретные указания относительно функциональных областей научного издания, которые должны быть улучшены для постоянного повышения уровня цитирования.

Показатель ICV был оценен, среди прочего, институциями государственного управления, научными подразделениями и другими субьектами, связанными с наукой. Показатель ICV используется в деятельности:

• издателей научных журналов - чтобы ознакомиться с оценкой данного научного журнала, узнать о его сильных и слабых сторонах, предпринять действия, которые помогут увеличить влияние журнала,
• научных работников - которые хотят получить информацию о том, в каких журналах публиковать научные статьи, а какие журналы стоит прочитать, чтобы получить достоверную информацию, необходимую для проведения научных исследований,
• научных подразделений, заинтересованных в получении информации о сильных и слабых сторонах журналов, опубликованных в данном научном подразделении, что важно при проведении периодической оценки научных сотрудников.

Таким образом, результат оценки в базе ICI Journals Master List - показатель Index Copernicus Value (ICV) - это показатель силы научного журнала - он говорит о том, насколько быстро журнал может достичь цели, то есть увеличить уровень цитирования статей, опубликованных в данном журнале. Чем выше значение ICV,  тем больше вероятность того, что журнал будет в будущем: 

• увеличивать цитируемость опубликованных статей,
• получать все более и более высокие оценки в рамках проводимых оценок журналов,
• получать все больше интересных рукописей с огромным потенциалом, которые будут замечены научным сообществом,
• привлекать признанных авторов и рецензентов.

Index Copernicus International – это международная платформа, которая занимается продвижением достижений науки, а также поддерживает национальное и международное сотрудничество между научными работниками, издательствами и научными организациями. Главными сферами деятельности Index Copernicus является популяризация, параметризация и коммерциализация науки. На основе авторских решений Index Copernicus создает программные инструменты для сбора, обработки и распространения информации о научных достижениях.

ICI Science Evaluation – это программное решение, позволяющее провести эстимацию научной категории Министерства Науки и Высшего Образования на основе информации о научных достижениях научной организации в соответствии с действующим законодательством. ICI Science Evaluation обеспечивает сбор, обработку и отчетность по этим данным. На основе собранной информации, которая постоянно проверяется и валидируется, возможен эвалюционный прогноз по субъекту Министерством Науки и Высшего Образования в сочетании с комплексным анализом в конце каждого полугодия. Система предусматривает также обмен данными с внешними системами и анализ вклада каждого отдельно взятого сотрудника в будущую оценку. Система обеспечивает накопление всех видов эвалюационных событий, которые принимают участие в оценке научной организации, проводимой Министерством науки и высшего образования.

Внедрение системы ICI Science Evaluation обеспечивает:

• сбор в одном месте всей информации о достижениях научной организации и отдельных ее работников. Эта информация может быть использована для автоматического заполнения анкеты научной организации, отчетов POL-on и в заявках на получения гранта. Система обеспечивает автоматическую отчетность перед Министерством науки и высшего образования, передачу данных в систему PBN Moduł Sprawozdawczy [отчетный модуль] в соответствии с существующими требованиями и сроками.

• проверку правильности и полноты информации о научных достижениях, что позволяет минимизировать вероятность пропуска или отклонения важных достижений в процессе эвалюации научных организаций Министерством науки и высшего образования или в процедуре получения гранта.

• эстимацию индексации отдельных научных достижений при эвалюации Министерства науки и высшего образования с использованием всегда актуальных и соответствующих действующему законодательству перечней (например, перечень индексируемых журналов) и алгоритмов.

• эстимацию научной категории, которую может получить научная организация при будущей эвалюации Министерства науки и высшего образования на основе научных достижений. Эстимация базируется на алгоритмах, разработанных экспертами Index Copernicus.

• мониторинг вклада каждого работника в оценку научной организации при эвалюации Министерства науки и высшего образования. Работа с системой позволяет выделить сферы научной деятельности, которые не приносят ожидаемых результатов, но потенциально могут быть улучшены. Доступны определенные отчеты с возможностью их распечатки.

• подготовку отчетов и тендерных заявок без лишнего стресса. Система ICI Science Evaluation позволяет генерировать готовые отчеты и сводки о научных достижениях для экспорта в системы POL-on, PBN и др.

• доступ к всегда актуальным перечням и алгоритмам. Все изменения в правилах параметризации науки, включая перечни индексируемых Министерством науки и высшего образования журналов, алгоритмы индексации отдельных достижений и алгоритмы эстимации незамедлительно имплементируются в системе ICI Science Evaluation.

• беспроблемную интеграцию с существующими компьютерными системами научной организации. Index Copernicus обеспечивает поддержку при импорте данных из других систем, включая техническую. Доступны также протоколы Webservice, обеспечивающие экспорт данных во внешние системы.

•  комплексную поддержку экспертов Index Copernicus. Эксперты с более чем пятилетним опытом эвалюации научных достижений (библиометрия, параметризация, оценка журналов и т.п.) всегда готовы помочь научным организациям. Любые проблемы пользователей решаются в текущем порядке.

Система ICI Science Evaluation доступна в форме Software as a Service (SaaS). Ее полное внедрение занимает от 2 до 6 недель (точный срок зависит от размера научной организации), а основная нагрузка ложится на ICI.