Современные наукометрические индикаторы и их...
TRANSCRIPT
![Page 1: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/1.jpg)
Использование современных наукометрических показателей
Павел КасьяновМарт 2017
При проведении научных исследований и оценке их результативности
![Page 2: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/2.jpg)
2
О чём пойдёт речь
•Это – не формальный тренинг по использованию Web of Science
•Наукометрические показатели: от базовых индикаторов до современных
•Для чего и как можно использовать эти показатели
•Где их необходимо использовать с осторожностью или не использовать вовсе
![Page 3: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/3.jpg)
3
Индекс цитирования: определение
![Page 4: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/4.jpg)
4
Индекс цитирования: как не надо употреблять этот термин
В наукометрии не существует такого показателя, как индекс цитирования или индекс цитируемости
![Page 5: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/5.jpg)
5
Ещё раз: указатель научных ссылок VS показатели цитирования
•Индекс цитирования – база данных, учитывающая цитируемость статей на основе пристатейных списков используемой литературы. Она предоставляет также данные по показателям цитируемости.
•А показатели цитируемости бывают разными
![Page 6: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/6.jpg)
Базовые наукометрические показатели
Web of Science Core Collection
![Page 7: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/7.jpg)
7
Показатели Web of Science Core Collection
![Page 8: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/8.jpg)
8
Показатели Web of Science Core Collection
•Количество публикаций•Суммарная цитируемость•Суммарная цитируемость
за вычетом самоцитирования
•Средняя цитируемость одной статьи
•Индекс Хирша
![Page 9: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/9.jpg)
9
Количество публикаций
•Показатель научной производительности
•Сколько было проведено исследований, закончившихся публикацией в одном из ведущих международных научных журналов?
•Кого можно оценить: автор, группа авторов, организация, государство, журнал и т.д.
•В разных предметных областях - разные темпы опубликования новых статей
•Показатель можно оценить в динамике
•Значение показателя зависит от размера научной организации
![Page 10: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/10.jpg)
10
Суммарная цитируемость
•Показатель научной влиятельности или авторитетности
•Насколько сильно исследования оцениваемого автора или организации повлияли на контекст последующих научных исследований?
•Кого можно оценить: автор, группа авторов, организация и т.д.
•В разных предметных областях - разные размеры пристатейной библиографии
•Цитируемость накапливается с годами
•Значение индикатора зависит от размера научной организации
![Page 11: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/11.jpg)
11
Суммарная цитируемость в разбивке по годам - InCites
![Page 12: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/12.jpg)
12
Самоцитирование
•Само по себе не является чем-то криминальным
•Зачастую невозможно не ссылаться на свои предыдущие исследования, особенно если автор последовательно занимается развитием определённой проблемы или теории
•20-30% самоцитирования – вполне приемлемо
![Page 13: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/13.jpg)
13
Средняя цитируемость
•Показатель научной результативности
•Насколько сильное влияние оказывает на ход последующих научных исследований одна наша работа?
•Кого можно оценить: автор, группа авторов, организация
•В разных предметных областях - разные средние показатели цитируемости
•Цитируемость накапливается с годами
•Значение показателя едва ли целесообразно оценивать в динамике
•Значение показателя не зависит от размера организации
=
![Page 14: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/14.jpg)
14
Средняя цитируемость в InCites и её наукометрический смысл
![Page 15: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/15.jpg)
15
Индекс Хирша
Публикации Цитируемость1 1282 643 324 165 86 47 28 19 010 0
H=5
![Page 16: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/16.jpg)
16
Индекс Хирша
•Как и суммарная цитируемость, является показателем научной авторитетности
•Показывает число действительно важных – в масштабах деятельности рассматриваемого автора/организации – публикаций
•Подвержен влиянию тех же неоднородностей цитирования в разных предметных областях, годах и типах документов
![Page 17: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/17.jpg)
17
Web of Science как инструмент оценки результативности научной деятельности
Суммарная цитируемость, средняя цитируемость: это
высокий или низкий показатель?
Цитирование статей накапливается с годами; означает
ли это, что статьи организации начинают цитироваться лучше?
![Page 18: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/18.jpg)
Продвинутые наукометрические показатели
InCites
![Page 19: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/19.jpg)
19
Нормализованная средняя цитируемость
NCIпубликации=Цитируемость публикации
NCIгруппы публикаций=NCI1+ NCI2 +...+ NCIN
N
NCIпубликации > 1: исследование цитируется лучше среднемирового уровня
NCIпубликации < 1: исследование цитируется хуже среднемирового уровня
Средняя цитируемость всех публикаций того же типа, опубликованных в том же году и в той же предметной области
![Page 20: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/20.jpg)
20
Для России этот показатель стремительно растёт последние годы, но пока так и не превысил среднемирового значения
![Page 21: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/21.jpg)
21
Сопоставление ведущих университетов первой волны проекта 5-100 по этому показателю
![Page 22: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/22.jpg)
22
Пять наиболее популярных в ИТМО предметных областей (по количеству публикаций в Web of Science Core Collection)
![Page 23: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/23.jpg)
23
Нормализованная цитируемость публикаций по этим предметным областям
![Page 24: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/24.jpg)
24
Нормализованная средняя цитируемость
•Как и ненормализованная, является показателем результативности научных исследований
•Идеально подходит для сопоставления «физиков» с «лириками»
•Подходит для анализа в динамике по стране или организации
•Для анализа результативности работы конкретного учёного желательно анализировать не значения этого показателя для конкретных годов, а брать скользящее среднее за 5 лет
•Значение показателя для организации не зависит от её размера
•Использовать этот показатель при анализе публикаций за последний год необходимо крайне осторожно
![Page 25: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/25.jpg)
25
Количество высокоцитируемых публикаций
•Высокоцитируемые статьи – документы, опубликованные в течение последних 10 лет и попавшие в 1% наиболее цитируемых для своей предметной области и года публикации
•Их конечное количество. Их можно изучить вручную, чтобы понять, кто их авторы и почему они так хорошо цитируются
•Они показывают объём действительно прорывных исследований университета.
•Рейтинг ARWU: 20% вашей позиции в этом рейтинге – это количество высокоцитируемых публикаций
![Page 26: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/26.jpg)
26
Почему ещё это так важно?
1. Исследовательские фронты – то, о чём мы рассказывали на предыдущей нашей встрече
2. Предсказания лауреатов Нобелевской премии (43 правильных прогноза с 2002 года)
3. Наша собственная награда Citation Awards – более прозрачного критерия попросту не существует!
![Page 27: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/27.jpg)
27
http://hcr.stateofinnovation.com
Ещё немного о высокоцитируемых учёных
![Page 28: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/28.jpg)
28
Высокоцитируемые учёные из России
http://hcr.stateofinnovation.com
![Page 29: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/29.jpg)
29
![Page 30: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/30.jpg)
30
http://stateofinnovation.com/world-class-universities-understanding-the-attributes-pursuing-the-stature
Количество высокоцитируемых авторов в ведущих организациях мира
![Page 31: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/31.jpg)
31
Количество высокоцитируемых публикаций у университетов первой волны 5-100
![Page 32: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/32.jpg)
32
Две самых свежих высокоцитируемых публикации ИТМО
![Page 33: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/33.jpg)
33
Проверка на злоупотребление самоцитируемостью
![Page 34: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/34.jpg)
34
• Замечательный показатель количества действительно прорывных исследований
• Чувствителен к размеру организации• Можно анализировать в динамике, но только за последние 10 лет
(что следует из методологии расчёта)• Может быть подвержен манипулированию за счёт
самоцитирования (но таким образом учёный может испортить себе академическую репутацию)
Количество высокоцитируемых публикаций
![Page 35: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/35.jpg)
35
• Поскольку Web of Science индексирует каждого автора статьи и каждую аффилиацию, мы можем проводить анализ сотрудничества
• Статьи, написанные в международном соавторстве, как правило, цитируются лучше, чем статьи, написанные в соавторстве внутри страны – это характерно как для России, так и для высокоцитируемых стран
Показатели сотрудничества
![Page 36: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/36.jpg)
36
Масштабы совместных исследований Университета ИТМО
![Page 37: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/37.jpg)
37
Какие из этих совместных проектов были наиболее результативными?
![Page 38: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/38.jpg)
38
• Показатель авторитетности и влиятельности журнала• Необходим для выбора издания для опубликования работы• В силу понятности и доступности показателя, часто предпринимаются
попытки использовать импакт-фактор в качестве критерия оценки качества научной деятельности
• Мы настоятельно не рекомендуем так делать!
Импакт-фактор журнала
![Page 39: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/39.jpg)
39
Распределение цитируемости в одном журнале с импакт-фактором около 1
![Page 40: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/40.jpg)
40
Зависимость между цитируемостью работ ИТМО, опубликованных в тех или иных журналах, от импакт-фактора журнала
![Page 41: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/41.jpg)
41
• Цитируемость, нормализованная по журналу• Процент работ, попавших в 1% наиболее цитируемых• Процент работ, попавших в 10% наиболее цитируемых• Нормализованная суммарная цитируемость• Среднее количество авторов на документ• Среднее количество организаций на документ• Процент статей, опубликованных в международном соавторстве• Индикаторы, переосмысливающие индекс Хирша (наприемр, G-index)• Fractional counting• и т.д.
Какие ещё бывают индикаторы
![Page 42: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/42.jpg)
42
Наше руководство по наукометрии
Доступно для скачивания здесь
![Page 43: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/43.jpg)
43
В заключение
• Два показателя, которых достаточно для огромного количества поверхностных оценок:
• Количество публикаций (производительность)• Нормализованная цитируемость (эффективность исследований)
• Для частных случаев существуют десятки дополнительных индикаторов
• И Юджин Гарфилд, и мы, и даже критики наукометрии – все сходятся в одном: важна экспертная оценка и грамотная интерпретация наукометрических показателей
![Page 44: Современные наукометрические индикаторы и их использование при проведении научных исследований](https://reader035.vdocuments.mx/reader035/viewer/2022062316/58edddbc1a28ab4c5e8b4611/html5/thumbnails/44.jpg)
Павел Касьянов, эксперт по наукометрии| [email protected] | clarivate.com