altmetrics y el impacto en la producción científica

Altmetrics y el impacto en la producción científica

II Conferencia sobre Bibliotecas CientíficasAcceso Abierto y medición

del impacto de la investigación

Agosto, 2016Lima, Perú

Libio HuarotoDirección de Gestión del Conocimiento

Apoyo a la Producción IntelectualUniversidad Peruana de Ciencias Aplicadas (UPC)

Temario

• Estado actual• Definición• Revisión de literatura• Herramientas• Repositorios Institucionales• Caso de la Universidad Peruana de

Ciencias Aplicadas - UPC• Comentarios

Estado actual Altmetrics

Indicadores

A nivel revistas A nivel artículo A nivel autor

Bookmetrics

InflumetricsScienciometrics 2.0

Indicadores

Plataforms:

•Bookmarking•Reference manager•Recomendation services•Comments on articles•Microblogging•Wikipedia•Blooging

Data Level Metrics

Informetrics

Indicadores

• Retraso en la evaluación de los resultados de investigación para ser publicados en una revista

• De 02 a 05 años para obtener los factores de impacto

• Posibles manipulaciones en el recuento de citas

• Exceso de autocitas o citación de común acuerdo con otros autores

Problemas de los sistema de medición clásicosFactor de impacto (FI), Índice de inmediatez (II), SCImago Journal Rank (SJR), otros.

Definición Altmetrics

Definición Altmetrics

Historia

2014

Altmetrics en números

Figure 1. Research publications indexed in Thomson Reuters Web of ScienceTM that are mentioned at least once in Altmetric data. The database expanded over the period but the share of mentioned documents has grown faster (data and analysis: CWTS, University of Leiden).

Google Trends

Fuente: Google Trends Julio, 2016

Altmetrics

Altmetrics y Bibliometrics

Metricas para LibrosBookmetrixhttp://www.bookmetrix.com/

•Desarrollado por Springer y Altmetrics (Abril 2015)

•Plataforma que permite evaluar los libros y capítulos de libros a través de las redes sociales.

•Utiliza el ISBN como identificador para el SCORE Altmetrics

http://www.springer.com/us/ book/9783642248252

Citations Readers

Altmetrics – Citaciones Scopus

Fuente: Altmetric.com

Altmetrics – Data Level Metrics

Fuente: http://mdc.lagotto.io/

Proyecto desarrollado en conjunto por:

•The California Digital Library (University of California)•PLOS•DataONE

•Financiado por National Science Foundation (USA) 2014-2015

•Objetivo: rastrear y medir el uso de los datos

http://profiles.ucsf.edu/eric.small

Altmetrics – Perfiles usuarios

NISO – AltmetricsNISO RP-25-201x-2CAlternative Outputs in Scholarly CommunicationsFor public review and comment from May 13 – June 11, 2016

NISO RP-25-201x-2AAlternative Outputs in Scholarly Communications: Data MetricsFor public review and comment from May 13 – June 11, 2016

NISO RP-25-201x-2BPersistent Identifiers in Scholarly CommunicationsFor public review and comment from May 13 – June 11, 2016

NISO RP-25-201x-1Altmetrics Definitions and Use CasesFor public review and comment from March 22 – April 20, 2016

Fuente: NISO, Julio 2016

Altmetrics – Sistema de Descubrimientos

Instituto Politécnico y Universidad Estatal de Virginia (Virginia Tech) Producto: Summons

Altmetrics – Sistema de Descubrimientos

Pontificia Universidad Católica del Perú (PUCP)

Revisión de artículos: Redes sociales

Twitter

Fuente: Holmberg, K., & Thelwall, M. (2014)

Fuente: Ehsan Mohammadi, Mike Thelwall, Stefanie Haustein; Vincent Larivière (2015)

Revisión de artículos: Mendeley y WoS

Fuente: Ehsan Mohammadi and Mike Thelwall (2014)

Blogs científicos

Fuente: Fausto, S., Machado, F. A., Bento, L. F. J., Iamarino, A., Nahas, T. R., & Munger, D. S. (2012)

19,000 RB posts citados y 26,154 enlaces a los artículos científicos publicados en 3,350 diferentes revistas.

Figure 4 Research Blogging posts and citations

Figure 8 Relationship between RB Total Views and Citations

http://researchblogging.org/

Revisión de artículos: Datos

Fuente: Isabella Peters , Peter Kraker , Elisabeth Lex , Christian Gumpenberger , and Juan Gorraiz (2015)

Altmetrics – Caso de estudios

University of Cambrige

University of Manchester

Duke university

http://readermeter.org/

ReaderMeter servicio web que rastrea el número de lectores Mendeley de todos los artículos de un autor en particular. (2010)

Herramientas Altmetrics

https://impactstory.org

Impactstory se inició como “total impact”, desarrollado en el marco de un evento académico (Hackathon, 2011)

ScienceCard se inicio en Londres, en el marco de un evento académico en línea (Septiembre, 2011). Actualmente se incorporó en el buscador de Microsoft Search Engine

http://www.peerevaluation.org

Peer Evaluation, plataforma de acceso libre que permite realizar procesos de revisión por pares. Permite al investigador visibilizar su trabajo y medir el impacto de sus investigaciones.

http://www.papercritic.com/

PaperCritic, permite a los investigadores monitorear los comentarios que recibe su trabajo, asi mismo, evaluar los trabajo de otros colegas, es una plataforma de acceso abierto.

• Se Inicia en Febrero 2012. Euan Adle creador de la empresa Altmetric.com

• Utiliza identificador para mostrar indicadores (DOI, Handle, PMID, ArXiv Ids, ORCID)

• Denominación de la herramienta: Altmetric Explorer • Altmetrics for institutions• API para implementación

• Credo por Andrea Michale y Mike Buschman (2012)• EBSCO adquiere los derechos (2014)• Recopila más de 25 servicios de redes sociales.• Incluye perfiles de usuarios

• Se implementa en 2009 Altricle Level Metrics (ALM) por PLOS

• Mide el rendimiento general y alcance de los artículos de investigación publicados por PLOS

• PLOS cuenta con Altmetrics Collection, es libre (API)• Open Journal System (OJS) incorpora ALM

Herramientas Altmetrics

Altmetrics y Repositorios Institucionales

Ranking web de Repositorios (Webometrics) incorpora Altmetrics como indicador de evaluación (Enero, 2014)

Otras Universidades•University of Pittsburgh ULS (Plum Analytics)•Cold Spring Harbor Laboratory (Altmetrics Explorer)•University of Michigan (Altmetr4ics Explorer)•Universidad Politécnica de Cataluña•Universidad de Alcalá2

Altmetrics in Institutional Repositories: New Perspectives for Assessing Research Impact Salima Rehemtula; Maria de Lurdes Rosa; Paulo Leitão; Rosario Arquero Avilés(Libraries in the Digital Age (LIDA) Proceedings 2014)

Altmetrics y Repositorios de Tesis (ETD´s)

EXPLORING ALTMETRICS FOR ETDsCharles J Greenberg; Sangeeta Narang; Sebanti Sengupta

New Delhi, India Nov. 2015 ETD2015

Fuente: Charles J Greenberg; Sangeeta Narang; Sebanti Sengupta (2015)

Fuente: Charles J Greenberg; Sangeeta Narang; Sebanti Sengupta (2015)

Altmetrics y Repositorios Institucionales

Repositorio Institucional de la Universidad del Rosario – Colombia. Plum Analytics (2015)

SciELO Brasil incorpora Altmetrics Explorer (Agosto. 2015)

ALICIA - Consejo Nacional de Ciencia, Tecnología e Innovación Tecnológica - Plum Analytics (2015)

Repositorio Académico de la Universidad Peruana de Ciencias Aplicadas (UPC) – Altmetric Explorer (Enero, 2015)

• Implementación en Enero 2015• Utiliza el logotipo “Donuts”• Versión gratuita (Repositorio

Institucional)• Visualización a través del metadato de

registro• Utiliza identificadores para recopilar

información (DOI, Handle, URL, PMID, otros)

• Presenta una puntuación SCORE Altmetrics

Altmetrics Explorer

Altmetrics – Repositorio Académico UPC

Altmetrics “SCORE”La puntuación de «Altmetric.com» se calculada automáticamente, por conteo ponderado en función de la atención recibida en 3 factores principales:

1.Volumen. Número de menciones. 2.Fuente. Cada categoría es puntuada de diferente forma. Por ejemplo puntúa más la mención en un artículo de prensa que en un blog. 3.Autores. Puntúa en función de la categoría del autor que haya hecho la medición, o en que revista se haya hecho en función de su impacto o audiencia.

Altmetrics – Repositorio Académico UPC

Altmetrics – Repositorio Académico UPC

Altmetrics – Repositorio Académico UPC

Fuente: Repositorio Académico UPC (Julio 2016)

En Julio 2016 se identificó actividad Altmetrics en :

•Casas editoriales• PLOS, Elsevier• JAMA• Biomed Central• Willey

•Sociedades Científicas• Society for General

Microbiology• American Medical Association

(JAMA)• Instituto Materno Infantil de

Pernambuco• The American Society of

Tropical Medicine and Hygiene

Trabajos previos (2014-2015) mostraron mayor actividad en

• Artículos originales, seguido por cartas al editor, tesis, reportes, libros y capítulos de libros.

• Identificador DOI• Idioma español e inglés• Los documentos más

actuales• Mendeley, Twitter y News

outlet

Fuente: Liliana Eléspuru; Libio Huaroto (2014-2015)

Altmetrics – Repositorio Académico UPC

https://arxiv.org/abs/1603.07992 Marzo, 2016

n=371

De 371 artículos revisados, 87 presentan actividad AltmetricFuente: Repositorio Académico UPC. Julio 2016

Artículos científicos en la Facultad de Ciencias de la Salud - UPC

TOP 100 Articles 2015 Altmetric

Altmetrics – Repositorio Académico UPC

TOP Article Altmetrics Elsevier

https://www.altmetric.com/top100/2015/ http://www.journals.elsevier.com/american-heart-journal/altmetric-articles/

Nro Articulos SCORE ALTMETRICS

1Cannabinoids for Medical Use A Systematic Review and Meta-analysis

2Association between Facebook Dependence and Poor Sleep Quality: A Study in a Sample of Undergraduate Students in Peru

3Postoperative Complications in Patients with Unrecognized Obesity Hypoventilation Syndrome Undergoing Elective Non-cardiac Surgery

4Reducing salt in bread: a quasi-experimental feasibility study in a bakery in Lima, Peru

5Is it the creatine or the anabolic androgenic steroids? Need for assessing the steroids role in testicular cancerAUTOR :

TOP 05 Artículos - Julio 2016

Fuente: Repositorio Académico UPC (Julio 2016)

Altmetrics – Repositorio Académico UPC

Fuente: Web of Science, (Julio 2016)

Altmetrics – Repositorio Académico UPC

Antonio Bernabe-OrtizTotal artículos = 11Citas recibidas = 30Índice H = 3

Citas cada añoElementos publicados cada añoAdrian Hernandez V.Total artículos = 37Citas recibidas = 143Índice H = 7

Edward Mezones HolguinTotal artículos = 15Citas recibidas = 66Índice H = 5

Nro Revistas Casa Editorial1 PLoS ONE Plos2 Fertility and Sterility Elsevier B.V.3 Contemporary Clinical Trials Elsevier B.V.4 International Society for Infectious Diseases Elsevier B.V.5 Maturitas Elsevier B.V.6 Journal of the American Medical Association (JAMA) American Medical Association7 American Journal of Tropical Medicine and Hygiene The American Society of Tropical Medicine and Hygiene8 Asian Pacific journal of tropical medicine. Elsevier B.V.9 Thrombosis Research Elsevier B.V.

10 Journal of Medical Microbiology Society for General Microbiology11 Revista Brasileira de Saúde Materno Infantil Instituto Materno Infantil de Pernambuco12 BMC Psychiatry Biomed Central Ltd13 Nucleic Acids Research Oxford University Press14 Vaccine Elsevier B.V.15 BMC Pregnancy and Childbirth Biomed Central Ltd16 Clinical genetics John Wiley & Sons, Inc.17 The Lancet Elsevier B.V.18 Travel Medicine and Infectious Disease Elsevier B.V.19 Microscopy research and technique John Wiley & Sons, Inc.20 The Scientific World Journal Hindawi Publishing Corporation21 Blood transfusion Italian Society of Transfusion Medicine and Immunohaematology (SIMTI)22 Infection control and hospital epidemiology Cambridge University Press

Publicaciones científicas con mayor actividad Altmetrics según Mendeley

Fuente: Repositorio Académico UPC (Julio 2016)

Altmetrics – Repositorio Académico UPC

Fuente: Repositorio Académico UPC (Julio 2016)

Altmetrics – Repositorio Académico UPCSo far, Altmetric has seen 667 tweets from 568 users, with an upper bound of 1,299,575 followers

• Se requiere de mayores mecanismos para evidenciar el impacto social de Altmetrics

• Incremento de la literatura sobre el impacto en la investigación científica.

• Repositorios Institucionales son una vía para evidenciar el impacto científico y social que sigue Altmetrics.

• Se requiere de mayores estudios para conocer:• ¿cómo los usuarios están utilizando las

herramientas de Altmetrics?• ¿Qué tipo de usuarios además de los

académicos, están utilizando la literatura?

Conclusiones

• Eysenbach, G. (2011). Can tweets predict citations? Metrics of social impact based on Twitter and correlation with traditional metrics of scientific impact. Journal of Medical Internet Research, 13(4). http://doi.org/10.2196/jmir.2041

• Fausto, S., Machado, F. A., Bento, L. F. J., Iamarino, A., Nahas, T. R., & Munger, D. S. (2012). Research Blogging: Indexing and Registering the Change in Science 2.0. PLoS ONE, 7(12). http://doi.org/10.1371/journal.pone.0050109

• Holmberg, K., & Thelwall, M. (2014). Disciplinary differences in Twitter scholarly communication. Scientometrics, 1–16. http://doi.org/10.1007/s11192-014-1229-3

• McKerlich, R., Ives, C., & McGreal, R. (2013). Measuring use and creation of open educational resources in higher education. International Review of Research in Open and Distance Learning, 14(4), 90–103. http://doi.org/10.1002/asi

• McKerlich, R., Ives, C., & McGreal, R. (2013). Measuring use and creation of open educational resources in higher education. International Review of Research in Open and Distance Learning, 14(4), 90–103. http://doi.org/10.1002/asi

• Zahedi, Z., Costas, R., & Wouters, P. (2013). How well developed are altmetrics ? A cross-disciplinary analysis of the presence of, (Haustein 2010), 1–16. http://doi.org/10.1007/s11192-014-1264-0

• Alonso-arévalo, J. (2016). Altmetrics can not remain a alternative for a long time. Revista ORL, 7(3), xx–xx. http://doi.org/10.14201/orl201673.14190

Referencias bibliográficas

Muchas gracias