The social impact of the UOC's scientific output: a case study

Abstract

Les altmètriques, enteses com "the study and use of scholarly impact measures based on activity in online tools and environments" (Priem, Groth & Taraborelly, 2012), es presenten com possibles mètriques alternatives per analitzar l'impacte social de la recerca. Per aquest motiu, la UOC va decidir dur a terme durant el passat any 2018, una prova pilot per analitzar l'impacte social de la producció científica a les xarxes socials generalistes i acadèmiques. Es va utilitzar el programari lliure Webometric Analyst, que recopila dades provinents de les xarxes socials a partir del DOI dels articles científics gràcies a la integració de l'API gratuïta d'Altmetric.com. La prova pilot, s'ha centrat en tres eixos diferenciats: 1.Anàlisi de l'impacte social de la producció científica de la UOC a través d'una mostra d'articles extreta del Current Research Information System (CRIS) de la universitat, publicats en el període 2016-2017. Selecció dels indicadors altmètrics (lectors a Mendeley, piulades rebudes, Altmetric Attention Score, etc.) i de la metodologia a seguir per al posterior anàlisi. 2.Detecció dels possibles factors que afavoreixen la visibilitat de la producció científica a les xarxes socials. S'han creuat dades altmètriques amb les següents variables: accés obert de les publicacions; revistes situades a Q1/Q2 en els rànquings internacionals Journal Citation Reports de Clarivate Analytics o Scimago Journal Rank de Scopus; cites rebudes pels articles a Web of Science, Scopus o Google Scholar. 3.Posició de la UOC respecte a un univers estadístic comparatiu definit, és a dir, en relació a altres universitats a distància (nacionals i internacionals) de dimensions similars pel que fa al focus temàtic o a la dimensió de la seva producció científica. S'ha dut a terme una anàlisi estadístic normalitzat i s'han utilitzat com a font de dades Scopus i Altmetric.com.

Las altmétricas, entendidas como "the study and use of scholarly impact measures based on activity in online tools and environments" (Priem, Groth & Taraborelly, 2012), se presentan como posibles métricas alternativas para analizar el impacto social de la investigación. Por ese motivo, la UOC decidió llevar a cabo durante el pasado año 2018, una prueba piloto para analizar el impacto social de la producción científica que ocurre en las redes sociales generalistas y académicas. Para ello se ha utilizado el programa de software libre Webometric Analyst. Esta aplicación recopila datos de las redes sociales a partir del DOI de los artículos científicos gracias a la integración de la API gratuita ofrecida por Altmetric.com. La prueba piloto se ha realizado sobre tres ejes: 1. Análisis del impacto social de la producción científica de la UOC a través de una muestra de artículos extraída del Current Research Information System (CRIS) de la universidad, publicados en el período 2016-2017. Selección de los indicadores altmétricos (lectores en Mendeley, tweets recibidos, Altmetric Attention Score, etc.) y la metodología a llevar a cabo para su posterior análisis. 2 Detección de los posibles factores que favorecen la visibilidad de la producción científica en las redes sociales. Se han cruzado datos altmétricos con las siguientes variables: acceso abierto de las publicaciones; revistas situadas en Q1/Q2 en los rankings internacionales Journal Citation Reports de Clarivate Analytics o Scimago Journal Rank de Scopus; citas recibidas por los artículos en Web of Science, Scopus o Google Scholar. 3.Posición de la UOC respecto a un universo estadístico comparativo definido, es decir, en relación a otras universidades a distancia, tanto a nivel nacional como internacional de dimensiones similares por lo que respecta al foco temático o a la dimensión de su producción científica. Se ha llevado a cabo un análisis estadístico normalizado y se han utilizado como fuente de datos Scopus y Altmetric.com.

Altmetrics, seen as "the study and use of scholarly impact measures based on activity in online tools and environments" (Priem, Groth & Taraborelly, 2012), are presented as possible alternative metrics for analysing the social impact of research. Consequently, the UOC decided to run a pilot trial throughout 2018 to analyse the social impact of scientific output in general and academic social media. To achieve this, it used the free Webometric Analist. This application gathers the metrics data found on social media based on the DOI of scientific articles thanks to integration with the free API offered by Altmetric.com. The pilot trial was divided into three parts: 1.Analysis of the social impact of the UOC's scientific output through a sample of articles published in 2016-2017 taken from the University's Current Research Information System (CRIS). Selection of the altmetrics indicators (Mendeley readers, Tweets received, Altmetric Attention Score, etc.) and the methodology to be used for their subsequent analysis. 2.Detection of the possible factors that raise visibility of scientific output on social media. Altmetric data were crossed with the following variables: open access of publications; journals placed in Q1/Q2 in the Clarivate Analytics' Journal Citation Reports and Scopus' Scimago Journal Rank international rankings, and citations received by the articles on Web of Science, Scopus and Google Scholar. 3. The UOC's position compared with a defined comparative statistical universe, i.e. in relation to other distance universities, both in Spain and internationally. A standardized statistical analysis was conducted (taken into account differences between publication year, document type and subject category). Scopus and Altmetric.com were used as the data source of the sample analysed.