Measuring the Digital Skills of Catalan Health Care Professionals as a Key Step Toward a Strategic Training Plan: Digital Competence Test Validation Study

Abstract

Background: Despite Catalonia being an advanced region in terms of digital health adoption, the “Forum for Professional Dialogue” identified the need to improve information and communication technology (ICT) competences as one of the present and future challenges for health care professionals (HPs). Objective: We aimed to validate the digital competence test developed ad hoc for this study and to measure the digital competence level of Catalan HPs to establish their current level as the baseline for designing a strategic training plan. Methods: An exploratory observational study was conducted based on a voluntary survey where sociodemographic, professional and digital tool knowledge, digital tool use, and training needs data were collected and based on the score obtained from a digital competence test developed ad hoc. The digital competence test consisted of 2 “real-life scenarios” with 7 and 11 questions. Results: In total, 803 HPs, of whom 612 (76.2%) were women, completed the survey between June 28 and July 16, 2021. Most participants self-rated their digital competence level as either intermediate (384/803, 47.8%) or basic (357/803, 44.5%). The mean score in the digital competence test was 22.6 (SD 4.3). Therefore, most participants displayed a basic level of digital competence. The internal consistency of the digital competence test was 0.66, and the discrimination index of all questions was ≥0.2 for all items except for 1 question. Conclusions: This exploratory study highlights the need to improve the digital competence of HPs working in Catalonia, with special effort being made to provide training according to the specific needs of the different HP profiles. The results have informed the Health Plan for Catalonia 2021-2025 and lay the foundations for the development and deployment of a framework program for the digital competences of HPs. The developed digital competence test shows acceptable consistency for the objective pursued, although improvements are needed to fine-tune its accuracy.

Antecedentes: A pesar de que Cataluña es una región avanzada en cuanto a la adopción de la salud digital, el “Foro de Diálogo Profesional” identificó la necesidad de mejorar las competencias en tecnologías de la información y la comunicación (TIC) como uno de los retos presentes y futuros de los profesionales sanitarios (PS) . Objetivo: Nuestro objetivo era validar el test de competencia digital desarrollado ad hoc para este estudio y medir el nivel de competencia digital de los PS catalanes para establecer su nivel actual como base para diseñar un plan estratégico de formación. Métodos: Se realizó un estudio observacional exploratorio a partir de una encuesta voluntaria donde se recogieron datos sociodemográficos, profesionales y de conocimiento de herramientas digitales, uso de herramientas digitales y necesidades de formación a partir de la puntuación obtenida en un test de competencia digital desarrollado ad hoc. La prueba de competencia digital constaba de 2 “escenarios de la vida real” con 7 y 11 preguntas. Resultados: En total, 803 PS, de los cuales 612 (76,2%) fueron mujeres, completaron la encuesta entre el 28 de junio y el 16 de julio de 2021. La mayoría los participantes calificaron su nivel de competencia digital como intermedio (384/803, 47,8%) o básico (357/803, 44,5%). La puntuación media en la prueba de competencia digital fue de 22,6 (DE 4,3). Por lo tanto, la mayoría de los participantes mostró un nivel básico de competencia digital. La consistencia interna de la prueba de competencia digital fue de 0,66, y el índice de discriminación de todas las preguntas fue ≥0,2 para todos artículos excepto 1 pregunta. Conclusiones: Este estudio exploratorio pone de manifiesto la necesidad de mejorar la competencia digital de los PS que trabajan en Cataluña, poniendo especial empeño en impartir formación acorde a las necesidades específicas de los diferentes perfiles de HP. Los resultados han informado el Plan de Salud de Cataluña 2021-2025 y sientan las bases para el desarrollo y despliegue de un programa marco de competencias digitales de los PS. La prueba de competencia digital desarrollada muestra una consistencia aceptable para el objetivo perseguido, aunque se necesitan mejoras para afinar su precisión.

Antecedents: Tot i que Catalunya és una regió avançada en l'adopció de la salut digital, el “Fòrum de Diàleg Professional” va identificar la necessitat de millorar les competències en tecnologies de la informació i la comunicació (TIC) com un dels reptes presents i futurs dels professionals de la salut (PS). . Objectiu: El nostre objectiu és validar la prova de competència digital desenvolupada ad hoc per a aquest estudi i mesurar el nivell de competència digital dels HP catalans per establir el seu nivell actual com a base per dissenyar un pla estratègic de formació. Mètodes: Es va realitzar un estudi observacional exploratori a partir d'una enquesta voluntària on es van recollir dades de coneixement sociodemogràfic, d'eines professionals i digitals, d'ús d'eines digitals i de necessitats formatives i a partir de la puntuació obtinguda d'una prova de competència digital desenvolupada ad hoc. La prova de competència digital constava de 2 "escenaris de la vida real" amb 7 i 11 preguntes. Resultats: En total, 803 HP, dels quals 612 (76,2%) eren dones, van completar l'enquesta entre el 28 de juny i el 16 de juliol de 2021. La majoria els participants van autovalorar el seu nivell de competència digital com a mitjà (384/803, 47,8%) o bàsic (357/803, 44,5%). La puntuació mitjana a la prova de competència digital va ser de 22,6 (DE 4,3). Per tant, la majoria dels participants van mostrar un nivell bàsic de competència digital. La consistència interna de la prova de competència digital va ser de 0,66 i l'índex de discriminació de totes les preguntes va ser ≥0,2 per a totes. ítems excepte 1 pregunta. Conclusions: Aquest estudi exploratori posa de manifest la necessitat de millorar la competència digital dels HP que treballen a Catalunya, fent un especial esforç per impartir formació segons les necessitats específiques dels diferents perfils d'HP. Els resultats han informat el Pla de Salut de Catalunya 2021-2025 i han posat les bases per al desenvolupament i el desplegament d'un programa marc per a les competències digitals dels HP. La prova de competència digital desenvolupada mostra una coherència acceptable per a l'objectiu perseguit, tot i que calen millores per ajustar-ne la precisió.