Validation of an abbreviated scale to evaluate management in health organizations
Keywords:
health surveys, health management, psychometrics, validation study.Abstract
Introduction: Management in healthcare organizations enables the competitive performance of healthcare institutions; therefore, it requires constant monitoring with valid and reliable instruments.Objective: To validate a scale to evaluate management in health care organizations, according to the perception of health care workers.
Methods: Instrumental study, in which 302 health workers from hospitals and primary care centers in a health region of Peru participated. The process included content validation by expert judgment and pilot testing. construct validity was assessed by exploratory factor analysis and fit was assessed by confirmatory factor analysis, which included different estimation methods. Discriminant, predictive and reliability validity were analyzed.
Results: A short version of 8 items grouped in a single general factor was obtained, which explained 55.88% of the total variance; the model has adequate goodness-of-fit indices independently of the estimation method used. The variability indexes of the items were excellent; the discriminative and predictive validity were satisfactory. The internal consistency with McDonald's omega (ω= 0.892), Cronbach's alpha (α= 0.892) and Gutmann (λ6= 0.887), revealed optimal reliability values.
Conclusions: The scale for evaluating management in healthcare organizations has adequate metric properties.
Downloads
Download data is not yet available.
References
1. Real-Delor R. Satisfacción con la atención y calidad de vida de los usuarios de una Unidad de Salud Familiar de Paraguay en 2022 [Internet]. Rev. salud publica Parag. 2023; 13(1): 27-34. DOI: 10.18004/rspp.2023.abril.04
2. Espinoza-Portilla E, Gil-Quevedo W, Agurto-Távara E. Principales problemas en la gestión de establecimientos de salud en el Perú [Internet]. Rev Cubana Salud Pública. 2020 [acceso: 20/11/2023]; 46(4):e2146. Disponible en: http://scielo.sld.cu/scielo.php?script=sci_arttext&pid=S0864-34662020000400012&lng=es
3. del-Río-Mendoza J, Becerra-Canales B, Montalvo-del Río J. Reclamos de los usuarios externos en un hospital general del Perú [Internet]. Rev Méd Electrón. 2022 [acceso: 06/07/2024]; 44(1): 1-12. Disponible en: https://revmedicaelectronica.sld.cu/index.php/rme/article/view/4355
4. Corpancho J, Alcalá C, Rojas E. Competencias gerenciales en los establecimientos de salud de Lima en el año 2022 [Internet]. Regunt. 2023; 2(2): 9-19. DOI: 10.18050/regunt.v2i2.01
5. Ministerio de Salud, Dirección General de Salud de las Personas. Plan nacional de fortalecimiento del primer nivel de atención 2011-2021[Internet]. Perú: Ministerio de Salud; 2011. [acceso: 22/11/2023]. Disponible en: http://bvs.minsa.gob.pe/local/MINSA/1620.pdf
6. Mabuchi S, Alonge O, Tsugawa Y, Bennett S. Measuring management practices in primary health care facilities - development and validation of management practices scorecard in Nigeria [Internet]. Glob Health Action. 2020; 13(1):1763078. DOI: 10.1080/16549716.2020.1763078
7. Ramírez-Pérez J, López-Torres V, Ramírez-Pérez A, Morejón-Valdés M. Fiabilidad y validez de un instrumento de medición del desempeño competitivo de las instituciones de salud mediante las tecnologías de la información y la comunicación [Internet]. CienciaUAT. 2022; 16(2):97-113. DOI: 10.29059/cienciauat.v16i2.1539
8. Salarvand A, Khoshvaghti A, Sharififar S, Jame SZB, Markazi-Moghaddam N, Zareiyan A. Hospital Performance Evaluation Checklist in Context of COVID-19 Pandemic: Design and Validation [Internet]. Disaster Med Public Health Prep. 2023; 17: e570. DOI: 10.1017/dmp.2023.220
9. Becerra-Canales B. Evaluación de la atención primaria durante la pandemia por COVID-19, en una región del Perú [Internet]. Enferm glob. 2023; 22(69):283-308. DOI: 10.6018/eglobal.521201
10. Supo J. Validación de instrumentos de medición documentales, curso en vídeo para descarga inmediata [Internet]. Arequipa-Perú: Bioestadistico EIRL© 2010 - 2016. [acceso: 02/11/2023]; [aprox. 1 pantalla]. Disponible en: https://validaciondeinstrumentos.com/carta
11. Roco A, Hernandez M, Silva O. ¿Cuál es el tamaño muestral adecuado para validar un cuestionario? [Internet]. Nutr Hosp. 2021; 38(4):877-8. DOI: 10.20960/nh.03633
12. Becerra-Canales BD, Del Rio-Mendoza JR. Gestión sanitaria durante la pandemia por COVID-19, en un hospital general. Estudio preliminar [Internet]. Rev Méd Panacea. 2020; 10(1):38-43. DOI: 10.35563/rmp.v10i1.403
13. Instituto Nacional de Estadística e Informática. Encuesta Nacional de Satisfacción de Usuarios en Salud 2016 [Internet]. 2016. [acceso: 02/11/2023]. Disponible en: https://www.gob.pe/institucion/inei/informes-publicaciones/3355216-encuesta-nacional-de-satisfaccion-de-usuarios-en-salud-2016
14. Ebel R, Frisbie D. Essentials of Education Measurement. Englewood Cliffs, NJ: Prentice Hall. 1986.
15. Trejos-Herrera A, Bahamón M, Alarcón-Vásquez Y, Vinaccia S, González O, Quevedo-Barrios D, et al. Validación de las propiedades psicométricas de la Escala de Personalidad Tipo D en adultos colombianos [Internet]. Acta Colombiana de Psicología. 2023; 26(2):128-40. DOI: 10.14718/ACP.2023.26.2.11
16. Sideridis G, Jaffari F. An R function to correct fit indices and omnibus tests in confirmatory factor analysis [Internet]. Measurement and Evaluation in Counseling and Development. 2022; 55(1):48-70. DOI: 10.1080/07481756.2021.1906159
17. McNeish D, Wolf M. Dynamic fit index cutoffs for confirmatory factor analysis models [Internet]. Psychological Methods. 2023; 28(1):61-88. DOI: 10.1037/met0000425
18. Romo C, Tobon S, Juarez-Hernandez L. Diseño y validación de un instrumento para evaluar la práctica docente centrada en la metacognición en el aula [Internet]. Cuad Investig Educ Montevideo. 2020; 11(2):55-76. DOI: 10.18861/cied.2020.11.2.2981
19. Quintero de Rivas Y, Angarita C, Bastardo G, Rojas L, Sanz B, Holod M. Diseño y validación de una escala para medir el perfil gerencial del nutricionista [Internet]. An Venez Nutr. 2010 [acceso: 04/11/2023]; 23(1):18-25. Disponible en: https://www.analesdenutricion.org.ve/ediciones/2010/1/art-4/
20. Howard PF, Liang Z, Leggat S, Karimi L. Validation of a management competency assessment tool for health service managers [Internet]. J Health Organ Manag. 2018; 32(1):113-34. DOI: 10.1108/JHOM-08-2017-0223
21. Kline P. The Handbook of psychometric testing. New York: Routledge. 2000.
22. Becerra-Canales B, Codori-Becerra A. Adaptación y validación del instrumento Perfil de Impacto de Salud Oral, en adultos peruanos [Internet]. Rev Cubana Estomatol. 2022 [acceso: 04/11/2023]; 59(1):1-8. Disponible en: http://www.revestomatologia.sld.cu/index.php/est/article/view/3285
23. Izquierdo-Cardenas S, Caycho-Rodríguez T, Barboza-Palomino M, Reyes-Bossio M. Insatisfacción corporal en mujeres universitarias: nuevas evidencias psicométricas del Body Shape Questionnaire de 14 ítems (BSQ-14) [Internet]. Cuadernos de Psicología del Deporte. 2021; 21(2):112-26. DOI: 10.6018/cpd.432521
24. Franco-Giraldo A. La salud pública en Colombia (1991-2021). Promoción de la salud y prevención: una revisiónN[Internet]. Rev. salud pública. 2022; 24(1): 1-10. DOI: 10.15446/rsap.v24n1.103378
2. Espinoza-Portilla E, Gil-Quevedo W, Agurto-Távara E. Principales problemas en la gestión de establecimientos de salud en el Perú [Internet]. Rev Cubana Salud Pública. 2020 [acceso: 20/11/2023]; 46(4):e2146. Disponible en: http://scielo.sld.cu/scielo.php?script=sci_arttext&pid=S0864-34662020000400012&lng=es
3. del-Río-Mendoza J, Becerra-Canales B, Montalvo-del Río J. Reclamos de los usuarios externos en un hospital general del Perú [Internet]. Rev Méd Electrón. 2022 [acceso: 06/07/2024]; 44(1): 1-12. Disponible en: https://revmedicaelectronica.sld.cu/index.php/rme/article/view/4355
4. Corpancho J, Alcalá C, Rojas E. Competencias gerenciales en los establecimientos de salud de Lima en el año 2022 [Internet]. Regunt. 2023; 2(2): 9-19. DOI: 10.18050/regunt.v2i2.01
5. Ministerio de Salud, Dirección General de Salud de las Personas. Plan nacional de fortalecimiento del primer nivel de atención 2011-2021[Internet]. Perú: Ministerio de Salud; 2011. [acceso: 22/11/2023]. Disponible en: http://bvs.minsa.gob.pe/local/MINSA/1620.pdf
6. Mabuchi S, Alonge O, Tsugawa Y, Bennett S. Measuring management practices in primary health care facilities - development and validation of management practices scorecard in Nigeria [Internet]. Glob Health Action. 2020; 13(1):1763078. DOI: 10.1080/16549716.2020.1763078
7. Ramírez-Pérez J, López-Torres V, Ramírez-Pérez A, Morejón-Valdés M. Fiabilidad y validez de un instrumento de medición del desempeño competitivo de las instituciones de salud mediante las tecnologías de la información y la comunicación [Internet]. CienciaUAT. 2022; 16(2):97-113. DOI: 10.29059/cienciauat.v16i2.1539
8. Salarvand A, Khoshvaghti A, Sharififar S, Jame SZB, Markazi-Moghaddam N, Zareiyan A. Hospital Performance Evaluation Checklist in Context of COVID-19 Pandemic: Design and Validation [Internet]. Disaster Med Public Health Prep. 2023; 17: e570. DOI: 10.1017/dmp.2023.220
9. Becerra-Canales B. Evaluación de la atención primaria durante la pandemia por COVID-19, en una región del Perú [Internet]. Enferm glob. 2023; 22(69):283-308. DOI: 10.6018/eglobal.521201
10. Supo J. Validación de instrumentos de medición documentales, curso en vídeo para descarga inmediata [Internet]. Arequipa-Perú: Bioestadistico EIRL© 2010 - 2016. [acceso: 02/11/2023]; [aprox. 1 pantalla]. Disponible en: https://validaciondeinstrumentos.com/carta
11. Roco A, Hernandez M, Silva O. ¿Cuál es el tamaño muestral adecuado para validar un cuestionario? [Internet]. Nutr Hosp. 2021; 38(4):877-8. DOI: 10.20960/nh.03633
12. Becerra-Canales BD, Del Rio-Mendoza JR. Gestión sanitaria durante la pandemia por COVID-19, en un hospital general. Estudio preliminar [Internet]. Rev Méd Panacea. 2020; 10(1):38-43. DOI: 10.35563/rmp.v10i1.403
13. Instituto Nacional de Estadística e Informática. Encuesta Nacional de Satisfacción de Usuarios en Salud 2016 [Internet]. 2016. [acceso: 02/11/2023]. Disponible en: https://www.gob.pe/institucion/inei/informes-publicaciones/3355216-encuesta-nacional-de-satisfaccion-de-usuarios-en-salud-2016
14. Ebel R, Frisbie D. Essentials of Education Measurement. Englewood Cliffs, NJ: Prentice Hall. 1986.
15. Trejos-Herrera A, Bahamón M, Alarcón-Vásquez Y, Vinaccia S, González O, Quevedo-Barrios D, et al. Validación de las propiedades psicométricas de la Escala de Personalidad Tipo D en adultos colombianos [Internet]. Acta Colombiana de Psicología. 2023; 26(2):128-40. DOI: 10.14718/ACP.2023.26.2.11
16. Sideridis G, Jaffari F. An R function to correct fit indices and omnibus tests in confirmatory factor analysis [Internet]. Measurement and Evaluation in Counseling and Development. 2022; 55(1):48-70. DOI: 10.1080/07481756.2021.1906159
17. McNeish D, Wolf M. Dynamic fit index cutoffs for confirmatory factor analysis models [Internet]. Psychological Methods. 2023; 28(1):61-88. DOI: 10.1037/met0000425
18. Romo C, Tobon S, Juarez-Hernandez L. Diseño y validación de un instrumento para evaluar la práctica docente centrada en la metacognición en el aula [Internet]. Cuad Investig Educ Montevideo. 2020; 11(2):55-76. DOI: 10.18861/cied.2020.11.2.2981
19. Quintero de Rivas Y, Angarita C, Bastardo G, Rojas L, Sanz B, Holod M. Diseño y validación de una escala para medir el perfil gerencial del nutricionista [Internet]. An Venez Nutr. 2010 [acceso: 04/11/2023]; 23(1):18-25. Disponible en: https://www.analesdenutricion.org.ve/ediciones/2010/1/art-4/
20. Howard PF, Liang Z, Leggat S, Karimi L. Validation of a management competency assessment tool for health service managers [Internet]. J Health Organ Manag. 2018; 32(1):113-34. DOI: 10.1108/JHOM-08-2017-0223
21. Kline P. The Handbook of psychometric testing. New York: Routledge. 2000.
22. Becerra-Canales B, Codori-Becerra A. Adaptación y validación del instrumento Perfil de Impacto de Salud Oral, en adultos peruanos [Internet]. Rev Cubana Estomatol. 2022 [acceso: 04/11/2023]; 59(1):1-8. Disponible en: http://www.revestomatologia.sld.cu/index.php/est/article/view/3285
23. Izquierdo-Cardenas S, Caycho-Rodríguez T, Barboza-Palomino M, Reyes-Bossio M. Insatisfacción corporal en mujeres universitarias: nuevas evidencias psicométricas del Body Shape Questionnaire de 14 ítems (BSQ-14) [Internet]. Cuadernos de Psicología del Deporte. 2021; 21(2):112-26. DOI: 10.6018/cpd.432521
24. Franco-Giraldo A. La salud pública en Colombia (1991-2021). Promoción de la salud y prevención: una revisiónN[Internet]. Rev. salud pública. 2022; 24(1): 1-10. DOI: 10.15446/rsap.v24n1.103378
Published
2024-07-12
How to Cite
1.
Becerra-Canales B, Vera-Cáceres C, Dávalos-Almeyda M, Oscco-Torres O, Ybaseta–Soto M, Aquije-Paredes C, et al. Validation of an abbreviated scale to evaluate management in health organizations. Rev Cubana Med Milit [Internet]. 2024 Jul. 12 [cited 2025 Apr. 3];53(3):e024032949. Available from: https://revmedmilitar.sld.cu/index.php/mil/article/view/32949
Issue
Section
Research Article
License
Authors who have publications with this Journal accept the following terms:
- The authors will retain their copyright and guarantee the Journal the right of first publication of their work, which will simultaneously be subject to the Creative Commons Attribution License. The content presented here can be shared, copied and redistributed in any medium or format; Can be adapted, remixed, transformed or created from the material, using the following terms: Attribution (giving appropriate credit to the work, providing a link to the license, and indicating if changes have been made); non-commercial (you cannot use the material for commercial purposes) and share-alike (if you remix, transform or create new material from this work, you can distribute your contribution as long as you use the same license as the original work).
- The authors may adopt other non-exclusive license agreements for the distribution of the published version of the work (for example: depositing it in an institutional electronic archive or publishing it in a monographic volume) as long as the initial publication in this Journal is indicated.
- Authors are allowed and recommended to disseminate their work through the Internet (e.g., in institutional electronic archives or on their website) before and during the submission process, which can produce interesting exchanges and increase citations. of the published work.
