Reliability and validity of an instrument for measuring the competitive performance of health institutions through the use of Information and Communication Technologies

Authors

  • José Felipe Ramírez-Pérez Universidad Autónoma de Baja California (UABC), Facultad de Ciencias Administrativas y Sociales (FCAyS), México 1 s/n, Carlos Pacheco 7, Ensenada, Baja California, México, C. P. 22890. https://orcid.org/0000-0002-0765-0685
  • Virginia Guadalupe López-Torres Universidad Autónoma de Baja California (UABC), Facultad de Ciencias Administrativas y Sociales (FCAyS), México 1 s/n, Carlos Pacheco 7, Ensenada, Baja California, México, C. P. 22890. https://orcid.org/0000-0002-2795-8951
  • Alicia del Rosario Ramírez-Pérez Universidad Autónoma de Baja California (UABC), Facultad de Ciencias Administrativas y Sociales (FCAyS), México 1 s/n, Carlos Pacheco 7, Ensenada, Baja California, México, C. P. 22890. https://orcid.org/0000-0002-8805-5772
  • Maylevis Morejón-Valdés Universidad Autónoma de Baja California (UABC), Facultad de Ciencias Administrativas y Sociales (FCAyS), México 1 s/n, Carlos Pacheco 7, Ensenada, Baja California, México, C. P. 22890. https://orcid.org/0000-0002-5831-9159

DOI:

https://doi.org/10.29059/cienciauat.v16i2.1539

Keywords:

organizational efficiency, health facilities, information and communication technologies

Abstract

Since their emergence, the use of information and communication technologies has achieved greater competitive advantages in companies and public organizations, including the health sector, although there is little scientific evidence about it. The objective of the research was to validate a questionnaire to measure the competitive performance of health institutions in the state of Baja California, through the use of information and communication technologies. The study approach is quantitative, with a retrospective descriptive scope and a non-experimental cross-sectional design. The questionnaire developed based on the literature review was administered between September 2020 and May 2021 to a sample of health professionals (n = 203). It consisted of 59 items, as a result of measuring 9 dimensions, where its content validity index for n = 13 experts was classified as adequate (0.79). The reliability obtained in the pilot test was high (Cronbach’s Alpha = 0.86). To evaluate the construct validity, an exploratory factor analysis was carried out, which determined 9 factors that explain 84.5 % of the total variance and a strong correlation between the variables. The obtained instrument presented adequate psychometric properties of reliability and validity, which in turn made it possible to measure the impact of information and communication technologies on the competitive performance of health institutions.

Author Biography

José Felipe Ramírez-Pérez, Universidad Autónoma de Baja California (UABC), Facultad de Ciencias Administrativas y Sociales (FCAyS), México 1 s/n, Carlos Pacheco 7, Ensenada, Baja California, México, C. P. 22890.

Es Ingeniero en Ciencias Informáticas (2012), Máster en Informática Aplicada, Doctor en Ciencias en Informática, Investigador Agregado y Profesor Auxiliar por la Universidad de las Ciencias Informáticas (UCI) de La Habana, Cuba. Se desempeñó como líder científico del Grupo de Investigación de Informática en Salud, como Coordinador de la Maestría en Informática Médica Aplicada, como Jefe del Departamento de Desarrollo de Aplicaciones y como Jefe de Laboratorio de Imágenes Médicas del Centro de Informática Médica de la UCI en el periodo comprendido de octubre de 2014 a enero de 2020. Tiene 11 años de experiencia en el análisis, desarrollo y gestión de equipos de desarrollo de software en el área de la Informática Médica, así como en la investigación en las áreas de informática médica, ciencias informáticas y competitividad. Actualmente radica en la Universidad Autónoma de Baja California.

References

Aguilar-Barojas, S. (2005). Fórmulas para el cálculo de la muestra en investigaciones de salud. Salud en Tabasco. 11(1-2): 333-338.

Alquicira, A. M., Trejo, A. R. y Mondragón, I. J. G. (2020). Digitalización y competitividad industrial. Impulso gubernamental en Alemania y México. Red Internacional de Investigadores en Competitividad. 13: 551-570.

Álvarez-Tobón, V. A., Luna-Gómez, I. F., Torres-Silva, E. A., Higuita-Úsuga, A. y Rivera-Mejía, P. T. (2018). Tecnologías de Información y Comunicación (TIC) aplicadas en cuidados paliativos: revisión de tema. Psicooncología. 15(2): 345.

Atasoy, H., Chen, P. Y., and Ganju, K. (2018). The spillover effects of health IT investments on regional healthcare costs. Management Science. 64(6): 2515-2534.

Baird, K. M., Tung, A., and Yu, Y. (2019). Employee organizational commitment and hospital performance. Health Care Management Review. 44(3): 206-215.

Boluarte-Carbajal, A. y Tamari, K. (2017). Validez de contenido y confiabilidad inter-observadores de Escala Integral Calidad de Vida. Revista de Psicología (PUCP). 35(2): 641-666.

Calderón, H. G., Rúa, J. E. L. y García, J. S. (2016). Innovación en instituciones de salud como fuente de competitividad. Revista Venezolana de Gerencia. 21(74):227-241.

Chang, C. H., Chiao, Y. C., and Tsai, Y. (2017). Identifying competitive strategies to improve the performance of hospitals in a competitive environment. BMC Health Services Research. 17(1): 1-10.

Chemor, A., Ratsch, A. E. O., and Alamilla-Martinez, G. A. (2018). Mexico’s Seguro Popular: Achievements and Challenges. Health Systems y Reform. 4(3): 194-202.

Cho, N. E., Ke, W., Atems, B., and Chang, J. (2018). How does electronic health information exchange affect hospital performance efficiency? The effects of breadth and depth of information sharing. Journal of Healthcare Management. 63(3): 212-228.

Cleven, A., Mettler, T., Rohner, P., and Winter, R. (2016). Healthcare quality innovation and performance through process orientation: Evidence from general hospitals in Switzerland. Technological Forecasting and Social Change. 113: 386-395.

Colchero, M. A., Gómez, R. y Bautista-Arredondo, S. (2021). Caracterización de la “cascada de atención” en servicios públicos en México en localidades de menos de 100 000 habitantes. Salud Pública de México. 61: 734-741.

Davlyatov, G., Borkowski, N., Feldman, S., Qu, H., Burke, D., Bronstein, J., and Brickman, A. (2019). Health Information Technology Adoption and Clinical Performance in Federally Qualified Health Centers. Journal for Healthcare Quality. 42(5): 287-293.

Escobar-Pérez, J. y Cuervo-Martínez, Á. (2008). Validez de contenido y juicio de expertos: una aproximación a su utilización. Avances en Medición. 6(1): 27-36.

Frey, F. (2017). SPSS, Statistical Package for the Social Sciences. The International Encyclopedia of Communication Research Methods. [En línea]. Disponible en: https://doi.org/10.1002/9781118901731.iecrm0237. Fecha de consulta: 20 de septiembre de 2021.

Giacometti-Rojas, L. F. (2013). Innovación tecnológica y desarrollo de ventaja competitiva en la atención a la salud: enfoque conceptual y metodológico. Revista Gerencia y Políticas de Salud. 12(25): 66-82.

Gomes, J. and Romão, M. (2018). Information system maturity models in healthcare. Journal of Medical Systems. 42(12): 235.

Grande, M., Cañón, R. y Cantón, I. (2016). Tecnologías de la información y la comunicación: evolución del concepto y características. IJERI: International Journal of Educational Research and Innovation. (6): 218-230.

IMCO, Instituto Mexicano para la Competitividad (2018). Pequeños pasos para transformar al sistema de salud. Centro de Investigación en Política Pública. [En línea]. Disponible en: https://imco.org.mx/pequenos-pasos-transformar-al-sistema-salud/?gclid=CjwKCAjwqJ_1BRBZEiwAv73uwLEnGkgBN42-EoOGDJmGjlynkBxNRWbD8SyO6GsphSIHQehieCz_-BoCX5oQAvD_BwE. Fecha de consulta: 23 de diciembre de 2020.

IMCO, Instituto Mexicano para la Competitividad (2020). Sistema universal de salud: retos de cobertura y financiamiento vía CIEP. Centro de Investigación en Política Pública. [En línea]. Disponible en: https://imco.org.mx/sistema-universal-salud-retos-cobertura-financiamiento-via-ciep/. Fecha de consulta: 23 de diciembre de 2020.

Jongen, C. S., McCalman, J., and Bainbridge, R. G. (2017). The implementation and evaluation of health promotion services and programs to improve cultural competency: a systematic scoping review. Frontiers in Public Health. 5: 24.

Lawshe, C. H. (1975). A quantitative approach to content validity. Personnel Psychology. 28(4): 563-575.

Lee, J. Y., Gowen III, C. R., and McFadden, K. L. (2018). An empirical study of US hospital quality: Readmission rates, organizational culture, patient satisfaction, and Facebook ratings. Quality Management Journal. 25(4): 158-170.

Lee, Y. J. and Suh, W. S. (2016). The influence of competitive advantage on hospital performance: Focused on resource-based view (RBV). Korea Journal of Hospital Management. 21(3): 53-64.

Martin-Romera, A. y Molina-Ruiz, E. (2017). Valor del conocimiento pedagógico para la docencia en Educación Secundaria: diseño y validación de un cuestionario. Estudios Pedagógicos (Valdivia). 43(2): 195-220.

Mayer, T. and Jensen, K. (2018). Hardwiring hospitalwide flow to drive sustainable competitive performance. Management in Healthcare. 2(4): 373-387.

McCalman, J., Jongen, C., and Bainbridge, R. (2017). Organizational systems’ approaches to improving cultural competence in healthcare: a systematic scoping review of the literature. International Journal for Equity in Health. 16(1): 78.

Milani, R. V., Bober, R. M., and Lavie, C. J. (2016). The role of technology in chronic disease care. Progress in Cardiovascular Diseases. 58(6): 579-583.

Morales, M. A. L. (2019). Uso de las TIC como estrategia competitiva de las Micro y Pequeñas empresas. Caso Mazatlán, Sinaloa. Revista Relayn-Micro y Pequeñas empresas en Latinoamérica. 3(2): 46-53.

Pashkus, V., Pashkus, N., and Chemlyakova, A. (2017). The problem of quality correlation and efficiency of medical services as a factor of health organizations competitiveness. In CBU International Conference Proceedings. 5: 366-370.

Pérez, A. D. R. R., Pérez, J. F. R. y Zayas, J. C. B. (2019). Polifarmacia e interacciones medicamentosas potenciales en el adulto mayor, una polémica en la prescripción. Revista Cubana de Farmacia. 52(2): 1-15.

Pérez, J. F. R., López-Torres, V. G., and Morejón-Valdés, M. (2021). Information and Communication Technologies as a competitive performance factor in provider institutions of medical services in Ensenada, Baja California. Journal of Administrative Science. 2(4): 31-37.

Psychoyios, D. and Dotsis, G. (2018). The Competitiveness of the European ICT Industry. Review of Economic Analysis. 10(1): 97-119.

Ramírez-Pérez, J. F., Rodríguez, T., Olivera-Fajardo, D. y Morejón-Valdes, M. (2016). Componente para la toma de decisiones en salud. Un enfoque de análisis de redes sociales desde la minería de procesos. Revista Cubana de Informática Médica. 8(1): 46-63.

Robaina, R. F., Pérez, J. F. R. y Morejón, M. M. (2020). Rediseño de la infraestructura de red local del Centro de Investigaciones Médico Quirúrgicas. Revista Cubana de Informática Médica. 13(1): 412.

Robledo-Madrid, P. (2019). Impacto de la aplicación de las Tecnologías de la Información (TIC) en un modelo de atención médica. Revista de Sanidad Militar. 73(2): 96-104.

Sampieri, R. H. (2018). Metodología de la investigación: las rutas cuantitativa, cualitativa y mixta. México: McGraw Hill. 714 Pp.

Schneider, A. M., Oppel, E. M., and Schreyögg, J. (2020). Investigating the link between medical urgency and hospital efficiency–Insights from the German hospital market. Health Care Management Science. 23(4): 649-660.

Schwab, K. (2017). The fourth industrial revolution. (First edition). Crown Business, New York. 216 Pp.

Setia, P., Menon, N., and Srinivasan, S. S. (2020). EHR application portfolio and hospital performance: Effects across hospitals with varying administrative scale and clinical complexity. Information & Management. 57(8): 103383.

Singh, H., Dey, A. K., and Sahay, A. (2020). Exploring sustainable competitive advantage of multispecialty hospitals in dynamic environment. Competitiveness Review: An International Business Journal. [En línea]. Disponible en: https://doi.org/10.1108/CR-12-2018-0091. Fecha de consulta: 25 de diciembre de 2020.

Sjaaf, A. C., Achadi, A., Nadjib, M., Ayuningtyas, D., Junadi, P., Kadir, A., and Hendrawan, H. (2020). The efficiency and productivity of Public Services Hospital in Indonesia. Enfermería Clínica. 30: 236-239.

Soto, C. M. (2016). Percepción de la claridad de los ítems: Comparación del juicio de estudiantes y jueces expertos. Revista Latinoamericana de Ciencias Sociales, Niñez y Juventud. 14(2): 1469-1477.

Tortorella, G. L., Fogliatto, F. S., Espôsto, K. F., Mac-Cawley-Vergara, A., Vassolo, R., Tlapa-Mendoza, D., and Narayanamurthy, G. (2020). Measuring the effect of Healthcare 4.0 implementation on hospitals’ performance Production Planning y Control. 1-16.

Tristán-López, A. (2008). Modificación al modelo de Lawshe para el dictamen cuantitativo de la validez de contenido de un instrumento objetivo. Avances en Medición. 6(1): 37-48.

Turban, E., Rainer, R. K., and Potter, R. E. (2001). Introduction to information technology. New York, NY: John Wiley & Sons. 550 Pp.

Valencia-Moreno, J. M., López, E. G., Pérez, J. F. R., Rodríguez, J. P. F., and Xochihua, O. Á. (2020). Exploring Breast Cancer Prediction for Cuban Women (Ed.), Advances in Intelligent Systems and Computing. [En línea]. Disponible en: https://doi.org/10.1007/978-3-030-40690-5_47. Fecha de consulta: 26 de diciembre de 2020.

Vasco, E., Barbosa, N., and Figueiredo, J. (2010). A conceptual framework to analyze hospital competitiveness. The Service Industries Journal. 30(3): 437-448.

Walker, D. M. (2018). Does participation in health information exchange improve hospital efficiency? Health Care Management Science. 21(3): 426-438.

Weng, R. H., Huang, J. A., Kuo, Y. H., Huang, C. Y., and Huang, Y. C. (2011). Determinants of technological innovation and its effect on hospital performance. African Journal of Business Management. 5(11): 4314-4327.

Zahid, A., Poulsen, K., Sharma, R., and Wingreen, S. C. (2021). A systematic review of emerging information technologies for sustainable data-centric health-care. International Journal of Medical Informatics. 104420.

Published

2022-01-31

How to Cite

Ramírez-Pérez, J. F. ., López-Torres, V. G., Ramírez-Pérez, A. del R., & Morejón-Valdés, M. (2022). Reliability and validity of an instrument for measuring the competitive performance of health institutions through the use of Information and Communication Technologies. CienciaUAT, 16(2), 97-113. https://doi.org/10.29059/cienciauat.v16i2.1539

Issue

Section

Social Science