• Título:  MODELO PARA ESTIMAR EL IMPACTO SOCIAL DEL USO DE ECOSISTEMAS DE APRENDIZAJE EN LAS UNIVERSIDADES
• Autor:  Meza Bolaños, Doris
• Universidad:  Universidad de Alicante
• Departamento:  Instituto Universitario de Investigación Informática
• Fecha de Lectura:  01/07/2019
• Programa de doctorado:  Programa de Doctorado en Informática por la Universidad de Alicante
• Dirección: 
  • COMPAÑ ROSIQUE, PATRICIA (DIRECTOR)
  • SATORRE CUERDA, ROSA ANA (DIRECTOR)
• Tribunal: 
  • Castaño Álvarez, Maria Asunción  (PRESIDENTE)
  • MOLINA CARMONA, RAFAEL (SECRETARIO)
  • Rabasa Dolado, Alejandro (VOCAL)
• Descriptores: 
  • INFORMATICA
  • DISEÑO Y COMPONENTES DE SISTEMAS DE INFORMACION
  • SOCIOLOGIA DE LA EDUCACION
  • BIENESTAR SOCIAL
• Fichero de tesis:
• http://hdl.handle.net/10045/97352
• Resumen:
  Estimar el impacto de un ecosistema de e-learning permite saber qué elementos de este entorno le dan mayor valor a la organización y verificar si los objetivos son pertinentes y si se han cumplido o no. Es importante medir el impacto de los procesos de e-learning para determinar los resultados de esta aplicación en la sociedad. Al evaluar las acciones del proceso de enseñanza- aprendizaje, se puede saber en qué y cuánto se debe cambiar, en qué y cuánto se debe mejorar. La motivación de esta investigación atiende a la frase atribuida a Peter Drucker: ¿Lo que no se define no se puede medir. Lo que no se mide, no se puede mejorar¿. Inicialmente el estudio se ha basado en determinar criterios, variables e indicadores relevantes y comunes, este es el punto de partida para la evaluación. Además, se ha procurado estudiar a cada elemento de manera sistemática para determinar si es o no relevante y si formará o no parte del modelo propuesto. Para el desarrollo de la investigación se ha realizado un estudio del tema analizando trabajos desarrollados por otros autores, para obtener información del estado actual del tema de investigación y definir una línea base que permita estructurar el estudio de forma que se tenga una visión global del contexto y finalmente sea posible diseñar un modelo que incorpore características relevantes y comunes. Con los datos recabados de encuestas aplicadas, se ha realizado el análisis de los datos con la finalidad de hacer un ajuste del modelo, de acuerdo, a condiciones reales. Se han aplicado herramientas estadísticas para determinar cuáles son los factores influyentes en el proceso de estimación del impacto de los ecosistemas e-learning y cuál es su nivel de importancia dentro del entorno estudiado mediante la obtención de sus pesos. Con estos valores se han establecido funciones que determinan cada aspecto dentro de cada una de las dimensiones del modelo. Una vez diseñado el modelo para valorar el impacto de los ecosistemas de aprendizaje y habiendo obtenido las ecuaciones que miden cada aspecto de cada dimensión del modelo, se calculan los valores máximos y mínimos de estas ecuaciones con el fin de generar un rango referencial común para todas las dimensiones. Finalmente, y a modo de ejemplo, se aplica el modelo utilizando los datos de la Universidad Central del Ecuador. Los resultados obtenidos se presentan también de forma gráfica, lo que permite valorar a simple vista los aspectos mejor y peor valorados dentro del modelo. El resultado final es un instrumento base que podría ser utilizado por cualquier universidad pública para determinar el impacto social de aplicar ecosistemas de aprendizaje dentro de los procesos de enseñanza-aprendizaje. Bibliografía consultada Adam, M. R., Vallés, R., & Rodríguez, G. I. M. (2013). E-learning: características y evaluación. Ensayos de Economía., 23(43), 143-159. Aguerrondo, I. (1994). El compromiso con la calidad de la educación:¿ desde dónde mejorarla?. Pogré, P., La trama de la escuela media. Atando y desatando nudos. Paidós. Aguti, B., Wills, G. B., & Walters, R. J. (2014). An evaluation of the factors that impact on the effectiveness of blended e-learning within universities. En International Conference on Information Society (i-Society 2014), (pp. 117- 121). https://doi.org/110.1109/i-Society.2014.7009023. Alonso, J. A. G., & Santacruz, M. P. (2015). Cálculo e interpretación del Alfa de Cronbach para el caso de validación de la consistencia interna de un cuestionario, con dos posibles escalas tipo Likert. Revista Publicando, 2(2), 62-77. Attwell, G. (2006). Evaluating E-learning: A Guide to the Evaluation of E-learning. Evaluate Europe Handbook Series. 2, 1610-0875. Bailey, J. E., & Pearson, S. W. (1983). Development of a Tool for Measuring and Analyzing Computer User Satisfaction. Management Science. https://doi.org/10.1287/mnsc.29.5.530. Bates, R. (2004). A critical analysis of evaluation practice: the Kirkpatrick model and the principle of beneficence. Evaluation and Program Planning, 27(3), 341-347. Bernal García, J. J., Martínez, M. D., & Sánchez García, J. F. (2004). Modelización de los factores más importantes que caracterizan un sitio en la red. España: ASEPUMA. Billorou, N., Pacheco, M., & Vargas, F. (2011). Guía para la evaluación de impacto de la formación: Oficina Internacional del Trabajo, Cinterfor. Bisquerra, A. R. (1989). Introducción conceptual al análisis multivariable: un enfoque informático con los paquetes SPSS-X, BMDP, LISREL y SPAD: PPU. Bjornson, F. O., & Dingsoyr, T. (2008). Knowledge management in software engineering: A systematic review of studied concepts, findings and research methods used. Information and software technology, 50(11), 1055-1068. Blalock, H. M. (1966). Estadística social (No. 04; HA29, B5.): Fondo de cultura económica. Bojko, A. (2009). Informative or misleading? Heatmaps deconstructed. Human- computer interaction. New trends, 30-39. . Bustamante, A., & Sánchez-Torres, J. M. (2009). Indicadores de la Sociedad de la Informació n para la medició n en e-banking y e-learning. Encuentro Nacional de Investigación en Postgrados ENIP. Universidad Nacional de Colombia, Bogotá. Cardona, D. M., & Sánchez, J. M. (2010). Indicadores Básicos para Evaluar el Proceso de Aprendizaje en Estudiantes de Educació n a Distancia en Ambiente e-learning. Facultad de ingeniería, Universidad Nacional de Colombia, Bogotá-Colombia. Formación universitaria, 3(6), 15-32. Cardona-Román, D. M. (2011). Propuesta de Diseño de Metodología para Evaluar el Impacto del e-learning en el Proceso de Aprendizaje de Estudiantes de Educación a Distancia. (Doctoral dissertation, Tesis de Maestría). Chang, N., & Chen, L. (2014). Evaluating the Learning Effectiveness of an Online Information Literacy Class Based on the Kirkpatrick Framework. International Journal of Libraries and Information Studies, 64(3). Diener, E., & Biswas-Diener, R. (2008). The science of optimal happiness. . Boston: Blackwell Publishing. Duart, J. M. (2002). ROI y e-learning: más allá de beneficios y costes. Documento en línea: http://www.uoc.edu/web/esp/art/uoc/duart0902/duart0902.html Elliot, K., & Shin D. (2002). Student Satisfaction: an alternative approach to assessing this important concept. Journal of Higher Policy and management, 24. Everitt, B. S. & Wikes, T. (2001). Diccionario de Estad¿¿ tica para Psicó logos. Fantini, A. C. (2007). Métricas: Pautas para un adecuado sistema de evaluación de la calidad en e-learning. IX Workshop de Investigadores en Ciencias de la Computación. Farid, S., Ahmad, R., Niaz, I. A., Arif, M., Shamshirband, S., & Khattak, M. D. (2015). Identification and prioritization of critical issues for the promotion of e- learning in Pakistan. Computers in Human Behavior, 51, 161-171. Ferrando, P. J., & Anguiano-Carrasco, C. (2010). El análisis factorial como técnica de investigación en psicología. Papeles del psicólogo, 31(1). Ferreras-Fernández, T., Martín-Rodero, H., García-Peñalvo, F. J., & Merlo-Vega, J. A. (2016). The systematic review of literature in LIS: an approach. Paper presented at the Proceedings of the Fourth International Conference on Technological Ecosystems for Enhancing Multiculturality. Figueras, S. M., & Gargallo, V. P. (2006). Análisis Factorial. Campus.com, Estadísitica, Universidad de Zaragoza http://www.5campus.com/leccion/factorial. Consultado: dic 2018. Hadjar, K., & Alawi, F. (2010). The Pyramid Model: A New Model for Evaluating E- Learning Systems. Presentado en Proceedings of the 2010 International Conference on E-Learning, E-Business, Enterprise Information Systems, & E- Government, Las Vegas Nevada. Hair, J. F., Anderson, R. E., Tatham, R. L., & Black, W. C. (1999). Análisis multivariante (Vol. 491): Prentice Hall Madrid. Hashim, Y. A. (2010). Determining sufficiency of sample size in management survey research activities. International Journal of Organisational Management & Entrepreneurship Development, 6(1), 119-130. Indrati, A. (2014). E-LEARNING ACCEPTANCE BY UNIVERSITY STUDENTS IN INDONESIA USING UNIFIED THEORY OF ACCEPTANCE AND USE OF TECHNOLOGY. International Conference on Internet Studies, August 16-17, 2014, Singapore. Jimenez, M., & Barchino, R. (2018). Evaluación e implantación de un modelo de evaluación de acciones formativas. Competitividad. Kaiser, H. F. (1958). The varimax criterion for analytic rotation in factor analysis. Psychometrika, 23(3), 187-200. Kitchenham, B., & Brereton, P. (2013). A systematic review of systematic review process research in software engineering. Information and software technology, 55(12), 2049-2075. Kirkpatrick, D., & Kirkpatrick, J. (2006). Evaluating Training Programs: The Four Levels: Berrett-Koehler Publishers. Lacleta, S.-E., Hernández-García, L., María Ángel, García-Peñalvo, F. J., Fidalgo Blanco, Á., & Conde-González, M. Á. (2015). Mirando hacia el futuro: Ecosistemas tecnológicos de aprendizaje basados en servicios. Innovación y Competitividad. CINAIC 2015 (14-16 de Octubre de 2015, Madrid, España) (pp. 553-558). Madrid, Spain: Fundación General de la Universidad Politécnica de Madrid. Llorens, F., Molina, R., Compañ, P., & Satorre, R. (2014). Technological ecosystem for open education. Smart digital futures, 262, 706-715. Lloret-Segura, S., Ferreres-Traver, A., Hernández-Baeza, A., & Tomás-Marco, I. (2014). El análisis factorial exploratorio de los ítems: una guía práctica, revisada y actualizada. Anales de psicología, 30(3), 1151-1169. Marchesi, A., & Mart¿¿ , E. (2000). Calidad de la enseñanza en tiempos de cambio. Alianza Editorial. Marín Diazaraque, J. M. (2013). Análisis de componentes principales. El procedimiento Análisis factorial.: Universidad Complutense de Madrid UC3. Marvin, S. L., & Robson, F. (2010). The evaluation of learning and development in the workplace: a review of the literature VOCEDplus, the international tertiary education and research database(Recuperado 29 de enero de 2018, de http://www.northumbria.ac.uk/static/5007/hrpdf/hefce/hefce_litreview.pdf). Maslow, A. H. (Ed.) (1982). La amplitud potencial de la naturaleza humana (Vol. 4): SERBIULA Sistema Librum 2.0. Méndez Martínez, C., & Rondón Sepúlveda, M. A. (2012). Introducción al análisis factorial exploratorio. Revista colombiana de psiquiatría, 41(1). Meza-Bolaños, D. V., Compañ-Rosique, P., & Satorre-Cuerda, R. (2016a). Aspectos que ayudan a medir el impacto en la inversión realizada por una universidad en e-learning. Paper presented at the XIX Congreso Internacional EDUTEC 2016, Alicante - España. Meza-Bolaños, D. V., Compañ-Rosique, P., & Satorre-Cuerda, R. (2016b). Designing a model to estimate the impact and cost effectiveness of online learning platforms. Paper presented at the Proceedings of the Fourth International Conference on Technological Ecosystems for Enhancing Multiculturality, Salamanca, Spain. Meza-Bolaños, D., Compañ Rosique, P., & Satorre Cuerda, R. (2019). Analysis of Relevant Factors to Measure the Impact of Investment in e-learning Ecosystems in Public Universities. In: Rocha Á., Ferrás C., Paredes M. (eds) Information Technology and Systems. ICITS 2019. Advances in Intelligent Systems and Computing, vol 918. Springer, Cham. doi:https://doi.org/10.1007/978-3-030-11890-7_73 Navarro, H. (2005). Manual para la evaluación de impacto de proyectos y programas de lucha contra la pobreza. Naciones Unidas, CEPAL, ILPES, Área de Proyectos y programación de inversiones. Norusis, M. J. (1994). SPSS: SPSS advanced statistics 6.1: SPSS Inc. Ozkan, S., & Koseler, R. (2009). Multi-dimensional evaluation of E-learning systems in the higher education context: An empirical investigation of a computer literacy course. En 2009 39th IEEE Frontiers in Education Conference., (pp. 1- 6). doi:https://doi.org/10.1109/FIE.2009.5350590 Palacios Plaza, J. (2008). Medición del Impacto y la Rentabilidad de la Formación. Cómo llegar la ROI de la formación. Ediciones Diaz de Santos. Palos-Sanchez, P. R. (2016). Aproximación a los factores claves del retorno de la inversión en formación e-learning 3C Empresa : investigación y pensamiento crítico., 5(4) (Recuperado 29 de enero de 2018, de https://www.researchgate.net/publication/311093416_Aproximacion_a_los_facto res_claves_del_retorno_de_la_inversion_en_formacion_e-learning), 12 - 31. Paull, M., Whitsed, C., & Girardi, A. (2016). Applying the Kirkpatrick model: Evaluating an Interaction for Learning Framework curriculum intervention. Issues in Educational Research, 26(3), 490-507. Peak, D., & Berge, Z. L. (2006). Evaluation and eLearning. Turkish Online Journal of Distance Education-TOJDE, 7 (Recuperado de http://dergipark.ulakbim.gov.tr/tojde/article/view/5000102793). Pérez, E. R., & Medrano, L. A. (2010). Análisis factorial exploratorio: bases conceptuales y metodológicas. Revista Argentina de Ciencias del Comportamiento (RACC), 2(1), 58-66. Pérez Juste, R., López Rupérez, F., Peralta, M., & Fernández, P. (2007). Hacia una educación de calidad. Gestión, instrumentos y evaluación. Avances en supervisión educativa. Revista de la Asociación de Inspectores de Educación de España, 5, 15. (5), 15. Persico, D., Manca, S., & Pozzi, F. (2014). Adapting the Technology Acceptance Model to evaluate the innovative potential of e-learning systems. Computers in Human Behavior, 30, 614-622. doi: https://doi.org/10.1016/j.chb.2013.07.045 Phillips, J. J. (1996). What it the training? . Training and Development,, 50(3), 28-32. Pineda Herrero, P. (2000). Evaluació n del impacto de la formació n en las organizaciones. Universitat Autònoma de Barcelona. Departament de Pedagogia Sistemàtica i Social(Educar), 119 - 133. Planella, J., & Rodríguez, I. (2004). Del e-learning y sus otras miradas: una perspectiva social. Revista de Universidad y Sociedad del Conocimiento (RUSC), 1. Ramirez-Anormaliza, R. (2017). "Modelo de aceptación de los sistemas e-learning en las Universidades : un enfoque del modelo de aceptación de la tecnología ajustado al Ecuador". Tesis doctoral, UPC, Departament d'Organització d'Empreses, 2017. Disponible a: <http://hdl.handle.net/2117/107941>. RICYT. (2009). "Manual de Lisboa. Capítulo de Indicadores en la Educación". . Disponible en: http//ricyt.org.elserver.com/docs/lisboa/manual_lisboa ES.pdf (2009). Rodríguez-Jaume, M.-J., & Mora Catalá, R. (2001). Análisis factorial. Estadística Informática: Universidad de Alicante. Servicio de Publicaciones. Rubio, M. J. (2003). Enfoques y modelos de evaluación del e-learning. RELIEVE. Revista Electrónica de Investigación y Evaluación Educativa, 9(2), 101-120. Seligman, M. E. (2012). Flourish: A visionary new understanding of happiness and well-being. Publisher Simon and Schuster. Seligman, M. E., & Csikszentmihalyi, M. (2014). Positive psychology: An introduction. In Flow and the foundations of positive psychology New York, NY: Springer Netherlands., 279-298. Sierra Bravo, R. (1981). Análisis Estad¿¿ tico y Modelos Matemáticos. Madrid: Paraninfo. Spearman, C. (1904). " General Intelligence," objectively determined and measured. The American Journal of Psychology, 15(2), 201-292. Strother, J. B. (2002). An assessment of the effectiveness of e-learning in corporate training programs. The International Review of Research in Open and Distributed Learning, 3(1). Taflinger, L. (2015). How to Define ¿Successful¿ Workplace E-learning? A Literature Review. (Recuperado de http://e-laura.com/wpcontent/uploads/ 2015/06/ Workplace Elearning_Taflinger.pdf). Toranzos, L. (1996). Evaluación y calidad. Revista Iberoamericana De Educación, 10(Recuperado a partir de https://rieoei.org/RIE/article/view/1167), 63-78. Valdés, H., & Pérez, F. (1999). Calidad de la Educación Básica y su Evaluación. SERBIULA (sistema Librum 2.0). Vallejo, P. M. (2013). El análisis factorial en la construcción e interpretación de tests, escalas y cuestionarios. Madrid: Universidad Pontificia Comillas. Wang, Y.-S., Wang, H.-Y., & Shee, D. Y. (2007). Measuring e-learning systems success in an organizational context: Scale development and validation. Computers in Human Behavior, 23(4), 1792-1808. doi: https://doi.org/10.1016/j.chb.2005.10.006 Wiepcke, C. (2011). 360-degree evaluation of e-learning measures: Taking into account phases, levels, stakeholders and methods. Ubiquitous Learning, 3(1), 57-68. Yates, B. T., & Marra, M. (2017). Social Return On Investment (SROI): Problems, solutions ... and is SROI a good investment? Evaluation and Program Planning, 64, 136-144. doi:https://doi.org/10.1016/j.evalprogplan.2016.11.009 Yi, L. Y., Zuo, M. Z., & Wang, Z. X. (2007). A Model for Analyzing and Evaluating the Return on Investment in e-Learning. Seventh IEEE International Conference on Advanced Learning Technologies (ICALT 2007), pp. 79-81. doi:https://doi.org/10.1109/ICALT.2007.20A