Se ha desarrollado un modelo partiendo del ciclo de satisfacción de necesidades y expectativas (Figura 1). Dicho modelo se ha basado en una serie de indicadores de calidad que representan factores de satisfacción de éstos. Como podemos apreciar en la Tabla 1, cada uno de los factores de satisfacción se descompone en una serie de atributos clave sobre los que se puede actuar para mejorar el factor de satisfacción correspondiente. Para definir esos atributos, se ha establecido como marco de referencia la literatura sobre calidad de servicio percibida y los estándares internacionales relacionados con la calidad en la formación en general (ISO, 2005). Asimismo, se ha tenido en cuenta la calidad de la formación en entornos virtuales de aprendizaje ya que ha sido el escenario utilizado mayoritariamente para el
desarrollo de las píldoras formativas (AENOR, 2008; Hilera González, 2008; Martínez- Argüelles, Blanco Callejo y Castán Farrero, 2013).
Se han establecido diez factores de satisfacción críticos para cuantificar en qué grado se satisfacen las necesidades y expectativas del alumnado:
1. Información: establece un conjunto de datos que han de suministrarse al estudiantado ante la oferta de la acción formativa –trípticos y pósteres–.
2. Aplicabilidad (valor añadido, competencia académica): representa en qué medida la formación incrementa la capacidad del alumnado de resolver satisfactoriamente el TFG/TFM o aumenta su competencia técnica para resolver problemas,
3. Facilidad de asimilación: capacidad de la acción formativa para estimular al usuario con el fin de entender los contenidos y favorecer el aprendizaje.
4. Accesibilidad: facilidad del estudiantado para mantener contacto con el profesorado y responsables de la acción formativa. 5. Capacidad de respuesta: velocidad de
respuesta ante las solicitudes de los estudiantes.
6. Fiabilidad: capacidad de realizar la acción formativa comprometida.
7. Competencia técnica: conocimientos del profesorado para realizar la acción formativa.
8. Empatía: cercanía demostrada por el profesorado y responsables de las acciones formativas.
9. Credibilidad: confianza que trasmite el profesorado respecto a los contenidos trasmitidos
10. Impacto: previsión de que la formación tendrá efectos positivos sobre los resultados obtenidos en la realización y defensa del TFG/TFM.
JESÚS MIGUEL MUÑOZ CANTERO, EVA MARÍA ESPIÑEIRA BELLÓN y NURIA REBOLLO QUINTELA
Revista de Investigación en Educación. ISSN: 1697-5200 / eISSN 2172-3427 | 163 Los factores de satisfacción se presentan en una
escala par que va desde el nivel 1 (nada) al nivel 4 (mucho), con lo que no se le permite al encuestado optar por posturas intermedias, sino que tendrá que decantarse hacia uno de los extremos. De esta forma, el estándar diseñado permitirá que el futuro alumnado pueda obtener una valoración de la satisfacción global con la oferta formativa y, por lo tanto, seleccionar
aquellas actividades formativas que más se adecúen a sus expectativas y necesidades.
Por último, se ha incluido un ítem de satisfacción general, de tal manera que el nivel de calidad de cada píldora vendrá determinado por la combinación del nivel de satisfacción asociado a cada factor y se ha incorporado una pregunta de carácter abierto que posibilite recoger información sobre necesidades futuras.
Factores de satisfacción Atributos clave
Información Información básica
Aplicabilidad
Reconocimiento de la información Demanda de la información Transferencia de los conocimientos Valor añadido
Competencia académica Facilidad de asimilación Estimulación al aprendizaje
Accesibilidad
A los contenidos Al profesorado
A responsables de la gestión de la acción formativa Capacidad de respuesta Velocidad de respuesta
Fiabilidad Acciones desarrolladas
Competencia técnica Conocimientos profesorado
Empatía Cercanía
Credibilidad Confianza profesorado
Impacto Previsión de resultados
LAS PÍLDORAS FORMATIVAS: DISEÑO Y DESARROLLO DE UN MODELO DE EVALUACIÓN EN EL ESPACIO EUROPEO DE EDUCACIÓN SUPERIOR
Revista de Investigación en Educación. ISSN: 1697-5200 / eISSN 2172-3427 | 164 2.3. Procedimiento
Para proceder a la recogida de la información se aplicó el cuestionario de detección de necesidades con anterioridad al desarrollo de las actividades. El procedimiento de recogida de datos sobre la satisfacción con la actividad formativa, en cambio, se ha realizado una vez finalizadas las píldoras formativas, en el momento en el cual el alumnado acudió a recoger el certificado de participación.
3. RESULTADOS
El tratamiento de los datos de los dos instrumentos para su posterior análisis, se realizó con el paquete estadístico IBM Statistics Program for Social Sciencies (SPSS) en su versión 20.
Estadísticos descriptivos N Me SD
Identifico con claridad las partes del TFG/TFM 64 3,47 3 ,872
Soy capaz de estructurar mi TFG/TFM de acuerdo con las fases del
proceso de investigación 64 2,92 3 ,965
Me considero capaz de estructurar una investigación cualitativa 64 2,37 2 ,845 Identifico las principales técnicas de investigación cualitativa 63 2,56 2 ,963 Tengo conocimientos generales de cómo abordar los datos en una
investigación cualitativa 64 2,41 2 ,886
Tengo conocimientos generales de cómo organizar los datos en una
investigación cuantitativa para su tratamiento 63 2,67 3 ,950
Soy capaz de analizar mis datos para su análisis con estadística básica e
interpretarlos 63 2,60 2 ,908
Soy capaz de representar los datos mediante gráficos/tablas y
sintetizarlos 63 2,70 3 ,854
Soy capaz de analizar mis datos con estadística básica e interpretarlos 63 2,79 3 ,986 Sé almacenar, recuperar y compartir los recursos mediante herramientas
webs 64 3,22 3 ,951
Soy capaz de construir el marco teórico de mi trabajo apoyándome en
fuentes documentales 64 3,75 4 ,909
Conozco la manera de citar los trabajos utilizando la normativa APA 64 3,62 4 ,951 Tengo claro cómo elaborar la presentación del TFG/TFM con la ayuda
de una herramienta informática 64 3,16 3 ,963
Conozco cuál es la información más importante para presentar en la
defensa del TFG/TFM 64 2,77 3 ,988
Sé cuál es la mejor manera de usar el tono y la voz para la presentación
de mi trabajo 64 2,83 3 1,092
JESÚS MIGUEL MUÑOZ CANTERO, EVA MARÍA ESPIÑEIRA BELLÓN y NURIA REBOLLO QUINTELA
Revista de Investigación en Educación. ISSN: 1697-5200 / eISSN 2172-3427 | 165 Se han extraído, para cada uno de los ítems
que conforman el instrumento de detección de necesidades, medidas descriptivas de tendencia central y de dispersión o variabilidad (n, media, mediana y desviación típica) (Tabla 2).
Como podemos apreciar en la Tabla 2, nos encontramos con respuestas bastante homogéneas ya que la desviación típica que presentan los ítems del cuestionario, sólo es superior a 1 en uno de ellos.
Los resultados nos permiten detectar que la muestra encuestada considera tener carencias formativas en la casi totalidad de los aspectos referidos, obteniendo las puntuaciones más bajas
los ítems referidos a su capacidad para abordar una investigación tanto de manera cualitativa como cuantitativa.
Si tenemos en cuenta las frecuencias de respuesta de los valores de la escala, nos encontramos que en todos los ítems evaluados el 50% de las respuestas se acumula en las categorías de poco y algo.
En el caso del instrumento empleado para la evaluación de la satisfacción, los análisis efectuados son descriptivos (media, mediana y desviación típica) sobre cada una de las píldoras formativas (véase Tabla 3) y sobre cada uno de los factores de satisfacción (véase Tabla 4).
Tabla 3. Estadísticos descriptivos de satisfacción con las píldoras formativas
Píldoras formativas N Satisfacción general Me SD
El TFG/TFM y el proceso de investigación 22 3,32 3 ,716
Abordar una investigación cualitativa 20 2,95 3 ,826
Organiza los datos de tu cuestionario 17 3,53 4 ,717
Analiza tus datos con estadística básica 15 3,27 4 ,884
Representa tus datos mediante gráficos/tablas 16 3,38 3,5 ,719 Aprende a almacenar, recuperar y compartir
recursos 12 3,17 3,5 ,937
Mejora tu estilo de redacción y aprende a
citar 32 3,78 4 ,420
Cómo hacer la presentación del TFG/TFM 30 3,80 4 ,407
LAS PÍLDORAS FORMATIVAS: DISEÑO Y DESARROLLO DE UN MODELO DE EVALUACIÓN EN EL ESPACIO EUROPEO DE EDUCACIÓN SUPERIOR
Revista de Investigación en Educación. ISSN: 1697-5200 / eISSN 2172-3427 | 166
Factores de satisfacción Me SD Información 3,39 3,5 ,420 Aplicabilidad 3,13 3,3 ,546 Facilidad de asimilación 3,28 3,4 ,414 Accesibilidad 3,35 3,5 ,406 Capacidad de respuesta 3,63 3,6 ,260 Fiabilidad 3,69 3,8 ,396 Competencia técnica 3,87 3,9 ,130 Empatía 3,74 3,8 ,152 Credibilidad 3,70 3,8 ,342 Impacto 3,46 3,4 ,381
Tabla 4. Estadísticos descriptivos factores de satisfacción
Tanto en los aspectos referidos a la satisfacción general de cada una de las píldoras, como en los estadísticos descriptivos de los factores de satisfacción, nos encontramos con respuestas homogéneas ya que existe escasa dispersión de los datos, presentando una desviación típica inferior a 1.
En cuanto a los estadísticos descriptivos referentes a la satisfacción con las píldoras formativas, las puntuaciones medias de los ítems comprenden unas valoraciones entre 2,95 de la píldora formativa “Abordar una investigación cualitativa” y 3,84 de “Mejora tu estilo de redacción y aprende a citar”. Por lo que extraemos que la muestra encuestada, está bastante satisfecha con todas las píldoras formativas. Además, cuatro de ellas presentan 3,50, medias muy cercanas a la satisfacción total.
El análisis de los estadísticos descriptivos referentes a los factores de satisfacción, establece puntuaciones medias entre 3,13 del factor de satisfacción referido a “Aplicabilidad” y 3,87 de “Competencia técnica”, lo que nos permite afirmar que la muestra encuestada valora como bastante su satisfacción con respecto a cada uno de los factores. Asimismo, se puede apreciar que, cinco
de los diez factores de satisfacción propuestos, presentan medias muy cercanas a la satisfacción total ( 3,50). Resultados apoyados y reforzados en la valoración que realizan en cuanto a recomendaciones futuras de la acción formativa, con 3,57 y desviación típica = ,302.
Los resultados obtenidos con ambos instrumentos nos permiten, por un lado, afirmar la necesidad de proseguir con la acción formativa, y por el otro establecer propuestas de mejora para el diseño y aplicación de las siguientes ediciones basándose en el modelo de satisfacción diseñado. No obstante, es necesario matizar que no todo el alumnado ha acudido al mismo número de píldoras formativas.
4. DISCUSIÓN
Los innumerables cambios de índole económico, político y social que hemos atravesado en las últimas décadas, se han traducido en modificaciones en el sistema educativo de Educación Superior. La Universidad, en un intento por responder a las demandas del mercado laboral, ha diseñado los nuevos títulos de Grado y Máster basándose en las competencias necesarias para la práctica profesional. En España estos estudios deben finalizar con la elaboración y defensa de un
JESÚS MIGUEL MUÑOZ CANTERO, EVA MARÍA ESPIÑEIRA BELLÓN y NURIA REBOLLO QUINTELA
Revista de Investigación en Educación. ISSN: 1697-5200 / eISSN 2172-3427 | 167 trabajo (TFG/TFM) en el que el alumnado debe
manifestar su dominio de las competencias que integran el título cursado. La experiencia nos demuestra que los discentes llegan a ese momento con carencias que necesitan solventar para poder llevar a término sus estudios de Grado y Máster.
Esta investigación nos ha permitido diagnosticar las necesidades formativas reales que posee el alumnado que se encuentra cursando la materia de TFG o TFM en la Facultad de Ciencias de la Educación de la Universidad de A Coruña, correspondiéndose en gran medida con las necesidades observadas por los tutores y las tutoras de TFG/TFM. Los resultados obtenidos nos permiten afirmar que la muestra encuestada presenta necesidades relacionadas con metodologías de investigación tanto cuantitativa como cualitativa, así como con el procesamiento de la información. Estas pueden estar motivadas, en parte, por la carencia de materias propias de Métodos de Investigación en los estudios de Grado en Educación Infantil y Educación Primaria que se imparten en la Facultad.
Asimismo, presentan necesidades formativas en aspectos relacionados con la preparación de la presentación del trabajo y con las competencias relacionadas con su exposición pública. Estos resultados son destacables ya que las alumnas a lo largo de sus estudios han empleado un gran abanico de metodologías en las que se ponían en práctica competencias comunicativas, como discusión dirigida, mesa redonda, simulación, presentación oral... así como competencias relacionadas con la capacidad de análisis y síntesis trabajadas a través de metodologías como los trabajos tutelados, la recensión bibliográfica, esquemas, análisis de fuentes documentales…
Este estudio también nos ha permitido constatar que la puesta en práctica del modelo nos permitirá mejorar la oferta formativa y con ello la satisfacción del alumnado.
Mediante el análisis de los resultados, se han detectado altos niveles de satisfacción por parte de las alumnas encuestadas, con respecto
tanto a cada una de las píldoras formativas como a los indicadores de satisfacción. No obstante, somos conscientes también de que deberíamos priorizar aquellas píldoras y factores de satisfacción que han obtenido medias más bajas:
- El orden de priorización de mejora con respecto a las píldoras formativas, atendiendo a los resultados, sería: a) Abordar una investigación cualitativa, b) Aprende a almacenar, recuperar y compartir recursos, c) El TFG/TFM y el proceso de investigación, d) Analiza tus datos con estadística básica y e) Representa tus datos mediante gráficos/tablas. Será necesario además complementar esta priorización con las respuestas que las alumnas nos han facilitado a la pregunta de carácter abierto “Indica qué otras píldoras formativas propondrías para próximas ediciones” ya que de ellas se desprende que es necesario invertir más horas en las píldoras anteriormente mencionadas, atendiendo al porcentaje de respuestas siguiente: a (9,37%), c (3,12%), d (28,12%), e (3,12%) además de la referente a “Mejora tu estilo de redacción y aprende a citar” (3,12%).
- Con respecto a los factores de satisfacción, el orden de priorización de mejora sería: a) Facilidad de Asimilación, b) Aplicabilidad, c) Impacto, d) Información y e) Accesibilidad. Complementaremos esta priorización con las respuestas que las alumnas nos han facilitado a la pregunta de carácter abierto anteriormente mencionada, las cuales se centran en la mejora del factor b (6,25%), señalando que las píldoras formativas deberían ser más prácticas y menos teóricas, y a la mejora del factor referente a “Capacidad de respuesta”, indicando que deberían empezar a impartirse con anterioridad.
Por último, la información ofrecida por las alumnas como respuesta a la pregunta abierta “¿Qué otras píldoras formativas te gustaría recibir?”, nos permite establecer nuevas líneas de trabajo como diseñar nuevas píldoras formativas basándose en las necesidades
LAS PÍLDORAS FORMATIVAS: DISEÑO Y DESARROLLO DE UN MODELO DE EVALUACIÓN EN EL ESPACIO EUROPEO DE EDUCACIÓN SUPERIOR
Revista de Investigación en Educación. ISSN: 1697-5200 / eISSN 2172-3427 | 168 formativas a las que estas alumnas hacen
referencia: “Aprender a gestionar el tiempo” (9,37%), “Mejorar la capacidad de síntesis de la información” (6,25%) y, en un 3,12% de los casos las restantes: “Cómo redactar”, “Trabajos por proyectos”, “Métodos de categorización”, “Análisis de entrevistas”, “Unidades didácticas”,
“Fundamentaciones teóricas” y
“Comunicación”.
Asimismo, basándose en las limitaciones detectadas en la investigación y como prospectiva del trabajo, nos centraremos en conseguir una mayor adecuación de la segunda de las muestras, relativa al cuestionario de evaluación de la acción formativa (ya que por el momento, no se ha conseguido el 100% de respuesta al instrumento diseñado). El incremento de la muestra productora de datos nos permitiría establecer un análisis factorial exploratorio para comprobar la consistencia interna del instrumento, la validez de éste y su capacidad explicativa.
BIBLIOGRAFÍA
AENOR (2008). UNE 66181:2008, Gestión de la Calidad. Calidad de la Formación Virtual.
Madrid: Asociación Española de Normalización y Certificación.
Aranguena, E., Ruíz, P. y Urrutia, I. (2010). Retos y respuestas de la gestión de la información en la Corporación Tecnológica Tecnalia.
Recuperado de: http://eprints.rclis.org/15891/
Borrás Gené, O. (2012). Píldoras formativas y videojuegos aplicados al estudio de la Ingeniería Acústica. Trabajo de Fin de Máster,
Universidad Politécnica de Madrid, Madrid, España. Recuperado de:
http://oa.upm.es/11711/
Bravo, J.L. (1994). Rendimiento de los vídeos de alta potencialidad expresiva. Comunicación y Pedagogía, 122, 23-26. Recuperado de:
http://www.ice.upm.es/wps/jlbr/Documentacion/ Potencia_Vid.pdf
Cardoso Espinosa, E.O. y Cerecedo Mercado, M.T. (2011). Propuesta de indicadores para evaluar la calidad de un programa de posgrado en Educación. Revista Electrónica de Investigación Educativa, 13 (2), 68-82.
Recuperado de:
http://www.scielo.org.mx/pdf/redie/v13n2/v13n2 a5.pdf
Coiduras Rodríguez, J., París Mañas,G., Torrelles Nadal, C. y Carrera Farran, X. (2014). La evaluación de competencias en una experiencia de formación dual de maestros: diferencias y semejanzas entre tutores de escuela y universidad. Estudios Pedagógicos, 40, 29-48.
Recuperado de:
http://mingaonline.uach.cl/scielo.php?script=sc i_arttext&pid=S0718-
07052014000300003&lng=es&nrm=iso&tlng= es
Díez, E., Alonso, A. , Verdugo, M.A., Campo, M., Sancho, I., Sánchez, S., … y Moral, E. (2011).
Espacio Europeo de Educación Superior: estándares e indicadores de buenas prácticas para la atención a estudiantes universitarios con discapacidad. Salamanca: INICO.
Dorado, C. (2006). El trabajo en red como fuente de aprendizaje: posibilidades y límites para la creación de conocimiento. Una visión crítica.
Educar, 37, 11-24. Recuperado de: http://ddd.uab.cat/pub/educar/0211819Xn37/02 11819Xn37p11.pdf
Fidalgo Blanco, A., Sein-Echaluce Lacleta, M.L., Lerís López, D., Castañeda Toledo, O., Florentín Dueñas, P. y Sánchez Sarasa, M.P. (2012). Adaptabilidad versus eficacia en procesos de autoaprendizaje online: Proyecto Teaching Innova. Actas del XIV Simposio Internacional de Informática (pp. 13-18). Recuperado de: http://www.researchgate.net/publication/26941 0007_Adaptabilidad_versus_eficacia_en_proce sos_de_autoaprendizaje_online_Proyecto_Teac hing-Innova
Hilera González, J.R. (2008). UNE 66181:2008, el primer estándar sobre calidad de la formación virtual. Revista de Educación a Distancia, RED, 7, 1-6. Recuperado de:
http://www.redalyc.org/articulo.oa?id=5471802 4003
ISO (2005). ISO/IEC 19796-1:2005, Information technology. Learning, education and training, Quality management, assurance and metrics, Part 1: General Approach. Ginebra:
International Standard Organization.
López, F. (2005). Metodología participativa en la enseñanza Universitaria. Madrid: Narcea.
Maceiras, R., Cancela, A. y Goyanes, V. (2010). Aplicación de nuevas tecnologías en la
JESÚS MIGUEL MUÑOZ CANTERO, EVA MARÍA ESPIÑEIRA BELLÓN y NURIA REBOLLO QUINTELA
Revista de Investigación en Educación. ISSN: 1697-5200 / eISSN 2172-3427 | 169 docencia universitaria. Formación
Universitaria, 3 (1), 21-26. Recuperado de: http://dx.doi.org/10.4067/S0718-
50062010000100004
Maroco, J. y Garcia-Marques, T. (2006). Qual a fiabilidade do alfa de Cronbach? Questoes antigas e solucoes modernas? Laboratório de Psicologia, 4 (1), 65-90. Recuperado de: http://publicacoes.ispa.pt/index.php/lp/article/vi ewFile/763/706
Martínez-Argüelles, M.J., Blanco Callejo, M. y Castán Farrero, J.M. (2013). Las dimensiones de la calidad del servicio percibida en entornos virtuales de formación superior. Revista de Universidad y Sociedad del Conocimiento, 10,
89-106. Recuperado de:
http://dx.doi.org/10.7238/rusc.v10i1.1411
Martínez-Fernández, R., García-Beltrán, A., Pastor- Moreno, S. y Blanco-Galán, L. (2009). ¿Se puede aprender una nueva forma de crear y usar contenidos educativos en la universidad?
Revista de Educación a Distancia, 9.
Recuperado de:
http://www.um.es/ead/red/M9/universidad.pdf
Mateo, J. (2000). La evaluación educativa, su práctica y otras metáforas. Barcelona: ICE-
Horsori.
Mateo, J. (ed.) (2009). Guía para la evaluación de competencias en el trabajo de fin de grado en el ámbito de las Ciencias Sociales y Jurídicas.
Barcelona: AQU Catalunya. Recuperado de:
http://www.aqu.cat/publicacions/guies_competencies/ guia_tfg_socials_es.html>
Real Decreto 1393/2007, de 29 de Octubre, por el que se establece la ordenación de las enseñanzas universitarias oficiales.
Real Decreto 43/2015, de 2 de febrero, por el que se modifica el citado Real Decreto Real Decreto 1393/2007, de 29 de octubre, por el que se establece la ordenación de las enseñanzas universitarias oficiales, y el Real Decreto 99/2011, de 28 de enero, por el que se regulan las enseñanzas oficiales de doctorado.
Rekalde Rodríguez, I. (2011). ¿Cómo afrontar el trabajo de fin de grado? Un problema o una oportunidad para culminar con el desarrollo de
las competencias. Revista Complutense de Educación, 22(2),179-193. Recuperado de: http://dx.doi.org/10.5209/rev_RCED.2011.v22.n
2.38488
Rullan Ayza, M., Fernández Rodríguez, M., Estapé Dubreuil, G. y Márquez Cebrián, M.D. (2010). La evaluación de competencias transversales en la materia Trabajos Fin de Grado. Un estudio preliminar sobre la necesidad y oportunidad de establecer medios e instrumentos por ramas de conocimiento. Revista de Docencia Universitaria,8 (1), 74-100. Recuperado de: http://red-
u.net/redu/index.php/REDU/article/view/146/pd f
Runte-Geidel, A. y Lorente García, R. (2014). Evaluación del practicum de pedagogía: cambios hacia el espacio europeo de educación superior. Estudios pedagógicos, 40 (2), 341-
360. Recuperado de:
http://www.scielo.cl/scielo.php?script=sci_artte xt&pid=S0718-
07052014000300020&lng=es&nrm=iso
Sánchez, F. García, J., López, D. Alier M., Cabré, J., García, H. y Vidal, E. (2015). El método socrático como guía del Trabajo de Fin de Grado. Revista de Investigación en Docencia Universitaria de la Informática, 8 (1), 53-62.
Recuperado de:
http://www.aenui.net/ojs/index.php?journal=rev ision&page=article&op=view&path%5B%5D