Personal Knowledge in Learning through Clinical Practice

Enseguida, se exponen algunas publicaciones y estudios que se encontraron interesantes para la problemática sobre el impacto generado por la implantación de los procesos de calidad y la evaluación en distintas Instituciones de Educación Superior en las IES de países de Europa, Oceanía, Norteamérica y Latinoamérica. Se finaliza con la presentación de un caso particular de estudio de Estonia.

En los últimos quince años, la revista Quality in Higher Education ha publicado pocos estudios sobre el impacto de los procesos de calidad en la educación superior. Dada la naturaleza especializada de la revista, puede parecer sorprendente y refleja la escasez general de la investigación significativa en este aspecto. Cerca de veinticinco artículos se enfocaron principalmente en el tema del impacto, de los cuales nueve se publicaron en una edición especial en 1997. A continuación en la tabla II se presentan algunos importantes casos de estudios a nivel global.

Tabla II. Síntesis de los principales estudios de casos sobre los impactos de la implantación de la calidad y la evaluación en las IES a nivel global

Autores Temática estudios de casos en IES

Resultados País

Newton (1997) Impacto positivo de la metodología en la planificación de acciones y difusión de buenas prácticas en las reformas (Norte de Gales Oriental Institute)

Resultados efectivos para el personal y los estudiantes.

Reino Unido

Harvey y Newton (2004)

Estudios de Publicaciones en calidad a nivel superior y la supervisión externa para completar la mejora interna.

Los beneficios respecto a la rendición de cuentas son: los avances en infraestructura, tecnología, recursos a nivel organizacional y la información pública, aunque no han logrado la transformación interna que se requiere.

Reino Unido

Harvey y Askling (2003)

La rendición de cuentas en los programa de estudio.

Genera la certificación ante el Estado y la sociedad. Lo cual es el objetivo dominante y cualquier elemento de mejora es secundario.

Askling (1997) Reflexiones sobre las experiencias en Linkoping University sobre el control de calidad externa.

La mejora interna con la supervisión externa de la Agencia Nacional, siempre se consideró importante para fomentar la calidad y la gestión estratégica, pero se perdió con la rendición de cuentas.

Suecia

Wahlen (2004) Evaluación del impacto de la auditoría nacional de calidad entre 1995 y 2002.

Las auditorías promueven el desarrollo, la política y la estructura del trabajo de calidad institucional, pero el cambio cultural a nivel de los departamentos es modesto.

Suecia

Amaral, A. et al., (2006)

El alto grado de optimismo de los rectores por los procesos de calidad externos.

Los rectores se centraban en resultados, y los coordinadores se fijaban en procedimientos, servicios, gestión estratégica, estructura y mejoras en el aprendizaje.

Portugal

Minelli et al.,

(2006) Estudio comparativo entre instituciones holandesas e italianas, una visión positiva de la evaluación para contribuir al cambio en las universidades.

Las normas y procedimientos utilizados por los organismos nacionales o agencias externas, pueden ser un recurso importante para legitimar el cambio cultural y organizativo de la gestión académica.

Holanda, Italia

Baldwing

(1997) Análisis en la Universidad de Monash después de la implantación del sistema nacional de aseguramiento de la calidad a principios de 1990. La inconformidad se debió a la falta de transparencia en los procesos de evaluación.

El feedback de los estudiantes fue clave para mejorar los aspectos negativos. El autor argumenta, que una combinación de procesos externos e internos dio lugar a tres beneficios: rigurosos procedimientos de aprobación, mayor conciencia de los estudiantes para optimizar la enseñanza y el aprendizaje, y un cambio perceptible en el ambiente

Australia

Smith (1997) Situación en el Estado de Virginia, para demostrar la eficacia de los procesos de aseguramiento de la calidad -programas de evaluación- en los EE.UU.

A pesar de los resultados positivos en este caso, todavía había poca relación entre la evaluación y la planificación estratégica.

Estados Unidos

Silva et al., (1997)

La evaluación de la educación superior, en América Latina se basa en la revisión de los procesos.

Efectos positivos en los procesos de los sectores público y privado, revelan un inicio del cambio en la cultura institucional.

Chile Lemaitre

(2004)

Estudio sobre el desarrollo de mecanismos de aseguramiento de la calidad, analizando los cambios en el sistema de educación superior y los desafíos a la calidad de la oferta educativa.

Los procesos de concesión de licencias obligatorias se implantaron después de un proceso voluntario de acreditación con una previa autoevaluación.

El aseguramiento de la calidad cuenta con mecanismo aceptados por las IES.

Chile

Fuente: elaboración propia de la autora, 2014.

Estudio de caso sobre la evaluación externa e interna, caso Estonia:

Dentro del marco del proceso de Bolonia, la evaluación de la calidad es tratada como un medio nacional de control, y un instrumento que debe orientar a las IES y, la introducción de la evaluación interna en el sistema de calidad. En la práctica, estos estudios demandan mucho tiempo y presupuestos onerosos, por ejemplo, en el caso de Estonia, más de mil doscientos programas se sometieron a la evaluación de la calidad externa entre 1997 y 2007, y el costo del proceso fue aproximadamente de 4,6 millones de euros Heidmets, (2008). En el gran esfuerzo destinado a la evaluación externa se afincaron altas expectativas en su impacto, pero los resultados no fueron los esperados, pues no se advirtieron efectos importantes en la vida interna de las instituciones educativas analizadas. Sin embargo, en el año 2010 fueron

revisados los resultados y a partir del 2012, se decide desarrollar un nuevo sistema nacional de calidad teniendo en cuenta la experiencia desarrollada.

El diseño del estudio realizado en Estonia, incluyó los siguientes pasos: • Documentos para definir los aspectos de los efectos

• Identificación de la muestra • Entrevistas

• Análisis de datos

Las variables independientes consideradas en la evaluación externa fueron: los procesos de autoevaluación y la visita y el informe de la comisión de expertos.

De la misma manera, los informes de los expertos de los comités de acreditación de los programas de Estonia sirvieron para identificar los aspectos de influencia en los programas y la institución. Se examinaron diez áreas de impacto como variables dependientes en el estudio:

1. Estructura universitaria.

2. Objetivos estratégicos, la gestión y políticas. 3. Recursos (didácticos e infraestructura). 4. Plan de estudios-proceso curricular. 5. Personal académico.

6. Estudiantes.

7. La garantía del sistema de calidad de la universidad. 8. Relaciones exteriores.

9. Reputación de los profesores del plan de estudios. 10. El aprendizaje organizacional.

Se concluye que hubo numerosos intentos para identificar las posibles áreas de cambio, resultante de la evaluación externa, por lo tanto, la creación de la lista de áreas de impacto, se basó en estudios previos por Brennan & Shah (2000), Wahlen (2004), Carr et al., (2005), Brunetto & Farr-Wharton (2005) y Horsburgh (1999), sobre todo en las clasificaciones de Huisman et al. (2007) y Valima et al. (1998).

Criterios establecidos para valorar los efectos o impactos de la acreditación: fuerte, moderado y sin impacto.

Resultados del estudio: los directivos de las universidades y los directores de programas debían calificar los dos aspectos del proceso de acreditación; a) el autoanálisis o autoevaluación y b) la visita de expertos y el informe. Por lo que los resultados en síntesis fueron los siguientes:

• El área calificada de fuerte impacto o efecto por la evaluación interna y la visita de pares: el currículo del plan de estudios.

• Presentaron un impacto moderado en los efectos resultantes de la evaluación interna y la visita de pares: los materiales de enseñanza y salas; el personal académico y el área de estudiantes y egresados de los programas.

La estructura, los objetivos y estrategias del programa, los departamentos y las facultades, al igual que las políticas y gestión administrativa, y la financiación universitaria, no presentaron mayores efectos, pero hubo contradicciones entre los directivos y los directores de programas, sobre todo en cuanto a los aspectos de la reputación del plan de estudios y del sistema de aseguramiento de la calidad. La opinión general señaló que la acreditación no tuvo impacto en una serie de áreas de influencia: tanto en la estructura de la universidad, como en la administrativa del plan de estudios; las estrategias y sus objetivos. Tampoco se encontraron efectos en la financiación universitaria ni en las políticas universitarias, ni en el sistema de indicadores de desempeño. Al comparar los dos elementos de la evaluación externa de la calidad, es decir, el autoanálisis y la visita de expertos, los directores de los programas consideran que el autoanálisis es más eficaz, mientras que los líderes de la institución hicieron hincapié en la visita de expertos y el informe.

La reflexión de los autores evidencia, que las IES tienen el compromiso de mejorar su calidad académica, y para ello, deben buscar por un lado, su transformación interna a través de la autoevaluación sustentada en un enfoque institucional y por el otro, un nivel adecuado de evaluación externa por Pares académicos, que les permita no sólo dar cuenta del cumplimiento de sus objetivos al Estado, sino también, generarle confianza a la sociedad frente a su proyecto institucional. En resumen, el modelo deseado de mejora interna debe incorporar una dialéctica constructiva, que incluya a todos los miembros de la organización institucional, el cual debe estar avalado por la interconexión del proceso de la evaluación externa. Más aún, requiere del fomento de un enfoque participativo que permita la interacción de todos los estamentos de la organización, desde los directivos hasta los operativos. Esto implica el desarrollo de innovadoras interrelaciones organizacionales que permitan la cooperación y comunicación interinstitucional, y el diseño de una estrategia que integre la mejora, el aprendizaje y la enseñanza. La importancia de este enfoque, radica en el hecho de que los involucrados asumen una responsabilidad que transciende el simple cumplimiento de un rito burocrático, y conduce a la interacción dialéctica entre el equipo de evaluación interna, en contraste con la práctica en materia del equipo de auditoría externa.

Según los resultados de algunos casos, la implantación de los sistemas de calidad y de evaluación no han tenido siempre la mejor aceptación por los académicos, pues son considerados como sistemas extraídos del contexto empresarial que genera una actividad rutinaria y una pesada carga extra de trabajo sin ningún trasfondo.

Para terminar, es importante exponer algunas experiencias de países y universidades en Latinoamérica. Estos estudios de casos servirán para efectuar un análisis como aporte a la problemática que concierne a la presente investigación.

2.2.4 Estudios de casos sobre evaluación, implantación de la mejora y cambios en