A continuación apuntamos las variables consideradas en el estudio global (a nivel de la Comunidad) de los que se recoge información a través de los cuestionarios de opinión y de las pruebas de rendimiento, así como el rol que desempeñan en la evaluación.
Para realizar la clasificación de variables, se ha tomado como referencia el estudio realizado por Jornet, González, Pérez Carbonell, Sánchez Delgado, Chiva, Ramos, Perales y Gastaldo (2000), adaptado del modelo de evaluación desarrollado por Sttufflebeam que, tal y como justifica Escudero (2003) supone “una de las últimas aportaciones a la actual concepción de la investigación evaluativa en educación, que representa en buena medida la visión del panorama actual, rico y plural.” Stufflebeam invoca a la responsabilidad del evaluador, que debe actuar de acuerdo a principios aceptados por la sociedad y a criterios de profesionalidad, emitir juicios sobre la calidad y el valor educativo del objeto evaluado y debe asistir a los implicados en la interpretación y utilización de su información y sus juicios.
Para evaluar la educación en una sociedad moderna, Stufflebeam (1994) nos dice que se deben tomar algunos criterios básicos de referencia como los siguientes:
Necesidades educativas. Es necesario preguntarse si la educación que se proporciona cubre las necesidades de los estudiantes y de sus familias en todos los terrenos a la vista de los derechos básicos, en este caso, dentro de una socie- dad democrática.
Equidad. Hay que preguntarse si el sistema es justo y equitativo a la hora de proporcionar servicios educativos, el acceso a los mismos, la consecución de metas, el desarrollo
de aspiraciones y la cobertura para todos los sectores de la comunidad.
Factibilidad. Hay que cuestionar la eficiencia en la utilización y distribución de recursos, la adecuación y viabilidad de las normas legales, el compromiso y participación de los implicados y todo lo que hace que el esfuerzo educativo produzca el máximo de frutos posibles.
Excelencia como objetivo permanente de búsqueda. La mejora de la calidad, a partir del análisis de las prácticas pasadas y presentes es uno de los fundamentos de la investigación evaluativa.
Tomando el referente de estos criterios y sus derivaciones, Stufflebeam resume una serie de recomendaciones para llevar a cabo buenas investigaciones evaluativas y mejorar el sistema educativo. Estas recomendaciones son las siguientes:
1) Los planes de evaluación deben satisfacer los cuatro requerimientos de utilidad, factibilidad, legitimidad y precisión. 2) Las entidades educativas deben examinarse por su integración
y servicio a los principios de la sociedad democrática, equidad, bienestar, etc.
3) Las entidades educativas deben ser valoradas tanto por su mérito (valor intrínseco, calidad respecto a criterios generales) como por su valor (valor extrínseco, calidad y servicio para un contexto particular), como por su significación en la realidad del contexto en el que se ubica.
4) La evaluación de profesores, instituciones educativas, programas, etc, debe relacionarse siempre con el conjunto de sus deberes, responsabilidades y obligaciones profesionales o
institucionales, etc. Quizás uno de los retos que deben abordar los sistemas educativos es la definición más clara y precisa de estos deberes y responsabilidades. Sin ello, la evaluación es problemática, incluso en el terreno formativo.
5) Los estudios evaluativos deben ser capaces de valorar hasta qué medida los profesores y las instituciones educativas son responsables y rinden cuentas del cumplimiento de sus deberes y obligaciones profesionales.
6) Los estudios evaluativos deben proporcionar direcciones para la mejora, porque no basta con emitir un juicio sobre el mérito o el valor de algo.
7) Recogiendo los puntos anteriores, todo estudio evaluativo debe tener un componente formativo y otro sumativo.
8) Se debe promover la autoevaluación profesional, proporcionando a los educadores las destrezas para ello y favoreciendo actitudes positivas hacia ella.
9) La evaluación del contexto (necesidades, oportunidades, problemas en un área,...) debe emplearse de manera prospectiva, para localizar bien las metas y objetivos y definir prioridades. Asimismo, la evaluación del contexto debe utilizarse retrospectivamente, para juzgar bien el valor de los servicios y resultados educativos, en relación con las necesidades de los estudiantes.
10) La evaluación de las entradas (inputs) debe emplearse de manera prospectiva, para asegurar el uso de un rango adecuado de enfoques según las necesidades y los planes. 11) La evaluación del proceso debe usarse de manera prospectiva
retrospectiva para juzgar hasta qué punto la calidad del proceso determina el por qué los resultados son de un nivel u otro (Stufflebean y Shinkfield, 1987).
12) La evaluación del producto es el medio para identificar los resultados buscados y no buscados en los participantes o afectados por el objeto evaluado. Se necesita una valoración prospectiva de los resultados para orientar el proceso y detectar zonas de necesidades. Se necesita una evaluación retrospectiva del producto para poder juzgar en conjunto el mérito y el valor del objeto evaluado.
13) Los estudios evaluativos se deben apoyar en la comunicación y en la inclusión sustantiva y funcional de los implicados (stakeholders) con las cuestiones claves, criterios, hallazgos e implicaciones de la evaluación, así como en la promoción de la aceptación y el uso de sus resultados.
14) Los estudios evaluativos deben emplear múltiples perspectivas, múltiples medidas de resultados, y métodos tanto cuantitativos como cualitativos para recoger y analizar la información. La pluralidad y complejidad del fenómeno educativo hace necesario emplear enfoques múltiples y multidimensionales en los estudios evaluativos
15) Los estudios evaluativos deben ser evaluados, incluyendo metaevaluaciones formativas para mejorar su calidad y su uso y metaevaluaciones sumativas para ayudar a los usuarios en la interpretación de sus hallazgos y proporcionar sugerencias para mejorar futuras evaluaciones.
Estas quince recomendaciones proporcionan elementos esenciales para desarrollar un modelo evaluativo denominado C.I.P.P.5,
donde los elementos a evaluar son:
Contexto: Elementos que acompañan al desarrollo de la enseñanza, pero que no dependen de la acción del centro educativo.
Entrada: características de los alumnos, familias, recursos humanos del centro educativo, así como recursos materiales del mismo.
Proceso: Elementos que describen cómo se produce la enseñanza en los centros educativos.
Producto: Resultados de aprendizaje y/o niveles de satisfacción de los implicados.
Para una correcta comprensión de las variables se ha desarrollado una nomenclatura que incluye el enunciado del ítem y el número dentro del cuestionario/prueba y la fuente de la que se extraen:
A: Cuestionario de alumnos F: Cuestionario de familias T: Cuestionario de tutores
E.D: Cuestionario de Equipos directivos C: Cuestionario de coordinadores
Las variables sobre las que se centra nuestro estudio son las que tienen como fuente de información los Alumnos y sus Familias. Las que provienen de otras fuentes (Equipos directivos, profesores,
5
coordinadores y tutores), se utilizan a nivel descriptivo como elemento de contextualización del estudio.
Tabla 1. Variables de contexto. Fuente: Jornet y otros (2000)
FUENTE
INDICADORES ITEMS
A F T E.D. C
Indiquen si en el domicilio familiar existen los recursos que
se citan a continuación 2
¿Qué disponibilidad de espacio tiene su hijo/a? 3
¿Tienes una habitación para ti solo? 12
¿Con quién compartes la habitación? 13
¿Dónde estudia normalmente su hijo/a? 4
Señala las habitaciones que tiene tu casa 11
¿Tienes casa de vacaciones? 14
¿Hay libros en tu casa además de los que tú tienes para el
colegio? 15
Aproximadamente, ¿cuántos libros hay en su casa? 16 5
¿Tienes libros en tu habitación además de los del colegio? 17
Indicadores socioeconómicos y
culturales
¿Cuál es la situación laboral de la madre/padre?6 10 8
42 45
¿Con qué frecuencia hablan con su hijo/a sobre cómo van
sus estudios? 9
¿Ayudan como padre/madre a su hijo/a en la realización de
trabajos escolares? 11
¿Recibe su hijo/a algún apoyo particular en sus estudios? 12
Especifiquen en qué área/s de conocimiento recibe su
hijo/a algún apoyo y cuántas horas semanales le dedica 13
¿Con qué frecuencia se dan las siguientes situaciones en
el ámbito familiar? 16
Indiquen quién se ocupa normalmente del seguimiento de
los estudios de su hijo 18
Cuando surge un conflicto en relación con los estudios de su hijo/a. ¿Con qué frecuencia se dan las siguientes situaciones?
19
Apoyo familiar en el desarrollo escolar
del hijo/a
Indiquen qué importancia dan a que su hijo/a obtenga
buenos resultados en las siguientes áreas 20
Relación con Padres
¿Cómo es tu relación con tu padre y con tu madre? 36
¿Cuándo ves la televisión en casa diariamente? 29
Normalmente, ¿cuánto tiempo dedicas cada día después de clase a hacer los deberes? 30
¿Después de clase recibes apoyo o ayuda para realizar los
trabajos escolares? 30.1
¿Quién te ayuda? 30.2
Señala cuál o cuáles de estas actividades realizas después de clase alguna vez o a lo largo de la semana/¿Qué actividades fuera del horario escolar realiza su hijo/a?
31 6
Indiquen aproximadamente el tiempo que dedica su hijo a... 7
Señalen cuanto tiempo dedica su hijo/a a las siguientes
actividades realizadas fuera del centro 8
Actividad Extraescolar
¿Cuántas horas semanales dedica su hijo al estudio fuera
del centro escolar? 14
6
Este item juega un doble rol, por lo que se ha incluido en varios indicadores y/o en varias categorías (Contexto, Entrada, Proceso y Producto).
Continuación Tabla 1. Variables de contexto. Fuente: Jornet y otros (2000)
¿En qué grado participan ustedes en los siguientes aspectos de la vida escolar del centro educativo de su hijo/a?
22
¿Cuál es la vía habitual de comunicación entre el centro
educativo de su hijo/a y ustedes? 23
¿Pertenecen a alguna asociación de padres y madres del
centro educativo donde estudia su hijo/a? 26
¿Conocen el funcionamiento del consejo escolar del centro
educativo de su hijo/a? 28
Durante el curso, ¿han tenido alguna entrevista con alguno
de los profesores de su hijo/a? 30
Indiquen con qué frecuencia se han entrevistado con algún
profesor de su hijo/a respecto a... 31
Cuando han querido hablar con algún profesor/a de su hijo/a sobre los estudios de sus hijos, ¿les ha resultado fácil contactar?
33
¿Han tenido ustedes conflictos con algún profesor/a de su
hijo/a? 35
Implicación de los padres con el Centro
Escolar
Señalen la importancia que conceden a los siguientes
aspectos de la relación entre familia y centro. 36 Tabla 2. Variables de entrada. Fuente: Jornet y otros (2000)
FUENTE
INDICADORES ITEMS
A F T E.D. C
¿En qué año naciste? 1
¿En qué mes naciste? 2
Sexo del alumno/a o hijo/a 3 1
¿Quién o quienes han contestado a este cuestionario? 49
¿En qué año nació la madre/el padre? 40 43
¿Qué estudios realizó la madre/el padre? 41 44
¿Cuál es la situación laboral de la madre/el padre?7 10 8
42 45
Señalen los miembros de la familia que conviven en su
hogar 46
Nº total de hijos de la unidad familiar 47
Nº total de personas que viven en el hogar 48
¿Cuántos hermanos tienes? 4
Por edad, ¿qué lugar ocupas tú? 5
¿Con quién vives habitualmente en casa? 6
Identificación del sujeto
¿Qué lenguas se hablan habitualmente en casa? 18
¿Con cuántos años empezaste a ir al colegio o a la
guardería? 19
¿Toda la primaria la has estudiado en este colegio? 22
¿Desde qué curso vienes a este colegio? 23
El colegio al que fuiste antes que a éste, ¿cómo era? 24
El colegio al que fuiste antes que a éste, ¿dónde estaba? 25
¿Cómo sueles ir al colegio? 20
¿Cuánto tiempo te cuesta aproximadamente ir al colegio? 21
¿Faltas a clase? 32
¿Has repetido algún curso? Si es así, señala cuál 27
Características escolares del
alumno/a
¿Cuál fue el motivo por el que tuviste que repetir curso? 28
7
Este item juega un doble rol, por lo que se ha incluido en varios indicadores y/o en varias categorías (Contexto, Entrada, Proceso y Producto).
Continuación Tabla 2. Variables de entrada. Fuente: Jornet y otros (2000)
Expectativas ¿Hasta qué nivel piensas seguir estudiando? 26 17
¿Cuál o cuales de estas lenguas hablas normalmente en
casa? 46
Indica cuál o cuales de estas lenguas entiendes y hablas, sin incluir las que ya has señalado en la pregunta anterior 47
Área de Inglés
¿A qué edad empezaste a estudiar Inglés? 48
Indique la titularidad del centro escolar 1
Año de creación del centro 2
Anote el nº de aulas y de alumnos matriculados por niveles 3
Indique los siguientes datos referidos al nivel de Ed.
Primaria 4
Anote los siguientes datos referidos a la matriculación en 6º
de Ed. Primaria 5
Si el centro tiene más de una línea en Ed. Primaria, ¿se han
mantenido los grupos desde el primer curso? 6
¿Cuenta el centro con servicio de transporte escolar? 8
¿Considera que el centro está bien comunicado para la
mayoría de alumnos que asisten? 11
¿Hay en el centro servicio de comedor? 12
¿Existen asociaciones de padres y madres en el centro
educativo al que asiste su hijo/a? 25
Indique el nº de profesores/as que... 17
Curso académico en que fue nombrado el actual director 18
¿Por qué procedimiento fue nombrado el actual director? 19
Complete los datos de la tabla siguiente relativos al
absentismo del centro. 28
¿Qué porcentaje de absentismo se cubre con personal
substituto (oficial o coyuntural)? 29
¿Existe un plan de formación en el centro que afecte al
profesorado de Ed. Primaria? 21
Si existe un plan de formación, complete los siguientes
datos 22
Valore del 1 al 10 los siguientes datos. 23
Anote los datos en la tabla siguiente referidos al nº de
familias de alumnos/as de Educ. Primaria que... 30
Este cuestionario lo va a contestar en calidad de
coordinador/a de... 1
¿Cuántos cursos lleva de forma continuada como
coordinador? 2
Características generales de los centros seleccionados
para el estudio
¿Cuál ha sido el procedimiento para su elección como
Continuación Tabla 2. Variables de entrada. Fuente: Jornet y otros (2000)
Indique el nº de alumnos que forman el grupo de 6º de Ed.
Primaria objeto de estudio 1
Indique cuántos alumnos de su grupo han faltado a clase, a lo
largo de este curso 37
Indique el nº de alumnos que a lo largo de su escolarización
en la Ed. Primaria ha repetido 3
Indique el nº de alumnos que al finalizar ciclo promocionó con evaluación pendiente de calificación positiva en las siguientes áreas de conocimiento
4
Indique el nº de alumnos que al finalizar ciclo promocionó con
... 5
Indique el nº de alumnos con N.E.E. 6 26
Conteste “sí” o “no” a las siguientes afirmaciones referidas a
la atención del alumnado con N.E.E. 27
Indique el nº de alumnos a los que se le ha realizado
Adaptación Curricular Significativa 7
Indique el nº de alumnos que ha estado escolarizado en el
centro 8
¿Qué nº de alumnos/as de Ed. Primaria utiliza el transporte
escolar? 9
¿Cuántos de estos alumnos reciben ayuda económica para el
transporte escolar? 10
¿Qué nº de alumnos de Ed. Primaria utiliza el comedor? 13
¿Cuántos de estos alumnos reciben ayuda económica para el
comedor? 14
Características de los alumnos de Educación Primaria
Díganos también qué nº de alumnos de Ed. Primaria recibe
alguna ayuda para libros de texto? 15
Especifique el nº de profesores de Ed. Primaria que
imparten clase en un solo... 7
Indique el nº de maestros que imparten clases al grupo de
alumnos de 6º Ed. Primaria objeto de este estudio 2
¿Ha sido tutor de este grupo los dos años del ciclo? 9
¿Cuántos profesores especialistas existen en Ed. Primaria
en este centro? 8
Anote el nº de profesores y de personal no docente que trabaja en el centro a jornada completa o parcial y el promedio de horas semanales de permanencia y la situación laboral
16
Indique también, referido a los diez últimos años, el nº de... 20
A continuación se presentan algunos criterios con los que se asignan las tutorías de Ed. Primaria. Por favor, establezca un orden.
24
Personal Docente
Indique el nº de tutores que ha tenido el actual grupo de 6ª
de Ed. Primaria 25
Tabla 3. Variables de proceso. Fuente: Jornet y otros (2000)
FUENTE
INDICADORES ITEMS
A F T E.D. C
Indique el grado de motivación de su hijo/a con respecto a los estudios
1 5
Características
del hijo/a Indiquen en qué medida se manifiestan las siguientes conductas en su hijo/a
2 1
¿Cómo crees tú que eres? 33
¿Cómo son tus compañeros/as de clase? 34
¿Fuera del colegio, sueles quedar con algún compañero para jugar
o estudiar? 35
Autoimagen e imagen de los
compañeros
Continuación Tabla 3. Variables de proceso. Fuente: Jornet y otros (2000)
Intereses y actitudes
Indica en qué medida es importante para ti…8 44
Mi colegio es…. 37
Mi profesor/a (de lengua, matemáticas, conocimiento del medio,
inglés)... 38
¿Qué piensas de las siguientes áreas? 39
¿Cómo trabajáis en tu clase? 41
Dinos algo más de tu clase 42
¿Qué es importante para sacar buenas calificaciones en tu clase? 43
Indica en qué medida es importante para ti...4 44
Opinión sobre el colegio, profesores y
asignaturas
¿Estás de acuerdo con las siguientes frases? 45
¿Has realizado o estás realizando alguna actividad para aprender inglés fuera del horario escolar? 49
Indica cuál o cuáles de las siguientes actividades has realizado o
estás realizando 50
¿Tienes la ocasión de practicar inglés fuera de las horas del colegio? 51
¿Con qué frecuencia se dan las siguientes situaciones en tu clase
de inglés? 52
¿Te mandan deberes/tareas de inglés para hacer en casa? 53
Indica el tiempo que dedicas a la semana a hacer estos deberes o
tareas 54
¿Cuál es tu opinión sobre las siguientes cuestiones? 55
Área de Inglés
¿Crees que tienes facilidad para los idiomas? 56
¿Cuántos profesores especialistas existen en Ed. Primaria en este
centro?6 1
Tiempo dedicado a cada área a lo largo del ciclo, indicando el nº de
sesiones y la duración efectiva en minutos. 9
La programación realizada por los profesores para este curso
consistió en… 11
¿Con qué frecuencia se pide a los alumnos que hagan trabajos
escritos que requieran la consulta de documentación escrita? 12
Desde el punto de vista de los profesores del ciclo, y de modo gral, ¿cuántos de estos procedimientos de enseñanza tienen más importancia?
17
Revisión de cuestiones de
docencia
¿Con qué frecuencia se reúne el profesorado para tratar los
siguientes aspectos? 23
8
Este item juega un doble rol, por lo que se ha incluido en varios indicadores y/o en varias categorías (Contexto, Entrada, Proceso y Producto).
Continuación Tabla 3. Variables de proceso. Fuente: Jornet y otros (2000)
Indique en qué actividades de formación relacionadas con su práctica docente participó a lo largo de los tres últimos cursos académicos, concretando el nº de horas que se certificaron
10
Indique el tiempo semanal que ha dedicado a lo largo del ciclo a
impartir cada una de las siguientes áreas 15
Indique qué importancia concede en su práctica docente a los
siguientes aspectos. 16 14
Al comenzar un tema, unidad didáctica o actividad nueva ¿qué
importancia concede a los siguientes procedimientos? 17 16
Desde su punto de vista, ¿qué importancia concede a los
siguientes procedimientos de enseñanza? 24
En la preparación de las clases ¿con qué frecuencia el profesorado de este ciclo lleva a cabo las actividades que se especifican a continuación?
25 15
Indique con qué frecuencia utiliza las siguientes prácticas docentes 20 18
Indique con qué frecuencia utiliza en sus clases los siguientes
materiales curriculares y recursos didácticos. 22 19
Indique en qué ámbitos trabaja el profesorado cada uno de los
siguientes aspectos. 22
Durante el mes anterior a la contestación de este cuestionario, ¿con qué frecuencia ha utilizado las siguientes actividades de enseñanza-aprendizaje con sus alumnos?
18
Indique con qué frecuencia los alumnos realizan en el aula las
siguientes actividades… 19
Indique con qué frecuencia manda a sus alumnos tareas para
realizar en casa 21
Indique la frecuencia con la que se utiliza el libro de texto en clase
como… 23 20
¿Con qué frecuencia aconseja a sus alumnos la lectura de algún libro con la finalidad de consulta o documentación (excluidos sus libros de texto)?
26
¿Con qué frecuencia aconseja a sus alumnos la lectura de algún libro con la finalidad de fomentar el gusto por la lectura (o por el mero placer de leer)?
27
¿ Con qué frecuencia pregunta a sus alumnos sobre sus hábitos
de lectura y sus gustos como lectores? 28
¿Con qué frecuencia orienta a sus alumnos sobre lecturas, en
cuanto a géneros, estilos, editoriales, etc? 29
¿Con qué frecuencia se comenta en clase algún libro u obra
literaria? 30
¿Cuánto tiempo dedican a la semana sus alumnos a la lectura libre en clase?
31 33
Práctica como docente
¿Con qué frecuencia pide a sus alumnos que hagan trabajos
escritos que requieren la consulta de documentación escrita? 32