Los actores locales deberían participar en la decisión respecto a qué cambios quieren ver. En una reunión, un taller, e incluso en conversaciones informales, se puede preguntar a los miembros de la comunidad qué cambios esperan alcanzar una vez finalizado el proyecto. Se puede preguntar por ejemplo: «Imagínese que el proyecto se acaba. ¿Cómo se beneficiará la gente? ¿Cómo afectará a sus vidas? ¿Qué ocurrirá? ». La respuesta que la gente dé a estas preguntas ayudará a encontrar los indicadores que necesita para hacer un seguimiento del progreso y los cambios.
Un indicador es un factor o variable -‐cuantitativa o cualitativa-‐ que proporciona un medio sencillo y fiable para medir logros y reflejar los cambios vinculados con una intervención. Si bien los indicadores son señales que nos indican que determinados cambios han o no ocurrido, no nos dicen cómo o por qué se produce el cambio. En el contexto de las teorías del cambio y las evaluaciones guiadas por teoría, los indicadores proporcionan los medios para valorar el producto, el resultado, el impacto y la sostenibilidad, en comparación con las expectativas que refleja la teoría del cambio que guía el programa. En resumen, los indicadores ofrecen un medio para medir los cambios deseados vinculados con una intervención. Mientras que las teorías del cambio tratan de explicar cómo o por qué se producen los cambios, los indicadores muestran la medida en que los cambios se han producido.
Por ejemplo, los programas de salud podrían utilizar indicadores tales como la prevalencia de la deficiencia de ciertos minerales, medida por pruebas de sangre en una muestra de población, o la prevalencia de una enfermedad concreta medida por las revisiones de los registros hospitalarios para evaluar los resultados de los programas relacionados. Sin embargo, a menudo los cambios deseados en los programas sociales son más abstractos e intangibles, como por ejemplo la búsqueda de mejora en las relaciones intrapersonales y el aumento de la confianza y el entendimiento entre diferentes actores. Los indicadores, en tales casos, en lugar de medir el cambio exacto, ayudan a aproximar el cambio. Los mejores indicadores son aquellos aproximadores (llamados a veces proxy) más cercanos de los cambios intangibles, como la mejora en las relaciones, que se puede esperar. Es fundamental que los indicadores estén estrechamente vinculados al contexto local, lo cual se logra a través de la participación de los actores locales en el desarrollo de los mismos.
Los indicadores son la evidencia medible de haber alcanzado un objetivo, por lo general signos visibles (por ejemplo, notas de lectura, asistencia) que demuestran que el resultado ha sido cumplido. Los indicadores pueden incluir medidas cuantitativas o información cualitativa. Cada indicador tiene que tener cuatro blancos: ¿Cuántos de quiénes o qué alcanzarán qué nivel para cuándo? Esas metas de los indicadores deben basarse en cuántos o qué proporción de personas o conductas necesita cambiar para que el resultado se alcance. ¿Cuánto su grupo objetivo necesita cambiar? En otras palabras, qué bueno es "suficientemente bueno"? Por ejemplo, si los estudiantes mejoran las calificaciones de lectura por un grado , es eso suficiente? O cuántas sesiones los participantes deben asistir a una clase o un taller para lograr la habilidad que se enseña? Una vez más, el nivel o la calidad del cambio necesario es determinado por lo que usted cree que se necesita para alcanzar el resultado.
El plazo para alcanzar cualquier resultado dado depende de el cronograma para alcanzar los resultados anteriores y posteriores en la ruta de cambio. Así, por ejemplo, si los residentes no han completado un curso de alfabetización hasta el final del año, no es realista esperar ver un aumento en las tasas de alfabetización más temprano. Del mismo modo, si el resultado a largo plazo es que los padres leen a sus hijos dentro de tres años, se puede trabajar hacia atrás para determinar para cuándo tienen que tener mayor alfabetización y su motivación. Si bien ActKnowledge recomienda que los indicadores básicos se identifiquen para todos los resultados en la teoría, nos damos cuenta de que los grupos pueden optar por desarrollar plenamente y recoger los datos de un subconjunto seleccionado de indicadores. Para cada indicador que se desarrolla, recuerde desarrollar todos sus blancos (es decir, cuántos, ¿quién o qué, qué nivel, para cuándo). El indicador debería hacer que sea muy claro para todos lo que usted considere el éxito para un resultado determinado.
Por lo general, los indicadores se determinan en dos momentos diferentes durante la fase de construcción de la Teoría del Cambio. Uno de ellos es durante la construcción de las rutas de precondiciones. A veces, puede ser muy útil detenerse y desarrollar un indicador para un resultado que el grupo puede no tener claro o bien si hay algún desacuerdo sobre el mismo. Desarrollar un indicador explicando el éxito medible para el resultado va a obligar al grupo a situarse en la misma página sobre ese resultado. El otro momento cuando ya se han identificado todos los resultados. En este punto, es posible que desee dividir los resultados entre varios participantes y asignar el desarrollo de indicadores como una tarea, y luego volver y revisarlos juntos como grupo. También puede asignar el desarrollo de los indicadores a los investigadores del grupo y luego contar con la opinión de todo el grupo sobre los mismos. El desarrollo de indicadores no suele desarrollarse en las reuniones de grupo. A menudo es necesario hacer referencia a fuentes externas para ver lo que otros han utilizado como indicadores de los diversos resultados o para averiguar lo que se dispone de datos, etc.
Cómo desarrollar indicadores:
1. Refinar o clarificar la teoría del cambio
2. Lluvia de ideas sobre formas de saber si el cambio se ha producido.
3. Identificar los indicadores más útiles que sean adecuados, confiables, transferibles / adaptables, válidos y prácticos.
4. Permanecer abierto a refinamientos adicionales
Se deben elaborar indicadores para cada una de las condiciones presentes en la Ruta del Cambio, a fin de poder entender si dicha condición se está desarrollando y qué efecto tiene en el contexto del cambio. Por lo tanto, los indicadores de cambio deberían ayudarnos a comprender hasta qué punto y de qué manera estas condiciones se están produciendo en el contexto de intervención. No corresponde incorporar actividades en esta instancia, sino condiciones de cambio. Si bien en algún caso puede sentirse que se pierde la complejidad al pensar en los indicadores de cambio, si el proceso metodológico ha sido llevado a conciencia, se puede estar simplificando correctamente.
Con vista al seguimiento y monitoreo, es posible que se quiera priorizar a alguno de esos indicadores. La revisión periódica de los indicadores ayudará a ajustar nuestra Teoría de Cambio tanto a nivel político-‐estratégico (acción sobre las condiciones para el cambio) como cognitivo (supuestos que sustentan nuestra lógica de cambio).
Por otro lado, se debe estar alerta al problema conocido como el "dilema del indicador”, el cual hace referencia a que los indicadores elegidos para verificar cierto impacto sólo pueden identificar el cambio esperado, y sólo reflejarán aquellos cambios que se hayan hecho explícitos o bien acordados por las partes interesadas. Pero, ¿qué sucede cuando el cambio es inesperado, o no fue acordado por las partes interesadas, o cuando un grupo en particular no explicitó un área de cambio que era importante para ellos?
Algunas agencias de desarrollo han experimentado con enfoques para evaluar el cambio que no utilizan indicadores predeterminados -‐ por el contrario, las personas en situación de pobreza y vulnerabilidad revisan los cambios que han tenido lugar durante un determinado tiempo y otros factores relacionados. Un ejemplo de ello es la metodología de el Cambio Más Significante (o MSC, por sus siglas en inglés).
1.6. Narración
La narración es un resumen de la teoría que explica los caminos o rutas del cambio, destacan algunas de los principales supuestos, fundamentos (rationales), e intervenciones, y presenta un caso convincente en cuanto a cómo y por qué la iniciativa espera marcar una diferencia (Actknowledge, 2012). La narración también puede contener alguna información que sea adicional a lo que está en la teoría, tal como la visión general, la historia de cómo su iniciativa apareció , y algo de contexto comunitario. El propósito de la narración es doble: (1) transmitir los principales elementos de su teoría de forma fácil y rápida a otras personas, (2) entender mejor cómo los elementos de la teoría funcionan en su conjunto . Las narraciones deben mantenerse en una o dos páginas. Luego que se hayan completado todos los elementos de la Teoría del Cambio, haga que alguien trate de elaborar un resumen ejecutivo, en un lenguaje sencillo y directo, que describe los aspectos más destacados de la Teoría del Cambio. Luego, haga que el grupo lo revise para ver si capta los elementos clave y las explicaciones de la teoría los que son suficientes para presentar un caso convincente sin todos los detalles.
Un punto clave acerca de los resultados en el contexto de una teoría del cambio es que hay resultados esperados y resultados reales. Son los resultados esperados los que aparecen en el diagrama de la teoría del cambio, modelando los resultados en caminos o vías que muestran una lógica causal subyacente y por lo tanto revelan las suposiciones inherentes de la teoría . La teoría no es el modelado de los resultados reales. Esperamos que lo que realmente suceda se parezca mucho a la previsión de los resultados en el modelo. La innovación de la teoría del cambio se encuentra en (1) en hacer esta distinción entre los resultados deseados y reales, y (2) en requerir a los actores interesados que puedan modelar los resultados esperados antes de
decidir sobre las actividades, tácticas, estrategias y otras formas de intervención. Este enfoque permite a practicantes hacer elecciones dentro de un marco de resultados de referencia de manera que las actividades puedan ser elegidos por su potencial para lograr los resultados de la iniciativa. La tarea de monitoreo y evaluación es determinar si y de qué manera los resultados reales de el trabajo reflejan los resultados pronosticados en la teoría del cambio, y si los supuestos subyacentes a la teoría sobre lo que funcionará eran correctos. Si la iniciativa tiene éxito, tener una teoría de cambio detrás de ella confiere soporte a la atribución. El éxito también confiere poder predictivo a la teoría, haciéndola útil para cualquier esfuerzo de replicación o ampliación.