Documentos de Académico
Documentos de Profesional
Documentos de Cultura
Se fundamenta desde el enfoque de género y basado en Derechos Humanos (EGyBDH), eje central y
articulador de la cooperación catalana. El EGyBDH es un marco conceptual y de análisis, una
estrategia, una metodología y al mismo tiempo una praxis que busca analizar y erradicar las causas
estructurales que provocan vulneraciones de los Derechos Humanos, desigualdades y
discriminaciones hacia las mujeres, en todos los ámbitos. La incorporación del EGyBDH en la
evaluación implica analizar y mostrar evidencias respecto a en qué medida la intervención evaluada
ha promocionado/protegido los Derechos Humanos y/o la igualdad de género. También implica
entender la evaluación como un proceso que fomenta la participación de los titulares de derechos, de
obligaciones y de responsabilidades que contribuye a la rendición de cuentas y al fortalecimiento de
capacidades y que promueve el empoderamiento y la transformación en pro de la igualdad de género
y el ejercicio de los Derechos Humanos.
Unos TdR bien elaborados son un paso importante para gestionar una evaluación de alta calidad y
evitan malentendidos entre el equipo evaluador y la entidad que solicita el estudio, en la medida en
que proporcionan las bases para un acuerdo contractual entre la entidad promotora de la evaluación y
el equipo evaluador y establecen los parámetros con los que se puede evaluar el éxito de una labor de
evaluación. Asimismo, unos TdR con el EGyBDH integrado permiten que la evaluación no sea “ciega”
en el género y en los Derechos Humanos. Por ello, los TdR deberán tener en cuenta cuáles han sido
los resultados e impactos de la actuación evaluada en las relaciones de género y las dimensiones de
los Derechos Humanos, así como establecer un sistema de evaluación que fomente la participación
activa de los titulares de derechos, especialmente de las mujeres, como un elemento clave para
fortalecer sus capacidades y promover el empoderamiento y el fortalecimiento de las capacidades de
los colectivos protagonistas del proyecto/programa evaluado.
1
La elaboración de los TdR forma parte del proceso de gestión de una evaluación de calidad:
1. 3.3. 5.5. 7.
Preparar y Selecciona
Seleccionar Plan
Plandedetrabajo,
Difusión y
planificar la r el
el equipo
equipo recogida y
trabajo, uso de la
evaluación evaluador
evaluador análisis de
recogida y la evaluación
información
análisis de los
datos
2. 4.
4. 6.
Elaborar Diseño
Diseño Asegurar la calidad
los TdR metodológico
metodológide de las evidencias,
la evaluación
co conclusiones y
recomendaciones
2
¿Cuándo deben elaborarse?
La elaboración de los TdR es un Fase de planificación y preparación de la evaluación:
primer paso crítico en cualquier
evaluación y debería elaborarse Es importante dedicar el tiempo necesario a planificar la
durante la fase de planificación y evaluación con atención antes de empezar. Este
preparación de la evaluación. esfuerzo inicial ahorrará tiempo después y aumentará la
Dedicar el tiempo y el esfuerzo en probabilidad de obtener una evaluación de calidad,
preparar unos buenos TdR tiene ejecutada con un equipo, calendario y presupuesto
grandes beneficios en la calidad, adecuados.
relevancia y utilidad de la
evaluación. Si iniciamos la evaluación sin una
planificación adecuada, esta corre el riesgo
de recopilar información que no sea útil y
¿Quién debe participar en su que no ayude a responder a las preguntas
elaboración? que plantea. Sin planificación, también es
más probable incumplir con el calendario y/o
La persona responsable de la
el presupuesto
gestión de la evaluación es quien
debe elaborar los TdR. También se
debe promover la participación de
Planificar la evaluación con diligencia ayudará a
los colectivos protagonistas y/o de
garantizar que responda a las necesidades de
otros actores interesados y/o
información más relevantes, que recopile los datos que
implicados en la actuación o en los
se necesitan y que se ejecute a tiempo, de forma que
resultados del proceso de
asegure el uso de sus conclusiones para el propósito
evaluación.
deseado.
3
El Anexo 4 presenta un esquema sencillo sobre el encaje de los distintos componentes de la evaluación.
A continuación se presenta una descripción detallada de cada una de las secciones a incluir en los TdR,
de acuerdo con la plantilla propuesta.
Título de la evaluación
Escriba aquí el título de la evaluación. Asegúrese de que el título:
- Es breve, descriptivo y fácil de recordar.
- Tiene relación con el programa/proyecto que se está evaluando.
- Expone la localización geográfica y el alcance temporal del programa/proyecto evaluado.
Criterios de calidad:
Los TdR justifican por qué es relevante realizar la evaluación en este
momento (por qué se realiza la evaluación).
Los TdR incorporan el EGyBDH.
Los TdR explican el propósito de uso de la evaluación, es decir, para
qué se espera que sirvan los resultados y conclusiones de la
evaluación y qué decisiones se espera que informen (para qué sirve).
Los TdR identifican a los actores interesados en la evaluación (para
quien se realiza).
Los TdR recogen los intereses de los actores implicados en el
programa/proyecto.
Antecedentes y justificación:
En este apartado deberían describirse brevemente los antecedentes del programa o proyecto a
evaluar, así como presentar los aspectos relevantes sobre el origen del proyecto/programa y la relación
del equipo ejecutor del mismo con la temática tratada. Adicionalmente, se recomienda describir las
fases de financiación de la actuación y el alcance de estas y exponer, en su caso, la existencia de otros
procesos de evaluación de la actuación que se estén promoviendo por parte de otros actores. La
información de base del proyecto/programa (por ejemplo, localización geográfica, planificación del
proyecto, marco lógico, etc.) puede incluirse en un anexo.
Este apartado debería también exponer el interés de encargar un estudio de evaluación del proyecto
o programa en cuestión; es decir, explicar por qué es relevante llevar a cabo la evaluación y qué es lo
que motiva su realización en este momento. Esta justificación se debe relacionar con los requisitos de
la subvención otorgada. También es necesario especificar la necesidad de integrar el EGyBDH en el
análisis y en el proceso de evaluación de la actuación, de tal modo que se garantice que se muestran
evidencias de los efectos de las intervenciones en las relaciones de género y en la situación de los
Derechos Humanos, especialmente de los derechos de las mujeres, antes y después de ser
implementadas; así como establecer un sistema de evaluación claro, transparente y participativo para
fomentar la rendición de cuentas frente a los colectivos protagonistas de la intervención y la
participación activa de estos en el proceso evaluador.
Principalmente, la evaluación debe servir a los intereses de la entidad y de los actores implicados e
interesados en la intervención: intereses estratégicos, de transversalización (fortalecimiento del tejido
social, sostenibilidad del desarrollo, etc.); intereses que se enmarquen en alguna prioridad sectorial o
geográfica o de integración en un marco más amplio de evaluación (por ejemplo, de un programa o
estrategia de la entidad).
Algunas de las preguntas que pueden ayudar a orientar la elaboración de este apartado relativo a los
antecedentes y a la justificación de la evaluación son:
Así pues, más allá de ser un requisito de la subvención y de fomentar la participación y contribuir al
empoderamiento de los colectivos protagonistas, la evaluación debe resultar útil para la entidad y/u
otros actores implicados o interesados en la intervención. Una evaluación puede tener uno o más de
un propósito, tales como:
- La responsabilidad y la rendición de cuentas.
- La toma de decisiones informadas (por ejemplo sobre la continuidad o la ampliación de la
intervención, sobre el alcance de una nueva población o área geográfica o sobre la forma de
desarrollar las actividades).
- La mejora de la calidad de las actuaciones.
- La mejora de las relaciones con los agentes implicados.
- El empoderamiento y el incremento de la capacidad para reflexionar.
Con el fin de asegurar la utilidad y la relevancia de la evaluación, el primer paso es saber para
qué se espera que sirva la evaluación (propósito de uso) y, para ello, es aconsejable saber quién
utilizará los resultados de la evaluación.
5
2. Alcance de la evaluación
Criterios de calidad:
El alcance de la evaluación está claramente definido: Los TdR
explicitan lo que la evaluación cubrirá y lo que no (ejemplo: marco
temporal, área geográfica, elementos específicos del
programa/proyecto).
Los TdR explicitan el tipo de evaluación a realizar.
Su alcance es coherente con el propósito de la evaluación.
El alcance de la evaluación es factible teniendo en cuenta los recursos
y las consideraciones de tiempo.
La evaluación puede cubrir todo el programa/proyecto o puede poner el foco en una parte o elemento
específico (por ejemplo una fase concreta de la actuación, un elemento temático o transversal
específico o la implementación en un área geográfica concreta). También se puede centrar en la
implementación o solo en los resultados o el impacto del programa/proyecto. Esta es una decisión
estratégica que debe ir ligada al propósito de uso de la evaluación y al momento en que se encuentra
el proyecto/programa.
En el marco de estos TdR, se pueden desarrollar los siguientes tipos de evaluación, clasificadas según
su contenido, las etapas de la intervención que se quieren analizar, el agente que la realiza o el nivel
de participación de los actores:
Por grado de
Por el momento de implicación de Por agente Por contenido de
la evaluación los actores en evaluador la evaluación
la evaluación
1. Evaluación
1. Evaluación
intermedia o de 1. Externa 1. De diseño
participativa
medio plazo
2. Evaluación
2. Evaluación por el 2. Mixta 2. De proceso
final empoderamiento
3. Evaluación
3. De resultados
democrática
4. De impacto
Diagrama adaptado de las tipologías de evaluaciones de la cooperación al desarrollo de la Generalitat de Catalunya recogidas
en las Directrices de evaluación de la cooperación al desarrollo de la Generalitat de Catalunya, Barcelona 2010.
6
La decisión sobre qué cubrirá la evaluación y qué no debe ser coherente con el propósito de la
evaluación. Al mismo tiempo, debe asegurarse que el alcance definido es realista y factible
teniendo en cuenta los recursos materiales (presupuesto) y humanos (tiempo, capacidad
técnica) disponibles, así como la disponibilidad de información. A su vez, la/s tipología/s de
evaluación seleccionadas condicionarán las preguntas que la evaluación procurará responder.
En el Anexo 3 se describe brevemente en qué consiste cada uno de los tipos de evaluación, según el
contenido y se proporcionan algunos ejemplos del tipo de preguntas de evaluación que deben
permitirles responder. Adicionalmente, el cuadro a continuación aclara las diferencias entre una
evaluación mixta y una evaluación externa.
Evaluación mixta:
Realizada tanto por personas o equipos directamente implicados en la intervención
evaluada o de la propia entidad, como personas o equipos externos.
Este tipo de evaluación tiene el beneficio de permitir complementar los conocimientos de
los equipos externos con el conocimiento del personal técnico de la entidad y, por tanto,
puede ser relevante cuando se necesita una competencia técnica o cultural específica que
requiera una combinación de evaluadores. Así por ejemplo, la implicación del equipo
técnico de la entidad responsable de la intervención, que conozca los elementos culturales
y organizativos y esté familiarizado con la intervención y su contexto, garantiza una mayor
adecuación del proceso de evaluación a la realidad de la intervención.
Otra de las ventajas a considerar es que la evaluación mixta contribuye a promover la
cultura de la evaluación entre los actores implicados, reforzando la apropiación del
aprendizaje durante el proceso, lo que permite aumentar las posibilidades de uso de los
resultados de la evaluación.
Un aspecto fundamental para considerar si se decide realizar una evaluación mixta es la
necesidad de planificar la dedicación del tiempo del equipo de la entidad que
gestiona la evaluación y la disponibilidad de los recursos para ello.
Evaluación externa:
Realizada por personal ajeno a la entidad gestora o responsable de la intervención.
La realización de una evaluación externa contribuye a aumentar la independencia y
credibilidad de la evaluación, debido a la objetividad que se le presupone al equipo externo.
Los evaluadores externos pueden aportar experiencias especializadas y competencias en
evaluación y áreas técnicas relevantes para la intervención evaluada.
Proporciona una mirada más fresca sobre la intervención y permite la obtención de la
información sobre el valor de esta de forma más abierta por parte de las personas que
deben dar su opinión sobre la ella durante el proceso de evaluación.
7
4. Criterios y preguntas de evaluación
Criterios de calidad:
Los TdR especifican los criterios de evaluación en función de los cuales se
guiará el análisis.
Los TdR presentan criterios adicionales o alternativos de relevancia para el
tipo y propósito de evaluación que se propone realizar.
Se ha realizado una priorización de los criterios de evaluación más
relevantes y realistas.
Los TdR contienen un conjunto de preguntas de evaluación que están
directamente relacionadas tanto con los objetivos de la evaluación como
con los criterios que guiarán a la evaluación.
El conjunto de preguntas de evaluación incorpora el EGyBDH.
Teniendo en cuenta el contexto de la evaluación, es factible y realista
responder al conjunto de preguntas planteadas.
En este apartado se deben enumerar el/los criterio/s que orientarán la evaluación y las preguntas a las
que se espera que esta dé respuesta. Los criterios y las preguntas de evaluación deben ser
coherentes con el propósito de uso y el alcance de la evaluación. Al mismo tiempo, los criterios
y las preguntas deben estar relacionados. De hecho, las preguntas permiten comprender y concretar
la forma en que se valorarán los criterios. Generalmente, en el ámbito de la cooperación para el
desarrollo, se utilizan los criterios establecidos por la OCDE/CAD para la evaluación como referencia,
pero estos no son más que un punto de partida y se pueden añadir otros que se adapten a nuestras
necesidades o especificidades:
Criterio de participación:
De acuerdo con el EGyBDH, el criterio de participación en la evaluación deberá
entenderse como la capacidad del proyecto para implicar de forma significativa,
activa y responsable a los colectivos destinatarios del proyecto o programa
(titulares de derechos, responsabilidades y obligaciones) en las diferentes etapas
del proyecto, desde la planificación a la evaluación y en los distintos espacios de
toma de decisiones de la actuación.
8
Principios para la utilización de los criterios OCDE/CAD:
Primer principio
Los criterios deben aplicarse con minuciosidad para conseguir
evaluaciones útiles y de calidad. Deben contextualizarse; es decir,
entenderse en el contexto de la evaluación particular, la intervención que
está siendo evaluada y los actores involucrados. Las preguntas de
evaluación (lo que pretende averiguar) ayudan a realizar este ejercicio
de compresión y por tanto deben informar de la interpretación y el
análisis específico de los criterios.
Segundo principio
El uso de los criterios depende del propósito de uso de la evaluación.
Los criterios no deben aplicarse de modo mecánico; por el contrario,
deben emplearse en función de las necesidades de los actores
relevantes y el contexto de la evaluación. Podrán dedicarse más o
menos tiempo y recursos al análisis de la evaluación de cada criterio en
función del propósito de la evaluación. La disponibilidad de datos, las
limitaciones de recursos, el horizonte temporal y las consideraciones
metodológicas también podrán influir en el uso de un criterio concreto, si
se utiliza o no y de qué forma.
OCDE (2020), “Mejores criterios para una mejor evaluación. Definiciones revisadas de los
criterios de evaluación y principios para su utilización”, Organización para la Cooperación
y el Desarrollo Económicos, Paris
Además, en caso de que se considere oportuno, podrán utilizarse otros criterios alternativos que
resulten de relevancia específica en el marco de la actuación evaluada.
Los criterios y el alcance de la evaluación orientan el tipo de preguntas que se desea responder sobre
la intervención. De esta forma, las preguntas concretan el objeto de evaluación: lo que se quiere saber
a partir de la generación de conocimiento que representa la evaluación. Por tanto, las preguntas deben
ser:
De acuerdo con el enfoque del EGyBDH. Las preguntas de evaluación tendrán que estar
orientadas a averiguar la contribución de la actuación a la consecución de la igualdad de
género y la protección/promoción de los Derechos Humanos.
Claras y específicas, para poder guiar al equipo evaluador en el diseño de la evaluación.
Las preguntas deben ser concisas, poner el foco en un único elemento de análisis cada uno
y utilizar conceptos que tengan una definición clara.
Relevantes, porque los recursos de la evaluación son limitados, por lo que, si no se puede dar
respuesta a todo lo que se quisiera saber sobre la intervención, es necesario priorizar.
Con un volumen de recursos limitados (en términos de tiempo, recursos económicos y
recursos humanos) una evaluación difícilmente podrá dar una respuesta completa a más de
3-6 preguntas de evaluación. Por tanto, se recomienda priorizar las necesidades de
conocimiento y seleccionar aquellas más relevantes y que mejor encajen con el propósito y el
alcance de la evaluación.
Realistas y técnicamente factibles de responder.
Responder a cada pregunta de evaluación requiere levantar y analizar una información
cuantitativa y/o cualitativa determinada. Antes de seleccionar una pregunta de evaluación es
importante asegurar que la información que va a permitir responderla es accesible y que se
dispone de la capacidad técnica necesaria para analizarla.
Coherentes con el alcance de la evaluación.
Cada tipología de evaluación tiene asociada una serie de preguntas de evaluación que pueden
servir de orientación (para más información se puede consultar la Guía 1 de Ivàlua,
mencionada en el Anexo - 5).
Coherentes con los criterios de evaluación seleccionados.
Cada criterio de evaluación, ya sea de los que propone el CAD o no, puede concretarse en
una serie de preguntas (para más información se puede consultar la Guía de aplicación de los
criterios del CAD, mencionada en el Anexo 5).
9
Adicionalmente, las preguntas de evaluación pueden tratar de recoger los intereses de los agentes
implicados o interesados en la intervención.
En definitiva, definir unas buenas preguntas de evaluación contribuye a promover evaluaciones útiles,
con un propósito de uso claro, que generan un conocimiento del lugar, interesante para los agentes
clave y coherente con el momento en el que se encuentra la intervención.
Criterios de calidad:
Los TdR exponen claramente el enfoque general que seguirá la
evaluación y orientará el análisis.
Los TdR explican cómo se concretará la incorporación del EGyBDH en
el proceso de evaluación.
Este apartado debe recoger el enfoque general que guiará la evaluación (por ejemplo, que el enfoque
sea sensible al género, que incluya a todas las partes interesadas, que sea sensible a la cultura o al
contexto y que sea participativo). Adicionalmente, se espera que se explique cómo se concretará en la
evaluación la integración del EGyBDH, de forma coherente con los propósitos y objetivos de la
evaluación ya planteados.
Los TdR deben establecer cómo se integra el EGyBDH en la evaluación para que ésta no sea “ciega”
al género y a los derechos humanos.
Se tendrán que incorporar y tener en cuenta los resultados e impactos en las relaciones de
género y las dimensiones de los Derechos Humanos. Es responsabilidad del equipo
evaluador integrar el EGyBDH mediante los criterios, las preguntas de evaluación y los
indicadores de cada una de las preguntas previstas, de tal forma que se garantice que se
recopilan evidencias de los efectos de las intervenciones en las relaciones de género y de la
situación de los Derechos Humanos, especialmente de los derechos de las mujeres, antes y
después de su implementación.
Se deberá tener en cuenta la participación activa de los titulares de derechos, y
especialmente de las mujeres, como un elemento clave para fortalecer sus capacidades y
para promover el empoderamiento y el fortalecimiento de las capacidades de los colectivos
protagonistas del proyecto/programa. Es responsabilidad del equipo evaluador establecer un
sistema de evaluación claro, transparente y participativo para fomentar la rendición de cuentas
frente a los colectivos protagonistas de la intervención, así como su participación activa en el
proceso evaluador.
6. Fuentes de información disponibles para la evaluación y orientaciones
metodológicas
Criterios de calidad:
Los TdR proporcionan orientaciones sobre los requisitos metodológicos
que el equipo evaluador debe tener en cuenta.
Los TdR proporcionan una lista de fuentes de información y actores
relevantes y accesibles para el equipo evaluador.
10
considere conveniente se pueden proporcionar orientaciones generales y/o de carácter ético en
relación con la recogida y el análisis de la información, tales como:
- Garantizar la participación de los diferentes titulares implicados de forma directa y/o indirecta
en el proyecto/programa, siempre que sea posible.
- Respetar el derecho de las personas a proporcionar información y asegurar su anonimato y
confidencialidad en todo el proceso de recogida de información.
- Respetar el contexto sociocultural e institucional.
- Asegurar poder demostrar la veracidad de la información.
Sin embargo, en caso de que -por la razón que sea- el método de evaluación (o cualquier otro aspecto
metodológico) esté definido previamente, es necesario hacerlo explícito en los TdR, para que el equipo
evaluador pueda tenerlo en cuenta a la hora de elaborar la propuesta de evaluación.
Por último, siempre que se proponga implicar a actores en el proceso de evaluación, será necesario
especificar la necesidad de hacer una previsión de los riesgos para garantizar su seguridad.
Criterios de calidad:
Los TdR describen las distintas fases de la evaluación e incluyen un
calendario correspondiente.
Por cada fase, los TdR describen las actividades a llevar a cabo,
responsabilidades, soporte disponible, recursos y temporalidad
Los TdR incluyen un presupuesto adecuado.
Calendario:
Es necesario describir las fases que tendrá la evaluación y estimar una fecha de implementación. Como
mínimo, se recomienda asegurar el tiempo y los recursos necesarios para cubrir las siguientes fases
generales del proceso de evaluación:
Planificación y preparación del proceso de la evaluación; definición de las características de la
evaluación y elaboración de estudio de gabinete e informe de concreción de la metodología y
establecimiento de los criterios y preguntas de evaluación
Ejecución de la evaluación; análisis documental, trabajo de campo, análisis de resultados y
elaboración del informe de evaluación preliminar.
Elaboración del informe de evaluación final, que incluya las conclusiones y recomendaciones
pertinentes.
Difusión y comunicación de los resultados y el informe de evaluación.
Es recomendable incluir una fase en el proceso de evaluación, antes de la elaboración del informe
final, para la presentación a los grupos de interés y agentes implicados en el programa/proyecto, de
los resultados y recomendaciones preliminares de la evaluación a fin de obtener comentarios y validar
su pertenencia.
Soporte logístico:
Es necesario detallar el soporte logístico requerido.
11
- Disponibilidad de servicios como traducción, transporte local, encuestadores o
entrevistadores locales, etc.
- Elementos de contexto local a tener en cuenta durante el proceso de evaluación (temas
relacionados con la seguridad, aspectos socioculturales, etc.)
- Horarios de trabajo, incluidos los festivos.
- Disponibilidad de espacios de trabajo.
Presupuesto:
En esta sección debería también hacerse referencia a la cantidad total
Es importante tener en cuenta
de presupuesto disponible para la evaluación para cubrir costes como
que, para asegurar un enfoque
los honorarios de los consultores, viajes, alojamiento y/o
de participación en la
desplazamiento, traducción, encuestadores locales u otros costes
evaluación, el proceso
previstos.
requerirá más recursos y
tiempo. Esto debe reflejarse
Esta sección incluye a menudo los detalles pertinentes relacionados
en el calendario y en el
con el pago. Se recomienda conectar el pago con los productos
presupuesto.
esperados (por ejemplo, vincular el pago a la aprobación del informe
inicial, el borrador del informe de evaluación y/o el informe final).
Criterios de calidad:
Los TdR presentan las competencias requeridas en el equipo de evaluación.
Las competencias y aspectos técnicos (conocimiento y experiencia) del
equipo de evaluación son coherentes con las necesidades metodológicas y
técnicas de la evaluación.
12
Principios de evaluación:
El equipo evaluador deberá seguir en el proceso de realización de la evaluación
los principios establecidos en el marco orientador de la práctica de evaluación.
Estos incluirán, entre otros, los siguientes:
Anonimato y confidencialidad: los evaluadores tendrán que respetar el
derecho de las personas y mantener el anonimato de los actores que
participen en la evaluación y la confidencialidad de sus opiniones.
Responsabilidad: el equipo evaluador deberá actuar con plena
responsabilidad y asumir las consecuencias que se deriven de los
resultados de la evaluación.
Integridad: el equipo evaluador deberá ser meticuloso durante todo el
proceso de evaluación y desvelar toda la información derivada del
estudio de evaluación.
Criterios de calidad:
Los TdR establecen las funciones y responsabilidades de gestión a lo
largo del proceso de evaluación.
En este apartado se pide describir las responsabilidades de gestión del proceso de evaluación y definir
quiénes se harán cargo.
En coherencia con el principio de participación, es recomendable establecer un comité de seguimiento
de la evaluación, formado por representantes de los actores clave e implicados en la evaluación. Este
tendrá la responsabilidad de supervisar el proceso de evaluación, tomar las decisiones más relevantes,
revisar los productos de la evaluación y asegurar que se cumple con los TdR.
13
Como mínimo, las evaluaciones deben tener los siguientes productos:
1. Informe de Evaluación (versión preliminar).
2. Informe de Evaluación final. Este informe contendrá: resumen ejecutivo, resultados de la
evaluación, conclusiones y recomendaciones. Para obtener una estructura básica de un
informe de evaluación, consulte el esquema recomendado que se encuentra en el Anexo 2
Productos adicionales que las evaluaciones pueden Todos los informes irán
tener: acompañados de anexos que
- Informe de concreción de la metodología: contendrán las fuentes de
contiene una descripción de la metodología/enfoque verificación de la consecución de los
metodológico de evaluación; detalla las técnicas de indicadores planteados (bases de
recogida de información que se emplearán, los datos, fotografías, número de
métodos de análisis de la información, quiénes participantes en actividades, etc.).
serán las personas informantes, las preguntas de Nota: Se requerirá a los evaluadores
evaluación a las que se buscará dar respuesta, los que incluyan en la portada de cada
indicadores de evaluación cuando proceda y el plan producto la frase "La opinión
de trabajo. Adicionalmente, debe incluir una matriz expresada por parte del equipo de
de evaluación que relacione todos estos aspectos. evaluación no corresponde
- Informe de trabajo de campo: que especifica el necesariamente a la de la ACCD".
número de entrevistas realizadas, a quién, etc.
Criterios de calidad:
Los TdR describen las actividades de comunicación necesarias para la
difusión de los resultados de la evaluación
Los TdR especifican las responsabilidades por compartir y utilizar los
resultados.
Una vez que el equipo evaluador haya presentado los resultados de su análisis, recogidos en el informe
de Evaluación, se deberá velar por que los resultados de la evaluación se utilicen adecuadamente y
satisfagan las demandas que han motivado su realización.
De acuerdo con los principios de transparencia y utilidad, y en la medida de lo posible, será necesario
promover el acceso y la difusión de los resultados y los productos generados en el marco de la
evaluación con el objetivo de:
Facilitar aprendizajes basados en evidencias, útiles para la toma de decisiones y para mejorar
la calidad y capacidad transformadora de futuras actuaciones.
Rendir cuentas ante la ciudadanía de Cataluña y en los países socios.
Fomentar la participación y el acceso de los colectivos protagonistas a los resultados de la
evaluación para contribuir al fortalecimiento de capacidades y promover su empoderamiento,
especialmente de las mujeres.
Así pues, en este apartado es necesario describir las actividades de comunicación necesarias para la
difusión de los resultados de la evaluación y especificar cómo se adaptarán a las necesidades de los
diferentes destinatarios. También se considera pertinente especificar los instrumentos que se van a
utilizar (medios audiovisuales, gráficos, documentos escritos, etc.), así como identificar quiénes serán
las personas responsables de la implementación de cada una de las actividades.
En cuanto a la toma de decisiones, se recomienda indicar que, una vez completada la evaluación, será
necesario elaborar un plan de acción para dar respuesta a las conclusiones y recomendaciones
recogidas en el informe de evaluación, que incluirá una identificación de los puntos de acción
acordados con los grupos de interés primarios y del seguimiento necesario, incluyendo la lista de
personas responsables para llevarlos a cabo.
14
12. Proceso de selección del evaluador/ra o equipo de evaluación y expectativas
para la propuesta de evaluación
Criterios de calidad:
Los TdR especifican los criterios con base en los que se seleccionará al
equipo de evaluación.
En esta última sección deben especificarse los pasos que constituirán el proceso de selección de las
propuestas de evaluación. Al menos habrá que especificar:
15
Anexo 1:
Plantilla de términos de referencia para evaluaciones de programas
y proyectos financiados por la ACCD
Este documento es una plantilla de términos de referencia (TdR) para las entidades que
deban realizar una evaluación en el marco de las subvenciones otorgadas por la Agencia
Catalana de Cooperación al Desarrollo (ACCD). Para obtener más orientaciones sobre cómo
elaborar los TdR para una evaluación según el formato propuesto, consulte: la Guía de
orientación sobre términos de referencia.
Título de la evaluación
2. Alcance de la evaluación
En este apartado es necesario explicar el alcance de la evaluación, especificando:
- El objeto de la evaluación: en qué se focaliza la evaluación.
- El período de tiempo, la fase del proyecto, el área geográfica y temática y los temas
principales a cubrir por la evaluación.
16
3. Criterios y preguntas de evaluación
En este apartado se deben enumerar el/los criterio/s que orientarán la evaluación y las preguntas a
las que se espera que esta dé respuesta. Los criterios y preguntas de evaluación deben ser
coherentes con el propósito de uso y los objetivos de la evaluación. Al mismo tiempo, los criterios y
las preguntas deben estar relacionados.
17
8. Gestión del proceso de evaluación
En este apartado es necesario detallar los aspectos técnicos y competencias (conocimiento y
experiencia) que deberá cumplir y acreditar el equipo de evaluación.
9. Productos esperados
En este apartado debe especificarse el listado de productos derivados de la evaluación, sus
características y los plazos de entrega. Los TdR también deben especificar los formatos esperados
para estos productos.
18
Anexo 2:
19
Anexo 3:
Tipo de evaluación según contenido
Evaluación de diseño Pone el foco en el diseño del programa para analizar la plausibilidad
de cada una de las hipótesis que componen la teoría del cambio
de la intervención.
Permite responder a preguntas, como por ejemplo:
¿La intervención es teóricamente adecuada para dar
respuesta al problema? ¿Hay evidencia que sustente la
propuesta de intervención?
¿La intervención se ha diseñado teniendo en cuenta el
EGyBDH?
¿Los recursos previstos para la intervención son
coherentes con la dimensión de la población diana?
Evaluación de proceso Pone el foco en el despliegue del programa: en la ejecución, el
funcionamiento, la coordinación, la satisfacción, la gestión de
imprevistos, la vivencia de las personas participantes.
Permite responder a preguntas, como por ejemplo:
¿Cómo ha sido la participación de los diferentes
agentes en el despliegue del proyecto/programa? ¿Se
identifican diferencias en función del perfil? (EGyBDH)
¿Cómo ha funcionado la coordinación?
¿El proyecto/programa ha funcionado como estaba
previsto? ¿Han surgido imprevistos? ¿Cómo se han
resuelto?
Evaluación de resultados Pone el foco en la consecución de los resultados esperados.
Generalmente incluye una evaluación de proceso, pero va más allá
de esta, ya que mide y analiza los resultados alcanzados y valora si
los cambios que se esperaba que se produjeran se han dado o no,
para quién, en qué medida, cómo y por qué.
Permite responder a preguntas, como por ejemplo:
¿La intervención está consiguiendo/ha conseguido sus
objetivos?
¿La intervención está consiguiendo/ha conseguido
dar respuesta al problema? ¿Cómo y en qué
medida?
¿Se identifican diferencias en los cambios observados, en
función del perfil de las personas participantes?
(EGyBDGH)
Evaluación de impacto Pone el foco al establecer una relación de causalidad entre el
programa y los resultados observados. Generalmente el
establecimiento de esta relación de causa-efecto requiere de la
construcción de un escenario contrafactual.
Es en la atribución de causalidad donde radica el diferencial de este
tipo de evaluación y también su mayor grado de rigurosidad. Sin
embargo, también es esta atribución lo que hace las evaluaciones
de impacto tan complejas en términos metodológicos: requieren un
conocimiento altamente experto, que haya pasado tiempo suficiente
para poder observar los impactos y disponer de un grupo de
comparación.
La evaluación de impacto permite responder preguntas como:
¿Qué cambios se han logrado, que no se hubieran
logrado en ausencia de la intervención?
20
Anexo 4:
Diagrama resumen – diseño de una evaluación
21
Anexo 5:
Recursos adicionales
- OECD (2021), Applying Evaluation Criteria Thoughtfully, OECD Publishing, Paris,
https://doi.org/10.1787/543e84ed-en.
- OCDE (2020), “Mejores criterios para una mejor evaluación. Definiciones revisadas de los
criterios de evaluación y principios para su utilización”, Organización para la Cooperación y el
Desarrollo Económicos, Paris, http://www.oecd.org/development/evaluation/Criterios-
evaluacion-ES.pdf
- AECID (2014), Diferentes aproximaciones para realizar una evaluación sensible al género y al
enfoque basado en derechos humanos para el desarrollo.
- Better evaluation. Specific key evaluation questions
- Un Women. Evaluation questions
- Instituto Catalán de Evaluación de Políticas Públicas - Ivàlua (2009). Guía práctica 1. Cómo
iniciar una evaluación: oportunidades, viabilidad y preguntas de evaluación.
- Instituto Catalán de Evaluación de Políticas Públicas - Ivàlua (2009). Guía práctica 3.
Evaluación del diseño.
- Instituto Catalán de Evaluación de Políticas Públicas - Ivàlua (2009). Guía práctica 4.
Evaluación de la implementación.
- Instituto Catalán de Evaluación de Políticas Públicas - Ivàlua (2011). Guía práctica 8. La
metodología cualitativa en la evaluación de políticas públicas.
- Instituto Catalán de Evaluación de Políticas Públicas - Ivàlua (2017). Guía práctica 15. Guía
práctica de evaluación de programas del tercer sector social.
- Instituto Catalán de Evaluación de Políticas Públicas - Ivàlua (2020). Herramienta práctica
1.1. ¿Cómo puedo elaborar una Teoría del Cambio?
- Instituto Catalán de Evaluación de Políticas Públicas - Ivàlua (2020), Herramienta práctica
2.1. ¿Cómo puedo formular buenas preguntas de evaluación?
- Instituto Catalán de Evaluación de Políticas Públicas - Ivàlua (2020), Guía práctica 17. El
encargo y gestión de la evaluación
22
Anexo 6:
Checklist de valoración de la calidad de los TdR: Este checklist ofrece orientación sobre los
criterios a tener en cuenta para asegurar la calidad de los TdR, según los criterios establecidos.
25