Presupuesto Público

¿Qué es una evaluación de impacto?

Es una metodología de evaluación que permite identificar los cambios sobre individuos, familias o instituciones causados por un programa, iniciativa, política pública o proyecto específico.

Las evaluaciones de impacto nos ayudan a atribuir causalidad al establecer empíricamente en qué medida cierto programa, y solo ese programa, ha contribuido a cambiar un resultado.

El impacto de un programa es la diferencia en la variable de resultado para la misma unidad (persona, hogar, comunidad, etc.) cuando ha participado en el programa y cuando no lo ha hecho.

¿Por qué hacer una evaluación de impacto?

Es importante realizar evaluaciones de impacto de las intervenciones públicas a fin de:

• Obtener evidencia rigurosa: contar con evidencia confiable y sólida sobre qué funciona y que no.
• Redireccionar de presupuesto: sabiendo que funciona se puede redirigir el presupuesto en forma eficiente (dejar de invertir en lo que no tiene impacto).
• Escalar políticas: proporcionar evidencia atrae inversiones (organismos internacionales, gobiernos nacionales, provinciales o locales)
• Sostenibilidad de los programas: tener evidencia permite que los programas que son efectivos sean sostenibles.

¿Cuándo hacer una evaluación de impacto?

• Cuando hay una pregunta relevante de política pública que necesita ser respondida.
• No hay suficiente evidencia sobre la efectividad de la intervención o la evidencia proviene de otros contextos (falta de validez externa).
• No es ni muy pronto ni muy tarde: esperar a que el programa madure, pero antes de escalarlo. El programa debe estar maduro, no perfecto.
• Se dispone del tiempo, conocimiento, recursos financieros y capacidades para hacer una evaluación de calidad.
• Es metodológicamente factible.

Diseño de una Evaluación de impacto

• Definir actores clave, equipo de evaluación, roles y responsabilidades.
• Definir el tratamiento y la población objetivo
• Construir la teoría de cambio del programa
• Definir preguntas de evaluación y variables de interés que sean relevantes para la política pública.
• Determinar la disponibilidad de información (datos administrativos, encuestas, censos) y su nivel de agregación.
• Identificar necesidad y factibilidad de recoger datos primarios (tamaño de la muestra)
• Seleccionar la metodología de evaluación más adecuada.

Tipos de diseño metodológico:

Evaluaciones Experimentales (RCT): Las cuales escogen los grupos de tratamiento y de control de manera aleatoria previo a la implementación de la intervención, de tal manera que ambos grupos escogidos son estadísticamente similares debido a la aleatorización. Dado el diseño de la evaluación, se encuentran muy relacionadas con las Evaluaciones Prospectivas.

Evaluaciones Cuasi Experimentales: Las cuales escogen grupos de tratamiento y de control que sean lo más similares posibles a través de metodologías no aleatorias; por lo que es más vulnerable de sesgos. Dado el diseño de la evaluación, se encuentran relacionadas tanto con las Evaluaciones Prospectivas como las Retrospectivas.

• Variables Instrumentales (IV)
• Regresión Discontinua (RDD)
• Diferencias en Diferencias (Diff–in-diff)
• Matching o Emparejamiento

Etapas de la evaluación de impacto:

Evaluaciones de Impacto en curso y culminadas

Actualmente se ha realizado 24 evaluaciones de impacto. Los informes finales y sus respectivas matrices pueden encontrarse en la siguiente sección: