Curso de evaluación de

impacto de Políticas Públicas

14 – 16 de febrero
Lima, Perú
Análisis Costo-efectividad

María Luisa Vásquez

Subgerente de Políticas Públicas

@JPAL_LAC
 I. De la efectividad a la costo efectividad

II. ¿Qué es el Análisis de Costo Efectividad?

III. Aspectos técnicos

IV. Ejemplo práctico

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

El impacto de campamentos e
incentivos para la inmunización
Porcentaje de niños de 1 a 3 con inmunización completa
(Por estado de tratamiento)

Grupo Campamentos Campamentos

comparación inmunización + incentivos

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

¿Cuál de los tratamientos era más
costo-efectivo?
A. Campamentos
B. Campamentos +
incentivos
C. Podría ser cualquiera de
las dos alternativas
D. No lo sé

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Los incentivos eran más costo efectivos

Costo por niño completamente inmunizado

(En rupias)

Costo incentivos
Costo campamentos

Campamentos Campamentos
inmunización + incentivos

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

 I. De la efectividad a la costo efectividad

II. ¿Qué es Análisis de Costo Efectividad?

III. Aspectos técnicos

I. Ejemplo práctico

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

El análisis de costo-efectividad es el ratio
entre los costos y el impacto del programa

Ratio de Costo total de implementación

=
costo-efectividad Impacto del programa

Se puede expresar como:

– Costo por cada niño que recibe las vacunas completas.
– Cuantos niños reciben las vacunas completas por cada
100 dólares de inversión.

Dhaliwal et al 2012
J - PAL | ANÁLISIS COSTO - EFECTIVIDAD
El ratio de costo efectividad puede
compararse con otros similares
Años adicionales de educación por US $100

Uniformes Becas al Libros Mejorar

Escolares mérito gratuitos la salud

+0.71 +0.16 0 +12 ½

Fuente: J-PAL Student Participation CEA

En Latinoamérica

Años adicionales de educación por US $100

México República
(Progresa) Dominicana

Transferencias Información
Monetarias sobre retornos
+0.01 +0.24

Fuente: J-PAL Student Participation CEA

J-PAL hizo un análisis de 29 programas

J-PAL | N OMBRE DEL C URSO

¿Cuál utilizar?

Análisis Análisis
costo-efectividad costo-beneficio
(ACE) (ACB)

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Ejemplo de ACB: Programas de
graduación de la pobreza

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

 Análisis Análisis
costo-efectividad costo-beneficio
(ACE) (ACB)

Usa una medida de

resultado objetiva Requiere supuestos
sobre el valor de
Facilita comparaciones múltiples beneficios.
entre programas
cuando hay interés por
un resultado.
Indica si un programa
No hace juicio sobre el vale la inversión.
valor monetario de los
resultados.

No dice si beneficios
del programa son
mayores de los costos.

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD Dhaliwal et al 2012

¿Cuándo es más útil un Análisis de
Costo-Efectividad?
A. Al elegir entre varios
programas que tienen un
efecto positivo en un
resultado.
B. Cuando un programa que
tiene efectos en varios
resultados y queremos saber
cuál es más costo-efectivo.
C. Para convencer a un decisor
de política pública de
implementar un programa que
no es obvio.
D. Ninguna

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

¿Cuándo es más útil el CEA?
• Muchas intervenciones posibles para abordar un
objetivo específico, y no es seguro cuál tendrá el mayor
impacto por el menor costo

• Para convencer a un responsable de toma de

decisiones de que un programa es buena idea.

• Para comprender cómo podría variar la CE de un

programa por contexto e implementación.

Dhaliwal et al 2012
J - PAL | ANÁLISIS COSTO - EFECTIVIDAD
Usos comunes: Retrospectivos

Análisis de pilotos

• Información disponible.

• Estimados precisos del piloto.

• Representa la costo-efectividad de ese programa como

fue implementado en el contexto específico.

• Validez externa débil.

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Usos comunes: Prospectivo

Análisis de pilotos

• Usar estimaciones de impactos de programas similares,

que pueden no ser precisas.

• Obtener información sobre potenciales costos.

• Puede ayudar a identificar programas que no serán

costo-efectivos.

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Usos comunes: Prospectivo

Análisis de escalamientos

• Información más precisa sobre el mismo contextos.

• Hay que usar los impactos de programas pilotos, que

pueden no ser generalizables a escala.

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

 I. De la efectividad a la costo efectividad

II. ¿Qué es Análisis de Costo Efectividad?

III. Aspectos técnicos

I. Ejemplo práctico

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Pasos del Análisis Costo Efectividad

Estimar el Calcular los

Dividir
impacto costos

Se necesitan supuestos y no hay una manera correcta. La

consistencia y la transparencia son importantes

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Aspectos técnicos: Definir el programa

Un piloto del Programa como

programa fue evaluado

Programa llevado Una parte del

a escala programa

J-PAL Costing Guidelines

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Aspectos técnicos: Estimar el impacto

Agregar el impacto

Programas con
impactos múltiples.

Externalidades

Imprecisión en el
impacto

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Imprecisión de las estimaciones
Muertes evitadas por cada USD 100 gastados

Dispensadores Entrega de cloro

de cloro en hogares
J - PAL | ANÁLISIS COSTO - EFECTIVIDAD Dhaliwal et al 2012
Imprecisión de las estimaciones

Si un programa no tiene un
impacto significativo…

¡No puede ser costo-efectivo!

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD Dhaliwal et al 2012

Estimar los costos: Método de “ingredientes”
Listar todos los “ingredientes” necesarios para implementar
el programa en las siguientes categorías:

Administración de Costos de materiales

programas e implementación

Costos de Costos incurridos por

focalización el usuario

Capacitación de
Costos evitados
staff

Capacitación de
Costos de monitoreo
participantes

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD J-PAL Costing Guidelines; J-PAL Basic Costing Template
J - PAL | ANÁLISIS COSTO - EFECTIVIDAD
Calcular los costos

Definir el caso de comparación

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Calcular los costos

Bienes y servicios sin costo

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Calcular los costos

Costos para los beneficiarios

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Calcular los costos

Costos superpuestos

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Calcular los costos

Presentar rangos de costos según contexto

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Incluir transferencias monetarias

• Las transferencias son un costo para el implementador

tanto como un beneficio para los participantes.

• Desde el punto de vista del implementador, es un uso

de recursos.

Dhaliwal et al 2012

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

 Progresa (México)
Años adicionales de educación por cada 100 dolares

0.046 años

0.031 años Incluye costos de

transferencia

No incluye

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Consideraciones para el análisis prospectivo
de un programa a gran escala

El análisis supone que los impactos y costos no cambiarán

demasiado con el escalamiento.

¿Es razonable?

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Consideraciones

¿Hay cambios en los componentes o actividades del

programa que afectarán los costos?

Costos fijos vs. variables:

¿Cuáles cambian en proporción al número de
beneficiarios?

¿Son los mismos impactos?

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Usando las mismas unidades
Costo total
Año, moneda local
Tipo de cambio
Costo total
Año, USD
Deflación
Costo total
Año base, USD
Valor presente
Valor presente
Año base, USD
Inflación
Costo total
Año de análisis, USD

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

 Sensibilidad a tasas de descuento
Desviaciones estándar adicionales por USD 100

Tasa de descuento real 5%

Tasa de descuento real 10%
Tasa de descuento real 15%

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

 Ejercicio práctico:
Asistentes de docencia
Tres intervenciones

• Asistentes para educación remedial dentro de la

jornada escolar.

• Asistentes para la educación remedial fuera de la

jornada escolar.

• Asistentes para reducir tamaño de clases.

Ejercicio práctico

• Cada intervención se implementó en 100 escuelas con

120 estudiantes entre los grados 1 y 3 (aprox.)

Componentes:
• Entrenamiento para los asistentes
• Orientación y sensibilización sobre el programa a
actores locales
1. Estimar el impacto

Desviaciones
Impactos
estándar
Asistentes dentro de jornada 0.122**
escolar
Asistentes fuera de jornada 0.190***
Asistentes para currículo regular 0.092

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Quieres calcular el costo-efectividad de
este piloto, ¿Cómo obtendrías el impacto
agregado?

0. 190 x

A. Total de participantes
B. Total del grupo control
C. Total del grupo
tratamiento
D. Depende

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

1. Estimar el impacto

Parámetros Número Unidad

Duración del programa 1 Año

Total de estudiantes en la 12,000 Estudiantes

evaluación

Impactos Desviaciones
estándar
Mejoras en aprendizajes 0.190

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Si la intervención presentó externalidades
para grados que no fueron parte de la
intervención ¿se incluirían en el análisis?

A. No, no se previó ese

impacto
B. No, no son parte del
grupo tratado.
C. Sí, es un impacto que se
logró con el programa.
D. No sé

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

2: Calcular los costos
¿Cuáles son los ingredientes necesarios para la intervención
de Asistentes de Docencia fuera de la jornada escolar?

Costo N°
Parámetros Total (USD)
unitario unidades
$186.27 100 $18,627
$10 6000 $60,000
$25 300 $7,500
$100 100 $10,000
…
Total $139,482.13

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

 ¿Qué costos incluirías en el análisis?
(Más de una respuesta posible)

A. Materiales pedagógicos
B. Días de trabajo
profesores.
C. Mantenimiento escuela.
D. Días de trabajo asistentes
E. Traslados de niños a la
escuela.
F. Entrenamiento de
asistentes.
G. Días de trabajo director.

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

3: Dividir
• Costo por niño: $11.62
• Impacto por niño: 0.190 desviaciones estándar

Costo $11.62
Ratio de costo-
efectividad = = =
Impacto 0.190

$61.16 por desviación estándar adicional

1.63 desviación estándar por $100

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Conclusiones: El análisis de CE

• Es un gran complemento para las estimaciones.

• Es un primer paso útil para comparar programas

alternativos que tienen como objetivo el mismo resultado.

• La simplicidad permite mayor uso de la evidencia en

formulación de políticas, pero es necesario tomar
conciencia de suposiciones.

• Permite a los responsables de las políticas ver el efecto de

modificar supuestos y las condiciones locales.

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

Otros recursos

• Costing Guidelines
• Basic Costing Template
• Detailed Costing Template
• Paper on Comparative Cost-Effectiveness Analysis

J-PAL Research Resources

J - PAL | ANÁLISIS COSTO - EFECTIVIDAD

¡Gracias!

¿Preguntas?