Sistema de Seguimiento y Evaluacin

1
Sistema de Seguimiento y Evaluación

• Aprender para Mejorar
• Evidencias para mejorar el Desarrollo

2
Indice

• Estrategia de Seguimiento y Evaluacion
  Principios generales, razones, contexto
• Elementos que la componen y pasos para
  implementarla y llevarla a cabo
• Consejos para mejorar los Marcos de Seguimiento y
  Evaluacion de los Programas Conjuntos

3
Rationale Porque es necesario hacer
Seguimiento y Evaluación?

• Es un requisito incluido en el acuerdo legal
  entre el Donante y el PNUD
• Es una obligación asumida en la firma de cada uno
  de los programas conjuntos
• Es necesario Si se quiere cumplir con uno de los
  objetivos del fondo Escalar los programas
  conjuntos y expandir las soluciones que funcionen
  en pro del progreso hacia alcanzar los ODM
• Es útil Como parte del ciclo de gestión del
  programa y es la mejor forma de medir el progreso
  y detectar problemas, corregirlos, y aprender y
  mejorar

4
Quienes son los usuarios potenciales del Sistema
de SECuales son sus necesidades de información?
5
(No Transcript)
6
5 Minutos de comentariosNos dejamos a alguién
atrás?Estan reflejados las cuestiones mas
importantes de los interesados ?
7
Que tipo de principios deben inspirar el
sistema de SE?
Principios
8
En que tipo de principios se basa el sistema de
SE?

• De acuerdo a los estándares de UNEG y CAD/OCDE
• Orientado a un equilibrio entre el aprendizaje y
  la rendición de cuentas
• Basado en evidencias los datos, la información y
  el conocimiento son coherentes y contrastados y
  son la base para apoyar los juicios de valor y
  las conclusiones que se extraigan del SE
• Naturaleza y caracter participativo

9
En que tipo de principios se basa el sistema de
SE?

• Basado en el principio de agregación Elementos
  de SE (indicadores, informes evaluaciones,
  etc) las unidades de análisis van sumando unas
  otras en orden ascendente
• Objetivo principal de medir (DELTA), describir,
  analizar, comprender el objeto de estudio (PC) y
  usar los resultados para mejorar los programas y
  las políticas

10
Que dimensiones de analísis se deben medir y
estudiar ?Que preguntas debe responder el
sistema de SE?
11
En 5 minutos Cuales son las 3 preguntas mas
candentes que deberia reponder el sistema de SE?
12
(No Transcript)
13
Elementos que componen el sistema de SyE

• Marcos de Seguimiento y evaluacion del PC
  Incluyen indicadores para medir progresos a nivel
  de producto y resultados. Indicaodres generales
  de coordinacion y tematicos
• Visitas de campo para revisar los PC en
  profundidad, y preparar las evaluciones
  intermedias asi como diseminar lecciones
  aprendidas
• Evaluaciones (intermedias, finales y de impacto)
  para revisar y juzgar el valor de las
  dimensiones de estudio en cada nivel (PC, Pais,
  Ventana, FODM )
• Meta analisis/evaluaciones para buscar y agregar
  evidencias solidas sobre las ventanas tematicas
  que sean conducentes a vincular estas con los ODM
• Otras fuentes de datos informacion y
  conocimiento existentes (Sistema de Gestion del
  conocimiento, estudios de pais, etc)

14
Diferencias entre Seguimiento, Evaluación y
Reporting

• Para el propósito del F-ODM, el seguimiento se
  define como un proceso continuo de recogida y
  análisis de información, sobre todo en
  indicadores importantes (es decir, al nivel de
  actividad, producto y resultado)
• La función de Información / informes/reporting,
  por el contrario, tiene el objetivo principal de
  cumplir con los requisitos de responsabilidad
  prescritos por el Memorando de Entendimiento del
  F-ODM firmado por el donante y el PNUD en nombre
  de las Agencias de las Naciones Unidas
  participantes
• Por otra parte, la Evaluación es la valoración de
  una intervención de desarrollo, planificada, en
  curso o completada para determinar su relevancia,
  eficiencia, eficacia, impacto y sostenibilidad.  

15
Caracteristicas de la Funcion de Seguimiento

• Se orienta hacia los resultados, es decir, su
  principal objetivo es informar acerca del
  progreso de las fases superiores de la cadena
  causal lógica, sobre todo los cambios que se han
  producido a nivel de producto y resultado.
• Es de naturaleza sustantiva, en lo que se refiere
  a la medición de cambios en los ciudadanos, las
  instituciones u otro tipo de participante en el
  programa.
• Tiene intención agregativa. Es el primer elemento
  de una cadena causal en sistema de aplicación más
  amplia que incluye evaluaciones a mitad de
  período y evaluaciones finales. El conjunto del
  sistema está orientado a aprender y a saber qué
  funciona y qué no para mejorar los programas
  conjuntos.

16
Informes de Seguimiento

• Informes de seguimiento cuyo principal objetivo
  consiste en ofrecer avances y tendencias
  sustantivas sobre diversas dimensiones del PC
  (resultados, productos, ejecucion financiera,
  etc)
• Frecuencia Dos veces al ano, sustituyen a al
  segundo y cuarto informes trimestrales
• Responsabilidad del coordinador del programa
  conjunto, especialista en SE, otros

17
Indice del informe de Seguimiento

• Pagina de identificacion
• Marco de SE del Programa Conjunto
• Marco logico de resultados con informacion
  financiera (comprometido y desembolsado)
• MDGF General Progress (indicadores y preguntas)
• Coordinacion One UN (2 indicadores)
• Declaracion Paris ( 1 indicador)
• indicadores Tematicos (3 por ventana)
• Breves comentarios narrativos

18
Pasos a seguir en Seguimiento y Evaluación

• Mejora y adaptación del marco de S y E
• Facilitar la participación en las actividades de
  S y E
• Recolección de una línea de base
• Preparación de las visitas de campo para
  supervisión
• Adaptación de los términos de referencia
  generales a las evaluaciones a mitad de período
• Facilitación del proceso de evaluación a mitad de
  período
• Implementacion de la evaluacion de medio termino
  fases
• Integración de recomendaciones Plan de Mejora
• Preparación de los términos de referencia para
  las evaluaciones finales
• Realización y coordinación de la diseminacion de
  las evaluaciones finales, incorporación general
  de las recomendaciones y ampliación de los
  programas

19
(No Transcript)
20
Principales Resultados de SE
21
Consejos para Mejorar los Marcos de Seguimiento y
Evaluacion
Aprender para Mejorar Evidencias para mejorar
el Desarrollo
22
Consejo1 Tener en cuenta las necesidades de
informacion de los interesados a traves de la
participacion

• Etapa de diseno Seleccionar las preguntas que el
  sistema de SE debe cubrir
• Etapa de implementacion Los interesados
  contribuyen con sus comentarios e informaciones a
  contrastar las evaluaciones intermedias y finales
• Plan de Mejora Seguir la integracion de las
  mejoras y recomendaciones provinientes de las
  fases anteriores

23
Consejo 2 Concentrarse en medir el cambio. Los
efectos en beneficiarios y su vinculacion con
UNDAF y ODM

• Refinar la teoria del cambio del PC y debatirla
  con los interesados y el equipo de gestion.
  Describirla y hacerla explicita.
• Definir con claridad los beneficiarios y como los
  PC van a tener un efecto sobre ellos
• Describir los vinculos de los PC y su
  contribucion al UNDAF y a los ODM en el contexto
  local.

24
(No Transcript)
25
(No Transcript)
26
Consejo 3 Integridad de la unidad de analisis

• El PC la unidad basica de analisis, lo que
  significa que los que medimos es un todo no
  divisible en estructuras menores (grupos de
  actividades o productos llevados a cabo por
  diferentes actores) El proposito es medir el
  cambio inducido por el PC en si mismo, en su
  conjunto.

27
Consejo 4 Indicadores

• Numero de indicadores 3 o 4 indicadores por
  producto y resultado
• Cuantitativos Numeros absolutos,
• Cualitativos perceptions, descriptions, etc
• Que sean relevantes a los diversos usuarios del
  sistema de SE
• Usar proxies cuando no haya otras posibilidades

28
Consejo 5 Indicadores SMART

• Especifico que sea una medida tan proxima com
  sea posible del producto o resultado que se
  intente medir (datos desagregados si es
  necesario)
• Medible No ambiguedad en lo que se esta midiendo
• Alcanzable Sea tecnicamente posible obtener los
  datos a un coste razonable
• Confiable Acuerdo generalizado sobre la
  interpretacion de los datos obtenidos
• En tiempo Que los datos puedan ser recogidos con
  la suficiente frecuencia como para poder informar
  del progreso e influir la toma de decisiones

29
Consejo 6 Lista de Chequeo para valorar
potenciales indicadores

• Es el indicador
• Una medida lo mas directa posible del fenomeno
  que se quiere medir (producto/resultado)
• Suficientemente preciso para asegurar una
  medicion objetiva
• La forma mas practica y costo/efectiva para
  recoger datos
• Sensible a cambios en (producto/resultado) pero
  relativamente no afectado por otros cambios
• Posible de desagregar si fuera necesario

30
Consejo 7 Linea de base

• Cuales son las fuentes de datos?
• Cuales son los metodos de recogida de
  informacion?
• Quien recogera la informacion?
• Con que frecuencia se recogeran los datos?
• Cual es el coste y las dificultades de recoger
  los datos?
• Quien analiza los datos?
• Quien informara de los datos?
• Quien y como se usaran los datos?

31
Consejo 8 Identificando fuentes de datos

• Se puede acceder a la fuente con seguridad y
  con la frecuencia necesaria?
• La fuente puede proporcionar datos de calidad?
• Primaria recogida de datos por el personal de
  gestion del PC
• Secudaria recogida de datos recogidos por
  organizaciones ajenas al PC

32
Consejo 9 Metodos de recoleccion de la
informacion
33
Consejo 10 Papeles y responsabilidades de los
diversos actores en la implementacion del sistema
de SE

• El equipo gestor de PC Llevar a cabo el plan de
  SE recogido en el documento de PC y facilitar
  las actividades del Secretariado.
• El Coordinador Residente de la ONU facilitar los
  aspectos más políticos de los ejercicios de S y E
  en el país.
• El Secretariado Asesora y ofrece apoyo a los
  equipos de gestion del PC al homogeneizar el
  seguimiento y la evaluación con productos, datos
  e informacion. Asegura la funcion de Gestion del
  Conocimiento. Coordina y financia las
  evaluaciones de medio termino.

34
III. Example of good outcome indicators
35
Examples
36
Examples