Hacia un Sistema de Seguimiento y Evaluacin de Proyectos.

PARA QU UN SIP?

Conocer el impacto de las acciones desarrolladas Evaluar la validez de las estrategias seleccionadas por los proyectos y las hiptesis bsicas que los fundamentan, Poder comunicar esta informacin a terceros Articular y relacionar informacin sobre proyectos de caractersticas similares. Extraer aprendizaje a partir de los proyectos

Mejora de la eficacia y de la eficiencia. (Foco en la calidad. Procesos de mejora continua) Transparencia / Rendicin de cuentas Anlisis comparativo Revisin de estrategias y polticas

Niveles de Anlisis

Proyecto Programas Conjuntos de proyectos definidos en funcin de:

Tipo

de propsitos y de estrategias Insercin en reas locales o regionales Organizaciones ejecutoras Organizaciones financiadoras

 POR QU UN SISTEMA?
Implica : Un marco conceptual ordenador Una intencionalidad definida de antemano para el relevamiento de la informacin Criterios de procesamiento y anlisis y su comparacin con ciertos estndares esperados.

Qu entendemos por SIP?

FORMA SISTEMTICA DE IDENTIFICAR, RELEVAR, ORGANIZAR Y ANALIZAR INFORMACIN SOBRE PRODUCTOS E IMPACTOS DE UN PROYECTO O DE UN CONJUNTO DE PROYECTOS.

LA LGICA DEL PROYECTO OBJETIVO DE IMPACTO GENERAL

entonces

Supuesto: diagnstico de situacin

OBJETIVO DE IMPACTO ESPECIFICO

entonces si
Supuesto: hiptesis bsica del proyecto

PRODUCTOS
Supuesto: capacidad organizacional

entonces

si

INSUMOS

si

Modelos de orientacin sistmica

VARIABLES DE CONTEXTO

VARIABLES DE ENTRADA

VARIABLES DE PROCESO

VARIABLES DE RESULTADO

Niveles de anlisis
SOCIEDAD LOCAL
ORGANIZACIN GRUPO Aula C

Individuo

REQUERIMIENTOS DE UN SISTEMA DE EVALUACIN DE PROYECTOS SOCIO EDUCATIVOS

Caractersticas y elementos diferenciales de los procesos de educacin no formal

No estn definidos de antemano los objetivos, tampoco por tanto los contenidos ni la metodologa Diferentes percepciones y marcos de referencia Concepcin respecto a cmo se produce el aprendizaje Involucramiento de los diversos actores

No es posible evaluar lo que no se ha definido con precisin Impactos educacionales / Impactos sociales

Interrogantes centrales para la definicin de un Sistema de Informacin para el seguimiento y evaluacin de proyectos.

1. CUL ES EVALUACIN?

EL

PROPSITO

DE

LA

2. QU QUEREMOS EVALUAR?

3. QUIENES DEBEN INTERVENIR EN EL PROCESO DE EVALUACIN?

4. CMO DEFINIMOS CONCEPTUALMENTE VARIABLES A EVALUAR? CMO OPERACIONALIZAMOS?

5. CMO SELECCIONAMOS Y DEFINIMOS INDICADORES QUE NOS PERMITAN CONOCER EL ESTADO DE SITUACIN DE CADA UNA DE ESAS VARIABLES?

LAS LAS

6. CMO RELEVAMOS LA INFORMACIN RESPECTO A LOS INDICADORES SELECCIONADOS? CON QU INSTRUMENTOS? EN QU MOMENTO? QUIN (ES) ASUME (N) LA RESPONSABILIDAD DE HACERLO?

7. CMO PROCESAMOS Y ANALIZAMOS LA INFORMACIN RELEVADA? CON QU CRITERIOS Y PROCEDIMIENTOS? CUNDO LO HACEMOS? QUIN LO HACE?

8. CMO PRESENTAMOS LA INFORMACIN GENERADA? A QUIN DEBE SER PRESENTADA?

9. CMO PUEDE SER UTILIZADA PARA FACILITAR UNA MEJORA DE LOS PROCESOS Y DE LOS RESULTADOS EN DIVERSOS NIVELES?

10. CMO PUEDE CONTRIBUIR A FORTALECER LOS PROCESOS DE APRENDIZAJE ORGANIZACIONAL?

CONSTRUYENDO EL SISTEMA

La explicitacin de los objetivos

Resultados que esperamos alcanzar a travs de las acciones desarrolladas. Productos concretos que pretendemos generar. Cambios en los destinatarios o en la situacin que esperamos lograr por medio de estos productos ( Impactos)

Objetivos Educacionales
Comportamiento

esperado en el educando como consecuencia de determinadas actividades docentes susceptible de ser observado y evaluado

TIPOS DE OBJETIVOS
Objetivos Generales ( fines) Objetivos Intermedios Objetivos Operacionales - Definir : conducta esperada, condiciones en que debe realizarse, criterios de aceptabilidad.

Tipo de resultados

Conocimientos - Informacin, comprensin

aplicacin, evaluacin. Generales - Especficas

Habilidades Hbitos

Conductas no reflexivas integradas tras un proceso de aprendizaje

Actitudes .

Predisposiciones a reaccionar de un modo caracterstico

Criterios para la seleccin de contenidos ( medios para objetivo)

VALIDEZ SIGNIFICACIN ADECUACIN INTERDISCIPLINARIEDAD

1. La definicin de variables

Cualquier concepto que puede asumir al menos dos valores. Variables simples Variables en las que se identifican componentes que pueden variar en forma independiente . Estas Dimensiones deben ser tambin conceptualmente definidas

2. La definicin de indicadores
Las variables pueden ser directamente observables o puede ser necesario recurrir a indicadores. INDICADORES : Elementos observables que representan la variable en el nivel emprico y hacen posible su medicin. Puede utilizarse uno o ms indicadores Validez de los indicadores

3. Los instrumentos de relevamiento.

Medios para registrar informacin sobre un indicador Diversos tipos de instrumentos Criterios para determinar la calidad de los instrumentos Como aprovechar la informacin ya existente. Requisitos metodolgicos y decisiones en un contexto de accin. Combinacin de fuentes e instrumentos

4. Procesamiento y anlisis de la informacin

Clasificacin de los datos . ( Codificacin - Elaboracin de categoras) Resumen de la informacin ( Tipologas / Indices) Anlisis Presentacin de los datos. Criterios para analizar significacin de las variaciones

Relacin entre los datos del Contexto, Inputs, Procesos y Resultados, Relacin de los datos con hiptesis bsicas del proyecto. El interrogante sobre la atribucin de los resultados al proyecto. ( Relacin entre el diseo utilizado - Ej. Anlisis antes / despus. Series cronolgicas. Grupos de control - y el tipo de conclusiones que es posible extraer .

LA LGICA DEL PROYECTO OBJETIVO DE IMPACTO GENERAL

entonces

Supuesto: diagnstico de situacin

OBJETIVO DE IMPACTO ESPECIFICO

entonces si
Supuesto: hiptesis bsica del proyecto

PRODUCTOS
Supuesto: capacidad organizacional

entonces

si

INSUMOS

si

5. El uso de la informacin

El acierto de la propuesta de seguimiento y evaluacin se mide en funcin de su contribucin a mejorar los resultados. Condiciones institucionales : estilo de liderazgo - cultura organizacional. El foco en los aprendizajes y la bsqueda de sentido. La potencialidad de la evaluacin como base de las organizaciones que aprenden.

Posibles riesgos
Uso ritualista Complejidad excesiva Falta de rigor conceptual o metodolgico No mantener la continuidad del esfuerzo No optimizar el uso de la informacin

Puntos de apoyo

Ayuda a mejorar la planificacin, permite mayor realismo y precisin al fijar metas. Mayor visualizacin de cambios, visin de proceso. Refuerza la autovaloracin y el espritu de cuerpo Permite replantear estrategias Favorece comunicacin e intercambio con otros actores. Facilita alianzas.