Magister Evelina Aedo

INCOMPETENCIA INCONSCIENTE: Cuando alguien “no sabe que no sabe”. INCOMPETENCIA CONSCIENTE: “Reconocemos que no sabemos”, requiere de mucha práctica, atención y perseverancia para no abandonar el aprendizaje. COMPETENCIA CONSCIENTE: Cuando “comenzamos a ser competentes”, en lo que estamos aprendiendo. COMPETENCIA INCONSCIENTE: Es cuando todo lo que hemos aprendido de forma tan concienzuda se armonizan.

¿ QUÉ VE USTED?

Proporcionar los elementos básicos para elaborar indicadores de productos, resultados, efectos -o impactos- en términos adecuados para ser aplicados en situaciones concretas y, también, para ser incluidos, si es necesario, en sistemas de indicadores tales como Bancos de Indicadores (BI)

1. Indicadores como instrumentos de observación de la realidad no directamente visible .

2. Validez de los indicadores. 3. Confiabilidad de los indicadores. 4. Calidad de los indicadores. 5. Indicadores de valor. 6. Productos, resultados, efectos e impactos.

¿Qué entendemos por Monitoreo y Evaluación? (MyE)

LA RESPUESTA

SEGUIMIENTO

APRECIACIÓN

Contar con información para apreciar lo que estamos haciendo

Periódica y tener un Juicio de Valor

EVALUACIÓN MONITOREO CALIDAD

La finalidad: Es la elaboración de indicadores aplicables al análisis del valor. Entendiendo valor como el logro de algún tipo de modificación de la realidad como consecuencia de la utilización de recursos.

HACER Capacidad

SABER Conocimiento

SER Autorrealización

APRENDER

A SER

APRENDER A

CONOCER

APRENDER A

HACER

APRENDER A VIVIR EN

COMUNIDAD

Formación integral

Sociedad

Sociedad

Sociedad Sociedad

EL PROCESO DE FORMACIÓN

ACTITUD DE CAMBIO Y REFLEXIÓN

Nos sirve para…… Nos ayuda a detectar y corregir “focos rojos” a tiempo

Nos permite justificar nuestros acciones o proyectos con más argumentos

Nos ayuda a entender qué funciona y qué no funciona

Nos brinda retroalimentación para planear mejores formas de enfrentar un problema

Nos da elementos para alcanzar mayores y mejores resultados

Lo más largo, pero lo más importante

Algunos aspectos de la realidad son observables directamente y otros no

Ejemplo: los gestos de la cara de las personas, pero no es observable directamente su estado de ánimo

EN ESE SENTIDO Cuando las expresiones “se asocian” es

la clave del concepto de indicador: significa, literalmente, que consideramos que ciertos gestos son indicadores de ciertos estados de ánimo.

RESPUESTA

Existe un grado de asociación entre una parte de la realidad que podemos observar y otra que no podemos

En otras palabras, los indicadores son instrumentos de

observación indirecta de la realidad.

VALIDEZ • La fuerza de la asociación entre lo que se trata de

conocer y lo que muestra un indicador es la medida de su calidad.

• Las razones por las cuales los indicadores pierden calidad tienen que ver con la validez y con la confiabilidad.

• La validez es la condición de que el indicador esté definido en términos de lo que interesa conocer

EJEMPLO: VALIDEZ Es posible que nos interese estimar la

probabilidad de ciertas condiciones tales como la irritación de la garganta y la tos. La presencia en las vías respiratorias de ciertos microorganismos que producen una enfermedad como la angina y que, naturalmente, no son directamente observables.

El indicador puede ser: Un nivel mayor que el

normal de temperatura del cuerpo -la fiebre- :probabilidad a la existencia de angina.

Confiabilidad de los indicadores La confiabilidad de los indicadores

se refiere a la probabilidad de que los resultados que se obtengan sean los mismos todas las veces en que se los emplee.

Por Ejemplo Los sastres utilizan unas cintas métricas

flexibles para tomar las medidas. Los sastres tratan de conocer la longitud y no

hay duda de que es eso lo que mide la cinta, de manera que no existen problemas de validez aquí: esas cintas no sirven para medir peso ni temperatura. Sin embargo, si un sastre tiende a tensar mucho la cinta y otro no, las mediciones de longitud no serán las mismas.

Indicador es poco confiable, por qué?

La Calidad de los Indicadores Se expresa en la probabilidad de que

indicarán lo que interesa que indiquen todas las veces que se los aplique. En otras palabras, es la conjunción entre las respectivas probabilidades de la validez y la confiabilidad.

Por Ejemplo Los mecánicos de automóviles -al igual que los

médicos- suelen ser hábiles para identificar e interpretar indicadores, (quizás porque tienen en común que ambos realizan tareas de mantenimiento). Para saber el grado de desgaste del motor de un automóvil es preciso desarmarlo. Sin embargo, un buen mecánico sabe que los motores desgastados, además de que queman la gasolina, también emiten un característico humo color blanco por el tubo de escape. La cantidad de humo blanco (fenómeno visible) calidad porque es confiable y válido

Otro Ejemplo Los políticos están constantemente

"leyendo" indicadores de coyuntura política, los hombres de negocios los mercados, nosotros las relaciones sexuales. Un estudiante de secundaria, necesita imperiosamente saber si las sonrisas y los comentarios que le hiciera ayer una compañera indican realmente interés por él y convoca un estado mayor de amigos íntimos para analizarlos cuidadosamente y emitir un veredicto sobre esta cuestión de vida o muerte.

Conclusión del ejemplo El adolescente trataba de determinar el

grado de calidad de ciertas conductas de la compañera (fenómeno observable) como indicador de interés por él (fenómeno no observable). Los indicadores sin validar son

simplemente conjeturas.

El Valor Es la satisfacción de necesidades

humanas a partir del uso de recursos. En este sentido, los indicadores de valor adquieren un sentido adicional: el de ser consecuencias del uso de esos recursos.

Por Ejemplo Los indicadores de un programa de atención

de la salud, los productos serán los servicios concretos prestados (curaciones), los resultados serán mejoras en la salud de los pacientes y los efectos serán la mejora en la calidad de vida, capacidad laboral u otros. Cuando estos efectos son más o menos inmediatos los llamaremos de impactos: la inmediata recuperación de la capacidad de trabajo que surge de la mejora en el logro de curaciones.

Los Indicadores de valor relativos a la salud, (la curación de las enfermedades tratadas) son los resultados buscados mediante los productos, que podrían ser los medicamentos, tratamientos médicos.

Los usuarios serían los pacientes, que también serían beneficiarios de los resultados (la curación), sus familiares y allegados, que también serían beneficiarios aunque sin la condición de usuarios. La mejora de la capacidad laboral son los efectos más inmediatos (por lo tanto, impacto), que podríamos identificar como consecuencia de la causa inicial, la asignación de los recursos.

Definiciones Producto: Agregados de valor que resultan

inmediatamente del uso de los recursos (outputs), destinados a usuarios que consumirían el valor de uso de los mismos.

Por ejemplo, los productos de las organizaciones de salud son “acciones de atención de salud”; de las educativas “acciones educativas.

Continuación Resultado: consecuencias (outcomes)

esperadas del consumo de los productos por parte de los usuarios. Los resultados son, en este sentido, estados deseados a los que se espera que los productos contribuyan.

Por ejemplo, la curación (o disminución de la

incidencia) de las enfermedades por parte de los pacientes son los resultados esperados de las prestaciones concretas de atención médica (productos).

Continuación Efecto (o impacto): Consecuencias

(outcomes) esperadas de los resultados, es decir, los estados a los que se espera que éstos contribuyan.

Por ejemplo, la mejora de la calidad de vida

y de las capacidades laborales de la población, el aumento de la equidad en el acceso a la calidad de vida que podría contribuir a ciertos resultados, como la mejora de los niveles de salud.

Ya con el proyecto claro, Definir efectos o componentes: ¿Procesos, resultados, impacto, costo-efectividad...?

Los recursos con los que

contamos para la compra ARV

Distribución de nacional de ARV

PROCESOS RESULTADOS IMPACTO

CTARV abastecidas todo el año

Panamá en el 2011 reporta

100% de acceso universal

INSUMOS

¿Cómo saber cuáles son los procesos, resultados e impacto?

En teoría...

Formato que normalmente se usa:

OBJETIVO INDICADORES RESULTADOS MECANISMOS

DE EVALUACIÓN

Mencionar el objetivo específico

Señalar al menos un indicador del objetivo

Definir cuánto se espera lograr en determinado tiempo para cada indicador

Mencionar de dónde se obtendrá la información

ACTIVI-DADES

INDICADORES (PROCESOS)

Resultados (PROCESOS)

MECANISMOS DE

EVALUACIÓN Listar las actividades relacionadas con ese objetivo específico

Señalar al menos un indicador de la calidad de cada una de las actividades listadas

Definir cuánto se espera lograr en determinado tiempo para cada indicador

Mencionar de dónde se obtendrá la información para cada indicador

Marco de Resultados al Plan Estratégico

Plan Estratégico Multisectorial

Nacional de ITS VIH y Sida 2009-2014

4 Ejes Estratégicos

4 Objetivos Generales

15 Objetivos Específicos

43 Resultados

+ 22Efectos Directos Estratégicos

12 pasos de construcción del PNM&E

INDICADORES A REVISAR 1. Plan de MYE del Plan Estratégico 2. Directrices de indicadores UNGASS 3. Directrices de indicadores de Acceso Universal 4. Toolkit de Fondo Mundial 5. Alerta Temprana

PERIODO DE

PREGUNTAS

Mariaelena Silva Psicologa Organizacional