Evaluacin de un programa de salud

INTRODUCCIN
Los programas de salud permite medir los logros alcanzados

En general, permite mejorar el desempeo e incluso el impacto del programa.

Es imposible conocer la evolucin de un programa o intervencin en salud si no tenemos mtodos de evaluacin que nos permitan ajustar las estrategias, realizar cambios, optimizar los recursos y facilitar la toma de decisiones basadas en resultados.

PODEMOS EVALUAR UN PROGRAMA DESDE DOS TIPOS DE ABORDAJES la evaluacin formativa que permite modificar y afinar un programa en ejecucin la sumativa que evala programas finalizados

Esta ltima permite que el tomador de desiciones defina cambios importantes para el nuevo periodo, contine o modifique el programa, de acuerdo a la correlacin entre los objetivos planeados, la forma de ejecucin y los resultados obtenidos.

DEFINICIN DE EVALUACIN
PROGRAMA

Es necesario diferenciar los tres niveles en los cuales se pueden describir lo evaluado
PROYECTO INTERVENCIN

USANDO UN EJEMPLO MUY CLARO, EL DE LA TUBERCULOSIS existen programas de prevencin y control en diferentes niveles pero a su vez, los programas pueden adoptar diversos proyectos o estrategias de intervencin OMS, recomend que todos los programas implementaran la estrategia de Tratamiento Acortado Supervisado

Es claro que la evaluacin se puede hacer en cualquiera de los niveles (programa, estrategia o intervencin) se usar el trmino programa para definir las intervenciones mltiples orientadas a lograr una meta general.

1. LA SUMATIVA---relacionada con programas finalizados . -toma de decisiones relacionadas con continuar, cambiar, expandir o finalizar un proyecto 2. LA FORMATIVA--- permite evaluar un programa en la ejecucin del proceso para afinar las acciones de implementacin

De proceso : -Se relacionan con el control -Aseguran la calidad de la practica -Usan para evaluar como estn implementados los procesos. De evaluacin: -Abordaje comparativo tanto en los logros como procesos. -Se despendren de la misin, objetivos y actividades.

 1 EJE: relacionado con los indicadores -Provision, utilizacionde servicios, cobertura o impacto. 2EJE : grado de inferencia -Adecuiadad, plausibilidad y probabilidad.

 Componente categrico: -3 diseos: adecuidad, probabilidad y plausibilidad. Fuerza inferencial: -. Depende de la existencia o no de un grupo de control

PREPARACION DE UN PLAN DE EVALUACION

FASES
1) Identificacin de resultados que se desea obtener. 2) Identificacin de indicadores de logros de objetivos. Ejemplo: Meta: Disminuir el inicio del uso del tabaco en jvenes Objetivo: Incrementar el nivel general de conocimientos acerca de riesgos del uso del tabaco en jvenes entre los 9 y los 11 aos. Actividad: Realizacin de debates entre los jvenes sobre riesgos del tabaquismo. Indicador: Incremento de puntuacin media del grupo en test de conocimientos sobre riesgos del tabaquismo. (siempre basado en la lnea base pre-intervencin). 3) Identificacin de mtodos/instrumentos de recogida de datos. 4) Identificacin del diseo y anlisis de la evaluacin: El diseo de la evaluacin deber permitir asumir relaciones causa-efecto entre la intervencin y los resultados. 5) Determinar los plazos a cumplir y los recursos con los que se cuenta. 6) Preparacin del plan de evaluacin.

COMPONENTES DE UN PROGRAMA DE EVALUACION

Aspectos Organizativos
- Definicin del papel del evaluador, su experiencia y competencias. - Definicin del tipo de relacin y de conexiones entre evaluador y personal del programa. - Es importante que el evaluador establezca lazos profesionales fuertes con el resto del grupo, para asegurar el xito de la evaluacin, deber establecer controles de calidad y seguridad en recoleccin de datos a travs de: Establecer un procedimiento de recoleccin de datos. Nombrar un responsable que se encargue de comprobar si los datos estn completos y si son fiables, as como de establecer plazos para la recogida de datos. Establecer sistemas de revisin de protocolos para asegurar que son claros y fciles de usar. Desarrollar sistemas de entrenamiento y feed-back del personal encargado de la recoleccin de datos para asegurarse de que la recogida de datos es homognea. Desarrollar un sistema indicador del impacto de retro-alimentacin sobre programa. Es decir un sistema interno de AUTOEVALUACION. Durante la preparacin del plan evaluativo, habr que tener en cuenta en todo momento su viabilidad.

Evaluacin del Proceso

Trata de describir y documentar qu fue realizado, cunto, cundo, para quin, y quin lo realiz. La evaluacin del proceso permitir conocer
:

a) Problemas y dificultades en la implementacin. b) Si se sigue el protocolo inicial y cualquier desviacin del protocolo inicial

c) Nivel de "penetracin" de intervencin. Ejm, nmero de anuncios pblicos, horario de emisin, medios utilizados y nmero de sujetos expuestos a un mensaje de prevencin
.

Es decir, tipo de informacin que se quiere recoger a travs de evaluacin del proceso es: Indicadores sobre actividades que se llevan a cabo y su relevancia con respecto a necesidades de poblacin diana (medidas objetivas y subjetivas; cuantitativas y cualitativas
).

- calidad, cantidad, duracin y suficiencia de las actividades realizadas

- calidad del entrenamiento de formadores, profesionales socio-sanitarios, educadores, etc - valoracin de colaboracin con otros organismos que sirvan a poblacin diana - monitorizacin de progresos hacia los objetivos del programa - recoleccin de datos, plazos, definicin de lnea base y de distintas medidas a obtener - problemas en implementacin del programa, actividades, recogida de datos, reclutamiento de sujetos, etc. - estrategias tiles.
. . . .

Los datos y resultados obtenidos durante evaluacin del proceso servirn, en parte, como sistema de AUTOEVALUACION y modulacin del programa.

Para que este proceso sea efectivo a la hora de realizar ajustes, ya sean recogida de datos, entrenamiento de personal, horarios, actividades, estrategias, etc., ser recomendable que el evaluador establezca un sistema de feed-back adecuado a las necesidades del programa y adaptado a exigencias temporales de distintas facetas que se pretende evaluar. Esto supone, por una parte, definir claramente objetivos a alcanzar en el proceso de autoevaluacin y los indicadores de logros de objetivos ms adecuados y, por otra, desarrollar un sistema efectivo de comunicacin de resultados de autoevaluacin al resto del personal del programa, de manera que potencie la discusin y elaboracin de estrategias tiles para la mejora de situacin, sin crear culpabilidad o rechazo.

Preguntas clave y tipo de informacin a recoger, ejemplos:

A continuacin se presentan una serie de preguntas y ejemplos para ilustrar el tipo de informacin que se quiere obtener a travs de la evaluacin del proceso:

EFECTIVIDAD DE LA IMPLEMENTACIN DE LA CAPTACIN ACTIVA DE POBLACIN

Nmero y caractersticas de las instituciones contactadas. Nmero de contratos de colaboracin. Nmero de personas que han sido contactadas a traves de las actividades de captacin activa. Caractersticas demogrficas de la poblacin captada, se ajustan a las caractersticas de la poblacin diana?, se ha logrado atraer al grupo de alto riesgo?, se han logrado abarcar todas las zonas demarcadas donde se encuentra la poblacin de riesgo? Qu tipo de problemas se han encontrado?, cules han sido las estrategias ms tiles?

TIPO DE ACTIVIDADES REALIZADAS

IMPLEMENTACIN Y SEGUIMIENTO DEL DESARROLLO Y EL ENTRENAMIENTO DEL PERSONAL DEL PROYECTO

RETENCIN DE SUJETOS Y PARTICIPACIN EN ACTIVIDADES

Implementacin y seguimiento de servicios de apoyo, servicios de consulta y conexiones con otros profesionales de la salud proporcionados por el programa. Nmero de instituciones o centros participantes que proporcionan servicios a la poblacin. Frecuencia y calidad Nmero de participantes

Nmero de sesiones y tipo de entrenamiento recibido: violencia domstica, sistemas familiares,prevencin del VIH/SIDA, prevencin de recadas, dinmica de grupos, etc. Nmero, contenido y eficacia de actividades de apoyo.

Nmero de participantes en las distintas actividades del proyecto.

Intensidad (nmero, duracin) de la participacin.

EVALUACIN DE RESULTADOS

Definicin de los efectos del proyecto de intervencin Solidez cientfica y consideraciones ticas en el diseo de la evaluacin Desarrollo de los instrumentos a utilizar, instrumentos estructurados y validados en otras poblaciones a fin de poder hacer comparaciones y generalizaciones Recogida de datos: Confidencialidad, consentimiento informado y proteccin de los sujetos son conceptos clave. Los indicadores de la lnea base y de la situacin post-intervencin debern ser los mismos. Los plazos de administracin de protocolos debern ser claros y seguirse lo ms fielmente posible para evitar sesgos El tipo de anlisis estadstico a utilizar y la interpretacin de resultados depender del diseo de la evaluacin

Disminucin en el porcentaje total de jvenes de 12 aos que se inician en el consumo de tabaco en el ltimo ao (comparndolo con el ao anterior)

Disminucin del nmero de embarazos en adolescentes, en un tiempo y zona determinados

Incremento del porcentaje de sujetos que acceden y/o que terminan satisfactoriamente un tratamiento de drogadiccin, en un tiempo X, en el centro X

Aumento de habilidades de comunicacin y negociacin en jvenes, despus de un taller de habilidades