You are on page 1of 147

1

Captulo 1. Gestin por resultados


Iniciamos el estudio de los sistemas de monitoreo y evaluacin por la resea del
enfoque de gestin o gerencia por resultados, dado el hecho que es en el marco de
la aplicacin de este enfoque que se efectan las acciones de monitoreo y
evaluacin. El enfoque de gerencia por resultados es el enfoque predominante en la
direccin de entidades pblicas, que tiene conceptos centrales a los de cadena de
resultados, indicadores de desempeo y gestin de riesgos. La gerencia por
resultados, por otra parte, est ntimamente vinculado al del marco lgico, razn por
la cual ambos temas son tratados en forma interrelacionada.

1.1

Marco lgico y gestin por resultados

El marco lgico es la base conceptual del sistema de gestin por resultados. Este es un conjunto de
procedimientos para la gestin en tiempo real de los resultados de una intervencin pblica o de una
intervencin en el desarrollo en general. La gestin por resultados es un enfoque de gerencia basado en la
nocin de que el empeo en alcanzar los resultados debe guiar la asignacin de recursos, la realizacin de las
actividades y la gestin en su conjunto de una organizacin. El sistema de gestin por resultados es un
conjunto de procedimientos relativos a la administracin de una entidad pblica durante todas las fases del
ciclo de gestin: planificacin, organizacin, direccin y evaluacin. El sistema permite configurar la gestin
de modo que ella se oriente al logro de tres niveles de resultados1:

Cmo es el marco lgico?


El marco lgico es un mtodo que sirve para organizar y visualizar la interaccin de los distintos
elementos de un proyecto. Bajo este enfoque, los recursos humanos y materiales, expresados ambos en
trminos fsicos o monetarios- constituyen los insumos bsicos para la realizacin de las actividades, las cuales
permiten, a su vez, obtener ciertos productos. Estos tres elementos constituyen en rigor el proyecto y estn bajo
control y responsabilidad de la entidad ejecutora. Los productos obtenidos (tambin llamados componentes del
proyecto) tienen un efecto predecible, bajo ciertas condiciones de entorno, sobre los beneficiarios directos, lo
cual es descrito en el propsito y, ms ampliamente, en el fin del proyecto2.
En principio, el marco lgico se presenta como una matriz cuatro por cuatro; es decir, una tabla de cuatro
columnas y cuatro filas. Las columnas suministran la siguiente informacin:

La cadena de resultados y procesos, en la primera columna.


Los indicadores o expresin cuantitativa de los resultados y procesos, en la segunda columna.
Los medios de verificacin de los indicadores, en la tercera columna.
Los supuestos o factores externos que plantean riesgos al proyecto, en la cuarta y ltima columna.

Las filas de la matriz presentan informacin acerca de los resultados, indicadores, medios de verificacin y
supuestos en cuatro momentos diferentes de la vida prevista del proyecto:
1

El sistema de gestin por resultados es el enfoque principal de gestin de las intervenciones para el desarrollo
promovida por el Comit de Asistencia al Desarrollo de la Organizacin de Cooperacin y Desarrollo Econmico
(OCDE).

Existen diferentes manuales y textos sobre marco lgico. Se recomiendan los manuales de la
Agencia Noruega de Desarrollo, Enfoque del marco lgico; y BID, Evaluacin: Una herramienta de
gestin para mejorar el desempeo de los proyectos.
2

La primera fila contiene el fin u objetivo estratgico al cual el proyecto contribuir de manera
significativa, luego de que haya estado en funcionamiento por un perodo razonable.
La segunda contiene el propsito u objetivo especfico de desarrollo, logrado cuando la
ejecucin del proyecto haya concluido.
La tercera contiene los productos o componentes generados y entregados a la poblacin
beneficiaria en el transcurso de la ejecucin del proyecto.
La ltima fila contiene las actividades requeridas para generar los productos o resultados.

El marco lgico logra, sin mayor necesidad de sofisticados mtodos matemticos, introducir rigor cientfico en
el diseo, ejecucin y evaluacin de las polticas de Estado, siendo sta la razn por la que el pas incorpor el
enfoque del marco lgico en la metodologa del Sistema Nacional de Inversin Pblica (SNIP) y la razn por
la cual muchas entidades pblicas lo vienen utilizando en los distintos procesos de planificacin, ejecucin y
evaluacin de sus operaciones en general3.
Grfico 2.1 Marco lgico: presentacin estilizada

Cadena de
resultados

Indicadores
de desempeo

Medios de
verificacin

Factores
externos

Fin (resultado
intermedio y final)

Indicadores de
impacto

Fuentes
secundarias

Supuestos para la
sostenibilidad

Propsito
(resultado inmediato)

Indicadores de
efecto

Fuentes
secundarias

Supuestos para
logro del fin

Componentes
(productos)

Indicadores de
producto

Fuentes secundarias
y primarias

Supuestos para
logro del propsito

Subcomponentes/
Actividades

Indicadores de
proceso

Fuentes primarias

Supuestos para logro


de componentes

Costos

Condiciones previas

Evolucin histrica del marco lgico


El xito obtenido a partir de 1969 por USAID4 en cuanto al mejoramiento de su cartera de proyectos mediante
el uso del marco lgico, motiv que otras agencias de financiamiento del desarrollo tambin adoptaran esta
3

El marco lgico (Iogical framework, en ingls) fue concebido en 1969 por Practical Concepts Inc. (PCI),
una empresa consultora norteamericana, para la Agencia de Desarrollo Internacional de los Estados
Unidos. Fue puesto en prctica desde 1970 por AID en la gestin de proyectos de cooperacin
internacional en diversos pases del mundo.
4

USAID, Agencia de los Estados Unidos para el Desarrollo, organismos de cooperacin internacional del
gobierno norteamericano.
3

metodologa. Tal fue el caso de la Agencia Alemana de Cooperacin Tcnica, que en los aos setenta, puso a
prueba el enfoque del marco lgico en una determinada cartera de proyectos.
En 1981, sobre la base del xito alcanzado durante sus primeras experiencias y bajo la direccin de Moses
Thompsom, lder de la consultora Team Technologies, GTZ llev a cabo una fase piloto, desarrollando el
mtodo ZOPP, que en espaol significa planificacin de proyectos orientada a objetivos, utilizando como base
la matriz del marco lgico. Formalmente, el ZOPP fue introducido primero de manera provisional en 1983,
mediante una directiva administrativa, y en 1987 como norma obligatoria y parte integral del ciclo del
proyecto, conforme a lo establecido en captulo 4211 del Manual de Organizacin. Hasta fines de 1988 todos
los directivos de GTZ, colaboradores involucrados en la ejecucin de proyectos y contratistas haban recibido
entrenamiento en el mtodo ZOPP y la forma de aplicarlo. El dominio del ZOPP pas a ser una condicin
indispensable para cualquier promocin jerrquica o carrera en la empresa. Hasta hoy se elige ofreciendo un
amplio programa de entrenamiento en ZOPP; a todos los niveles, en Alemania y en el exterior5.
El ZOPP incorpor nuevos elementos, como los anlisis de participantes, anlisis de problemas, anlisis de
objetivos y anlisis de alternativas. El trabajo realizado bajo la dinmica de talleres con participacin de
equipos multidisciplinarios donde tomaban parte GTZ, las organizaciones contrapartes y los grupos
beneficiarios, fue incorporado en lo que constituy una metodologa participativa de diseo de proyectos.
Luego de la adopcin del marco lgico, en su versin mejorada llamada ZOPP, por parte de GTZ, este
enfoque se difundi en forma amplia por todo el mundo, siendo adoptado prcticamente por la mayora de
agencias del sistema de las Naciones Unidas (OIT, PNUD, OPS, OMS, FAO, etc.) y la Unin Europea.
Sin embargo, hacia la segunda mitad de los aos 90, an existan importantes instituciones internacionales,
como el Banco Interamericano de Desarrollo, que no se adheran al enfoque del marco lgico. El ao 1996,
ante una evaluacin institucional a raz de una necesaria reposicin de su capital social, esta institucin debi
admitir la necesidad de incorporar el enfoque del marco lgico dentro de los instrumentos de gestin del ciclo
de proyectos. Desde entonces, todos los proyectos financiados por el BID son formulados y evaluados en base
a la metodologa que, veinte y siete aos atrs, en 1969, concibiera un genial Leon Rossenberg.
Desde agosto de 1977, tambin el Banco Mundial, el ms grande financiador de proyectos sociales del mundo,
incorpor el enfoque del marco lgico en los procesos de preparacin, monitoreo y evaluacin de los
proyectos, a cuyo efecto cont tambin con la asistencia tcnica de la consultora de Moses Thompsom.

Qu es el ZOPP?
En los aos setenta, la Agencia Alemana de Cooperacin Tcnica (GTZ) puso a prueba en algunos proyectos
el enfoque de marco lgico que aos atrs haba sido adoptado por la USAID. En 1981, tras la ejecucin de las
primeras experiencias positivas, la GTZ llev a cabo una fase piloto y tomando como base al enfoque del
marco lgico desarroll el mtodo ZOPP, que en espaol significa planificacin de proyectos orientada a
objetivos.
El ZOPP inclua algunos elementos nuevos, como el anlisis de participantes, anlisis de problemas,
anlisis de objetivos y el anlisis de alternativas. El trabajo en equipos multidisciplinarios mediante talleres
en los que formaban parte la GTZ, las organizaciones contrapartes y los grupos beneficiarios tambin fueron
5

Gestin del Ciclo del Proyecto (PCM) y Planificacin de Proyectos Orientada a Objetivos (ZOPP).
Desutche Gesellschaft fur Technische Zusammenarbeit (GTZ).
4

incorporados en lo que constituy una metodologa participativa de diseo de proyectos. Cientos de


moderadores fueron entrenados en Alemania o en los propios pases receptores. Los talleres ZOPP utilizaban
tcnicas de visualizacin en las distintas etapas de trabajo mediante tarjetas de colores y paneles. Cabe
destacar, adems, que en la metodologa ZOPP se prev la elaboracin de cinco versiones del marco lgico a
lo largo del ciclo del proyecto:

ZOPP 1 o PRE-ZOPP, cuyo objetivo es realizar el anlisis de problemas y de objetivos tan completo como
sea necesario; pero no demasiado detallado.
ZOPP 2 o ZOPP de Examen, en el cual se revisa el ZOPP 1, analizando los vacos y sealando en dnde
es necesario contar con mayor informacin.
ZOPP 3 o ZOPP de la Contraparte, que responde a temas pendientes, evala la relevancia de los
problemas y objetivos, haciendo un anlisis intenso de los participantes en el proyecto.
ZOPP 4 o ZOPP de Arranque, en el cual se revisa el anlisis de participantes y se prepara el proyecto en
forma detallada.
ZOPP 5 o ZOOP de Replanteo, cuya funcin es revisar el ZOPP 4, y se adapta la estrategia del proyecto
de acuerdo a los nuevos problemas encontrados y/o modificaciones planteadas.

Gran parte de la metodologa ZOPP hoy se encuentra plenamente incorporada en el cuerpo central del enfoque
del marco lgico. De hecho el anlisis de problemas, objetivos y alternativas mediante sucesivas lluvia de
ideas es parte conformante del enfoque del marco lgico, tal cual es utilizado por las principales agencias de
promocin del desarrollo.

1.2

Enfoque del marco lgico

Al estudiar el marco lgico, debe establecerse claramente la diferencia entre el marco lgico como
matriz (una tabla de cuatro columnas y cuatro filas) y el marco lgico como enfoque para la gestin del ciclo
de proyectos, en particular para el diseo de un proyecto, proceso que abarca fases diversas de anlisis, tales
como la identificacin de problemas, anlisis de involucrados, anlisis de problemas, anlisis de alternativas y,
finalmente, la propia matriz del marco lgico6.

Enfoque del marco lgico. Como enfoque, el concepto de marco lgico est
ntimamente vinculado al ciclo de proyecto, razn por la cual se habla, con absoluta
propiedad, del enfoque del marco lgico en la gestin del ciclo del proyecto.

El enfoque del marco lgico debe considerarse como una importante herramienta gerencial de las entidades
pblicas, ya sean stas de ejecucin o de financiacin de proyectos. En palabras de sus autores, Leon
Rossenberg y Lawrence Posner, el marco lgico no es difcil de usar, no requiere el uso de matemticas ni de
un software especializado. Tampoco ofrece respuestas a las cuestiones crticas del desarrollo, pero organiza la
informacin de tal manera que puedan formularse las preguntas apropiadas. Su uso no se restringe slo a
proyectos. Puede ser aplicado a una variedad de situaciones: diseo de planes estratgicos y programas de
desarrollo, diseo de estructuras organizacionales, articulacin de los distintos niveles de planificacin dentro
6

La visin del marco lgico como un proceso es conocida, tambin, como planificacin de proyectos
basada en objetivos (ZOPP). Vase al respecto los documentos publicados por la GTZ, especialmente
Gestin del Ciclo del Proyecto y Planificacin de Proyectos Orientada a Objetivos, 1990.
5

de una institucin o articulacin de la actuacin de las distintas entidades de un sector de la administracin


pblica.

Principio fundamental del marco lgico


El principio subyacente al enfoque del marco lgico es la relacin de causa a efecto, base de la lgica tal y
como ella existe desde que Aristteles estableciera sus cimientos filosficos y cientficos 7 . Cuantos ms
estrechos sean los vnculos de causa a efecto entre los objetivos y los dems componentes, mejor ser el diseo
del proyecto. Por ello, cada proyecto que se desarrolla empleando el enfoque del marco lgico debe hacer
explcita la relacin de causa a efecto comprendida en l. As tenemos que:

Las relaciones de causa y efecto entre los distintos niveles de objetivos (relaciones entre
actividades-resultados, resultados-propsito, y propsito-fin) describen las condiciones necesarias
para que un proyecto sea exitoso.
Las relaciones de causa y efecto entre los objetivos y los supuestos aclaran la probabilidad de que
el proyecto tenga xito, bajo un contexto social y general dados.

En el contexto del enfoque del marco lgico, para la obtencin de un determinado objetivo existen dos tipos de
condiciones:

Las condiciones necesarias, que se establecen a lo largo de la columna de objetivos.


Las condiciones suficientes, que se establecen en la columna de supuestos.

Hiptesis sobre el desarrollo


Las relaciones de causa a efecto entre las proposiciones contenidas en el marco lgico configuran hiptesis que
el proyecto, al ejecutarse deber confirmar o recusar. Las hiptesis contenidas en el marco lgico, llamadas
usualmente hiptesis sobre el desarrollo, pueden ser ms o menos generales o precisas, y operan dos o ms
variables, pero en cualquier caso son slo proposiciones sujetas a comprobacin emprica, a travs
precisamente de la ejecucin real del proyecto cuyo marco lgico se est elaborando. En ocasiones, sin
embargo, las hiptesis han sido suficientemente comprobadas en proyectos anteriores. En este caso se habla de
proyectos replicativos, por oposicin a los proyectos en los que las hiptesis estn por comprobarse y el nivel
de incertidumbre es an grande, siendo stos conocidos como proyectos innovativos.
As, por ejemplo, para el mejoramiento del ingreso de los agricultores se requiere, por un lado, un incremento
de la productividad agropecuaria (condicin necesaria) y, por otro, la evolucin favorable del mercado de
consumo de productos agropecuarios (condicin suficiente). La primera condicin, en el marco lgico,
aparecer en la columna de objetivos; en tanto que la segunda ser parte de la columna de supuestos. Lo
esencial del enfoque creado por Practical Concepts es el nfasis en la consistencia entre los distintos
elementos de un proyecto. El marco lgico permite una visin rpida de las principales hiptesis de cambio
que sustentan un proyecto expresadas en las relaciones de causalidad que existen entre los distintos casilleros
de la matriz.
Los supuestos de ms alto nivel correspondientes al Fin, establecen o plantean hiptesis acerca de las
condiciones externas requeridas para la sostenibilidad de los impactos del proyecto, esto es, la posibilidad de
que los beneficios generados por el proyecto permanezcan en el tiempo, incluso despus de que el proyecto
haya concluido.

Vase al respecto, el documento de PCI, Sistema de Manejo de Proyectos. Reproducido por el


Ministerio de Agricultura, Lima, 1986.
6

1.3

Lgica vertical

El marco lgico permite examinar los vnculos causales entre los distintos niveles de la cadena de
resultados del proyecto. Esta es su lgica vertical. Si el proyecto est bien diseado, debe obtenerse como
vlido que:

Las Actividades especificadas para cada Componente son las necesarias para producir el
Componente;
Todos y cada uno de los Componentes son necesarios para lograr el Propsito del proyecto;
Se cuenta con todos los Componentes necesarios para lograr el Propsito del proyecto;
Si se logra el Propsito, el proyecto contribuir al logro del Fin;
El Fin es una respuesta a un problema importante en el mbito del proyecto.

Un buen proyecto exige que la lgica vertical sea perfecta. Se llega a la perfeccin cuando las condiciones
establecidas en cada nivel son aquellas estrictamente necesarias para alcanzar el nivel siguiente. As, las
actividades deben ser aquellas que son necesarias para alcanzar los Productos; los Productos deben ser los
necesarios para alcanzar el Propsito del proyecto; el Propsito se encuadra dentro del Fin.
La lgica vertical, sin embargo, no implica necesariamente que un slo proyecto contenga todos los
componentes necesarios para generar determinados propsitos. Eventualmente la obtencin de un objetivo
requiere de muchos componentes, los cuales no pueden ser incluidos totalmente en un solo proyecto, debido a
que rebasaran el mandato legal de la institucin ejecutora. En tal caso, los componentes no incluidos en el
proyecto, se asumiran como supuestos, en el entendido de que fueran incorporados en los proyectos de otras
entidades.
As por ejemplo, en un proyecto destinado al incremento de la produccin agrcola (Propsito), una entidad
podra considerar como componentes los de capacitacin, asistencia tcnica y micro crdito. Sin embargo, tal
vez, no pueda incluir el componente relacionado al mejoramiento de las vas de comunicacin. ste, por lo
tanto, sera incorporado en la columna de supuestos, asumiendo que sern considerados en un proyecto del
Sector Transportes.
Grfico 2.2 Lgica vertical

Fin

Propsito

1.4

Componente 1

Componente 2

Componente 3

Actividad 1.1
Actividad 1.2
Actividad 1.3

Actividad 2.1
Actividad 2.2
Actividad 2.3

Actividad 3.1
Actividad 3.2
Actividad 3.3

Actividad 1.N

Actividad 2.N

Actividad 3.N

Lgica horizontal

El marco lgico, por otra parte, permite establecer las relaciones causales entre los objetivos del
proyecto y los factores del entorno siendo stos, por definicin, de carcter no controlable, de modo que se
garantice una adecuada evaluacin de la viabilidad del proyecto. sta es su lgica horizontal. Mientras la
lgica vertical garantiza la coherencia interna del proyecto, la lgica horizontal asegura su viabilidad en el
contexto global del mbito pertinente del proyecto. La conjuncin de la lgica vertical y horizontal configura,
si nos atenemos a su carcter lgico-formal, un silogismo tpicamente aristotlico:

Proposicin p: condicin necesaria (objetivo).


Proposicin q: condicin suficiente (supuesto).
Proposicin r: conclusin (objetivo del siguiente nivel jerrquico).

Los supuestos son proposiciones en las que se establecen los factores externos que deben existir para lograr el
prximo nivel de la jerarqua de objetivos. Cuanto menor sea la incertidumbre de que ciertos supuestos sean
vlidos, mayor ser la probabilidad de xito. Sin embargo, dado que slo despus de ejecutado el proyecto
quedarn despejadas todas las dudas respecto a la validez del mecanismo de solucin al problema social
implcito en el proyecto, a dicho silogismo se le llama con propiedad argumento o hiptesis de desarrollo.
Adicionalmente, por debajo de las actividades, suelen considerarse a las condiciones previas (previas al
desembolso de fondos por parte de la entidad financiadora del proyecto), que junto con los insumos deben
permitir la realizacin de las actividades del proyecto.
Grfico 2.3 Lgica horizontal

Fin

Supuestos

Propsito

Supuestos

Resultados

Supuestos

Actividades

Supuestos

La lgica es, como se sabe, la disciplina que ensea a evaluar argumentos. En lgica un argumento es un
conjunto de proposiciones, una de las cuales (la conclusin) se deriva de otra u otras (las premisas). Las
premisas proporcionan evidencias, en tanto que la conclusin es la proposicin que surge de estas evidencias.

Argumento vlido: ejemplo. En el campo de los proyectos productivos, particularmente


en el sector agrcola, se sabe que el incremento de los ingresos depende en gran medida
del incremento de la productividad: a mayor productividad, mayores ingresos, siempre y
cuando los precios se mantengan estables.

1.5

Sistema de gestin por resultados

El marco lgico es la base conceptual del sistema de gestin por resultados. Este es un conjunto de
procedimientos para la gestin en tiempo real de los resultados de una intervencin pblica o de una
intervencin en el desarrollo en general. La gestin por resultados es un enfoque de gerencia basado en la
nocin de que el empeo en alcanzar los resultados debe guiar la asignacin de recursos, la realizacin de las
actividades y la gestin en su conjunto de una organizacin. El sistema de gestin por resultados es un
conjunto de procedimientos relativos a la administracin de una entidad pblica durante todas las fases del
ciclo de gestin: planificacin, organizacin, direccin y evaluacin. El sistema permite configurar la gestin
de modo que ella se oriente al logro de tres niveles de resultados8:
Primero: Procesos o resultados de primer nivel.
8

El sistema de gestin por resultados es el enfoque principal de gestin de las intervenciones para el
desarrollo promovida por el Comit de Asistencia al Desarrollo de la Organizacin de Cooperacin y
Desarrollo Econmico (OCDE).
9

Segundo: Productos o resultados de segundo nivel.


Tercero: Efectos e impactos, o resultados de tercer nivel.
La gestin por resultados es un sistema en el que los procesos por definicin, de carcter internogeneran determinados productos. Estos, a su vez, contribuyen al logro de determinados cambios en el
bienestar de la poblacin o resultados propiamente dichos. Mientras que los procesos caen dentro del
mbito interno de una entidad ejecutora, los efectos e impactos se ubican claramente en su mbito
externo. Por su parte, los productos constituyen el punto de encuentro entre las acciones del mbito
interno y el medio externo. Desde esta perspectiva, el desempeo de una institucin puede ser evaluado,
en principio, por la cantidad y calidad de los productos entregados a la sociedad, especficamente a la
correspondiente poblacin objetivo. Puede ocurrir, sin embargo, que los productos no generen los
resultados esperados en las condiciones de vida de la poblacin objetivo. Esta posibilidad es,
precisamente, lo que hace indispensable incluir en el anlisis no solo a los procesos y productos, sino
sobre todo a los resultados.
Qu se entiende por resultados?
Los resultados son los cambios, previstos o imprevistos, positivos o negativos, deseados o
indeseados, de una intervencin pblica. Pueden referirse a los productos o resultados
inmediatos o finales. Los resultados deben ser mensurables, a travs de indicadores
cuantitativos o cualitativos, obtenidos mediante el uso de fuentes primarias o secundarias.

10

Grfico 2.4 Cadena de resultados y gestin basada en resultados

Procesos

Productos

Resultados

Actividades

Inmediatos o
Especficos

Recursos

Final

Primer nivel: procesos


La conduccin de una intervencin pblica implica, ante todo, la administracin de los procesos de
produccin; es decir, la realizacin de las actividades que permiten transformar los insumos en productos.
En el contexto del enfoque del marco lgico, un proceso se refleja en la L conformada por los casilleros
de costos (insumos) actividades - productos (componentes). Los procesos se encuentran grficamente
ubicados en la esquina inferior izquierda del marco lgico, la cual en virtud de este hecho refleja en forma
concentrada la funcin gerencial del proyecto.

Un proceso implica el uso de los recursos de una organizacin para obtener un determinado valor 9 .
Ningn producto puede fabricarse y ningn servicio puede suministrarse sin un proceso, y ningn proceso
debe existir si no aporta a la generacin de un producto o servicio. En general, los principios de la gestin
de procesos son bsicamente los siguientes:

1. Los procesos sostienen todas las actividades de trabajo y se presentan en todas las organizaciones
y en todas las funciones de una organizacin.
2. Los procesos se encuentran anidados dentro de otros procesos a lo largo de la cadena de valor de
una organizacin. La cadena de valor, conocida tambin como cadena de suministro, es un
9

Al respecto, vase: Richard Chang, Mejora Continua de Procesos. Ediciones Granica, Buenos Aires, 2011.

11

conjunto de eslabones, conectados unos con otros, que se establecen entre proveedores de
materiales y servicios, y abarca los procesos de transformacin mediante los cuales las ideas y las
materias primas se convierten en bienes y servicios entregables a los beneficiarios de un proyecto
o de una entidad.

Una tarea esencial consiste en coordinar los enlaces entre los procesos. Ya sea que los procesos sean
internos o externos, la gerencia debe prestar especial atencin a las interfaces entre ellos. La necesidad de
lidiar con esas interfaces pone de manifiesto la necesidad de contar con una coordinacin interfuncional.
La administracin de procesos es la seleccin de los insumos, los flujos de trabajo y los mtodos que
transforman los insumos en productos. Por lo general, la seleccin de insumos empieza con la decisin de
qu procesos se habrn de realizar internamente y cules sern contratados a proveedores externos.

Segundo nivel: productos


El segundo nivel del sistema est constituido por los productos de un proyecto. En el contexto del
enfoque de gestin por resultados, los productos son los bienes y servicios que un proyecto u otro tipo de
intervencin pblica prev producir a fin de lograr un determinado resultado en el seno de la poblacin
beneficiaria. Los productos son las entregas de un proyecto, respecto de los cuales se debe observar las
siguientes consideraciones:

Usualmente, el nmero de productos es de 3 a 5 por proyecto. Un nmero mayor hace que el


proyecto se vuelva muy complejo, en cuyo caso sera mejor desagregar la intervencin en varios
proyectos que conformen un slo programa.
Los bienes y servicios que sean indispensables, pero que por alguna razn justificada no puedan
ser incluidos como productos o componentes de un proyecto, debern ser incorporados en la
columna de supuestos.
Los productos comprenden las acciones o procesos que estn bajo control del equipo ejecutor del
proyecto. Son los factores estrictamente controlables del proyecto.
Los productos comprenden la estrategia bsica de un proyecto: constituyen el paquete mnimo
necesario que, al ocurrir conjuntamente con determinados factores externos, expresados estos en
los supuestos del proyecto, ser suficiente para lograr el resultado deseado.

En virtud de una costumbre bastante arraigada entre planificadores y gestores pblicos, en la gestin de
los productos, ms que en cualquier otro nivel del marco lgico, deben utilizarse frases que expresen las
acciones como si ya hubieran sido realizadas o como productos terminados.
Ejemplos de productos
Resultado

Productos

Mejoramiento de la produccin y productividad agrcola


1.
2.
3.
4.
5.

Las tcnicas de cultivo han mejorado.


Existe disponibilidad de crdito agrcola.
La infraestructura de riego ha sido rehabilitada.
Los agricultores han sido capacitados.
Existe una mayor disponibilidad de insumos agrcolas.

12

Tercer nivel: resultados


Los resultados propiamente dichos corresponden al impacto esperado de un proyecto10. Los proyectos
deben garantizar la entrega de los bienes y servicios que conducirn a la mejora de las condiciones de
vida y al cambio del propio comportamiento de la poblacin beneficiaria. Por lo general, es ms difcil
evaluar estos resultados que evaluar los procesos o los productos, ya que requieren un sistema de
medicin e informacin ms complejo. Con frecuencia, este nivel de resultados precisa que la
informacin cuantitativa se complemente con evaluaciones cualitativas, lo cual muchas veces es difcil de
lograr. Por otro lado, los resultados suelen ser menos numerosos, pero son decisivos para evaluar y
controlar la calidad de los servicios, elemento clave del sistema de gestin por resultados.

Los resultados pueden ser de dos tipos bsicos: resultados inmediatos y finales. Los resultados inmediatos
se refieren a los efectos directos de un proyecto. Corresponden a qu pasa despus a las familias,
personas, grupos, comunidades o instituciones, luego de la ejecucin de las actividades del proyecto y la
entrega de los productos. Medir los efectos significa analizar los cambios en el comportamiento de las
familias y las personas, as como los cambios en el desempeo de grupos e instituciones. Estos cambios
son muy especficos de cada contexto y dependen de las caractersticas y los objetivos del proyecto. Se
puede recurrir a diversos mtodos para medir estos cambios: estudios, encuestas basadas en cuestionarios,
debates temticos en grupo, etc.

Por su parte, el resultado final corresponde al nivel superior de una intervencin, guarda estrecha relacin
con los objetivos de mayor jerarqua de un proyecto y se refieren a los impactos esperados en el mediano
y largo plazo. Por ejemplo, segn el FIDA11, en los proyectos de mejoramiento de la productividad de los
cultivos, el resultado final podra relacionarse al aumento de los activos disponibles y una mejor nutricin
de las familias campesinas.

Cadena de resultados
En el contexto de la gestin de proyectos de desarrollo, el concepto de cadena de resultados es un
elemento fundamental de la gestin basada en resultados. La cadena de resultados muestra la relacin
causal entre insumos, procesos, productos y resultados a lo largo del tiempo. La razn en que se sustenta
la gestin basada en resultados es que la estrategia de gestin se centra en primera instancia en los
resultados, tanto mediatos como inmediatos; en segunda instancia en los productos previstos; y,
finalmente, se determinan los recursos o insumos y los procesos o actividades necesarios para generar los
productos y alcanzar los resultados previstos2. Se debe utilizar la informacin sobre la ejecucin del
proyecto en relacin a los productos, los efectos e impactos previstos, a fin de proponer ajustes y mejoras
de los insumos y las actividades.

10

En determinados organismos, como el FIDA, los resultados son conocidos como resultados de tercer
nivel.
11
FIDA, Fondo Internacional de Desarrollo Agrcola, organismo multilateral de financiacin de proyectos
agropecuarios en los pases en desarrollo.
13

Grfico 2.5 Cadena de resultados

Visin convergente implcita en el sistema de gestin por resultados.


Actividades
Productos
Resultados
inmediatos
Resultados
intermedios
Resultado
final

Recursos

Como se muestra en el grfico 2.2, la jerarqua de los resultados est alineada con la cadena de resultados
del proyecto, lo cual facilita el trabajo ulterior de diseo del sistema de monitoreo y evaluacin de un
proyecto y su contribucin a la gestin por resultados de la organizacin correspondiente.

Terminologa de la cadena de resultados

Insumos. Recursos financieros, humanos y materiales necesarios para realizar las


actividades y conseguir los productos previstos de un proyecto. Puede ser expresado
nicamente como metas financieras o costos.
Procesos (actividades). Medidas adoptadas o tareas realizadas respecto de un
proyecto para conseguir un producto especfico empleando los recursos asignados.
Productos. Bienes pblicos tangibles o intangibles que se producen gracias a la
14

ejecucin de las actividades.


Resultados inmediatos o especficos. Efectos directos o cambios generados por los
productos entregados por el proyecto a la poblacin beneficiaria.
Resultados intermedios. Efectos de mayor nivel generados por los productos, por lo
general vinculados a las prioridades sectoriales correspondientes.
Resultados finales. Impactos, en trminos de efectos positivos y negativos a largo
plazo, producidos por un proyecto en el bienestar de la poblacin.

15

Grfico 3.9. Marco lgico, visin global


A. Sntesis de factores internos.
Principios: coherencia, convergencia y
atribuibilidad.

A1. Objetivo estratgico


institucional al que contribuye el
proyecto. Principio: pertinencia.

B. Nmeros absolutos o relativos,


sobre variables cuantitativas o
cualitativas. Principio: evaluabilidad.

Cadena de
resultados

Indicadores de
desempeo

C. Fuentes de informacin primarias o


secundarias para verificar el logro de
las metas. Principio: evaluabilidad.

Medios de
verificacin

Factores
externos

D1. Agenda de reformas


estructurales del pas.
C1. Fuentes estadsticas
secundarias nacionales e
internacionales.

B1. Indicadores para medir la


contribucin a los objetivos
estratgicos

Resultado final

Indicadores
de Impacto

Fuentes
secundarias

Supuestos para
la sostenibilidad

A2. Representa la solucin del


problema social. Principio:
pertinencia.

Resultado
especifico

Indicadores
de efecto

Fuentes
secundarias

Supuestos para
logro del fin

Productos

Indicadores
de producto

Fuentes
secundarias y
primarias

Supuestos para
logro del
propsito

Fuentes
primarias

Supuestos para
logro de
componentes

B2. Incluye nmero de beneficiarios


y otros indicadores relacionados a
la solucin del problema social
A3. Bienes pblicos entregados a la
poblacin beneficiaria.

Actividades

Indicadores
de proceso

B3. Indicadores generalmente


expresados en cifras absolutas.
Costos

Condiciones
previas

A4. Uso de bienes privados para la


generacin de bienes pblicos.

B4. Metas fsicas del proyecto. Son


indicadores de proceso.

Costos necesarios para la


ejecucin de actividades. Principio:
presupuesto por resultados.

D. Supuestos sobre la evolucin de los


factores externos relevantes.
Principios: viabilidad y atribuibilidad

Condiciones de efectividad.
Principios: viabilidad y
sostenibilidad.

D2. Factores relacionados al


anlisis PESTE

C2. Fuentes estadsticas nacionales,


generalmente externas.

D3.. Factores relacionados a otras


intervenciones del Estado.
C3. Fuentes de informacin que
emanan de la ejecucin del plan
operativo.
D4. Contexto de la poblacin
beneficiaria y otros actores.

C4. Fuentes primarias, bsicamente


internas.

16

Captulo 2. Sistema de Monitoreo y Evaluacin

2.1

Concepto general de evaluacin

Evaluar es comparar los resultados planeados con los resultados efectivamente


logrados. La evaluacin de procesos se centra en el seguimiento de las actividades y
de la ejecucin presupuestal, a travs de los indicadores y metas correspondientes a
las actividades. La evaluacin de resultados se interesa, principalmente, por el
control de avance en el logro de los productos y el propsito, y tiene por objeto evaluar
la estrategia del proyecto. Finalmente, la evaluacin de impacto est destinada a
revelar la magnitud de los efectos del proyecto sobre el desarrollo, haciendo uso de
mtodos cuantitativos y cualitativos, asumiendo el reto de clarificar la atribuibilidad de
los cambios en el bienestar de la poblacin.
En general, la evaluacin es la disciplina que se ocupa de la comparacin de los resultados de un
proyecto con las metas que se propuso alcanzar y que, por ende, mide hasta que punto un proyecto
alcanza ciertos objetivos. En esta definicin hay dos tipos de riesgos:
En primer lugar, podra existir una sobreestimacin de las metas, en cuyo caso,
independientemente de la calidad del diseo y de la implementacin, se consideraran como
deficientes aquellos proyectos que no alcancen dichas metas, an cuando desde una
perspectiva realista, pudieran haber sido considerados exitosos.
Tambin existe el riesgo contrario: la subestimacin de las metas. En este caso, proyectos mal
concebidos y ejecutados, podran tener una evaluacin aparentemente positiva, debido a que
sus formuladores, cautos en el momento de plantearse las metas, situaron stas en un nivel
ostensiblemente bajo.
Cabe destacar el hecho que las evaluaciones son tiles siempre que los resultados que generen
aporten valor agregado para las entidades ejecutoras, en trminos de lecciones aprendidas que
puedan ser incorporadas en el diseo de futuras intervenciones.

2.2

Marco lgico y evaluacin

Tomando como punto de partida el marco lgico de un proyecto, el propsito y dems elementos de
un proyecto pueden ser visualizados y conceptualizados en forma interrelacionada. As tenemos
que:
Los resultados se encuentran localizados en las filas del propsito y fin del marco lgico;
Los resultados tambin se encuentran, en parte, localizados en la fila correspondiente a
los componentes del marco lgico. Se refieren a los productos entregados por el proyecto
a la poblacin beneficiaria.
Finalmente, los procesos estn localizados en las actividades del marco lgico, pues, se
refieren al uso de insumos para la realizacin de actividades generadoras de los
productos.

17

Grfico 4.1 Marco lgico y evaluacin


Objetivos

Indicadores

Fin

Indicadores
de impacto

Propsito

Indicadores
de efecto

Productos

Indicadores
de producto

Actividades

Costos
(Insumos)

Resultados

Procesos

Medios de
Verificacin

Supuestos

Las actividades, sin embargo, estn asociadas a los componentes y pueden conformar el referente
para la evaluacin en la etapa de ejecucin de un proyecto.

2.3

Evaluacin ex -post

Despus de culminada la ejecucin del proyecto, debe realizarse el anlisis de los resultados del
proyecto. En esta etapa se puede determinar la coherencia, pertinencia, eficacia, eficiencia, impacto
y sostenibilidad del proyecto. En todos los casos, se espera que la evaluacin proporcione a la
institucin ejecutora y al conjunto de involucrados del proyecto informacin confiable que permita
extraer lecciones sobre determinados aspectos clave de la promocin del desarrollo y que, por lo
tanto, permitan elevar la calidad de las intervenciones en el futuro.
En el contexto del enfoque del marco lgico y como ya ha sido sealado se pueden establecer hasta
tres tipos de evaluacin: evaluacin de procesos (monitoreo), evaluacin de resultados (o
simplemente evaluacin) y evaluacin de impacto. Cabe destacar que estos tres tipos de evaluacin
tienen su razn de ser en el hecho que, por lo general, cuando se evala un proyecto se busca
responder a tres preguntas fundamentales:

1. Cmo est funcionando el proyecto?


2. Se logr o no el cambio deseado?
3. Si se logr el cambio, en qu medida este se puede atribuir al proyecto?
Evaluacin de procesos. La evaluacin de procesos o monitoreo nos permite conocer a fondo la
dinmica de implementacin del proyecto, incluyendo:

La cantidad de actividades realizadas;


La calidad realizada de las actividades;
El costo de las actividades realizadas.

Este tipo de evaluacin est destinada a responder preguntas como las siguientes:
18

Cunto hemos hecho?


Qu tan bien lo hemos hecho?
Cmo podramos mejorar?

La evaluacin de procesos se enfoca ntegramente en la implementacin de las actividades del


proyecto. Este tipo de evaluacin no investiga cun eficaces fueron estas actividades en producir
resultados. Por lo tanto la gran utilidad de este tipo de evaluacin es identificar mientras el
proyecto est es plena marcha - los aspectos exitosos para replicarlos y los aspectos deficientes
para mejorarlos. Efectuado oportunamente, la evaluacin de procesos, permite realizar
modificaciones en la ejecucin de actividades con base en los hallazgos, incrementando as la
probabilidad de que el proyecto logre sus objetivos.
Evaluacin de resultados. La evaluacin de resultados busca determinar el grado de logro del
resultado deseado en la poblacin objetivo. Al evaluar los resultados de un proyecto, a fin de
determinar si el diseo y la gerencia del mismo fueron adecuados, se pone nfasis en cinco aspectos
importantes:

Pertinencia. Grado en el cual el objetivo del proyecto es consistente con las prioridades de
desarrollo de la poblacin objetivo y las polticas de la entidad ejecutora y el organismo
donante o financiador.
Eficacia. Grado en el cual se logran los objetivos especficos y el propsito del proyecto.
Eficiencia. Anlisis de los resultados con relacin al costo; es decir un anlisis de la
transformacin de los insumos en producto mediante la realizacin de determinadas
actividades.
Impacto. Valoracin socioeconmica global, incluyendo los efectos positivos y negativos,
tanto aquellos que son deseados y estaban previstos, como los no previstos y no deseados.
Sostenibilidad. Apreciacin de la capacidad para mantener los impactos positivos del
proyecto por un largo periodo de tiempo. Anlisis sobre si el efecto global en trminos, por
ejemplo, de empleo e ingresos es positivo tambin en el largo plazo.

Estos aspectos estn estrechamente relacionados al enfoque del marco lgico. As, la pertinencia
alude a la relacin del propsito con las prioridades de desarrollo; la eficacia a la relacin entre los
productos y el propsito; la eficiencia es una comparacin de los insumos con los productos; el
impacto establece relaciones entre las variables controlables por el proyecto y el fin; y, por ltimo,
la sostenibilidad analiza la interaccin entre el fin y los supuestos al mismo nivel.
Evaluacin de impacto. Las evaluaciones de impacto permiten determinar con mayor certeza la
relacin causa-efecto de un proyecto dado y sus resultados en la poblacin beneficiaria. Por lo
general, la metodologa de evaluacin consiste en la construccin de un escenario contrafactual, a
travs del cual se compara la situacin con proyecto versus la situacin sin proyecto y, de este
modo, se estima tanto la magnitud de los cambios como la proporcin de dichos cambios atribuible
al proyecto. El escenario contrafactual se puede construir usando diversas metodologas que se
clasifican en dos categoras generales: diseos experimentales y no experimentales. Tambin se
pueden usar mtodos cualitativos y participativos para evaluar el impacto. Estas tcnicas con
frecuencia proporcionan informacin decisiva sobre las perspectivas de los beneficiarios, el valor
que los proyectos tienen para ellos, los procesos que pueden haber afectado los resultados y una
interpretacin ms profunda de los resultados observados en el anlisis cuantitativo.

2.4

Evaluacin de resultados

En un sistema integral de gestin, las acciones de evaluacin deben permitir como ya se ha


sealado- realizar un anlisis de, por lo menos, tres aspectos fundamentales: eficacia, eficiencia y
sostenibilidad. Asimismo, debieran ser evaluados los aspectos relacionados a la pertinencia e
impacto, aunque esto ltimo requiere un tratamiento metodolgico ms complejo.
19

Anlisis de coherencia
El anlisis de coherencia consiste en determinar en qu grado el proyecto no contradice a otras
intervenciones de desarrollo con objetivos similares. En este aspecto se distinguen tres niveles:

Intervenciones ejecutadas por la institucin ejecutora.


Intervenciones financiadas por la entidad financiadora.
Intervenciones de los programas de otras instituciones ejecutoras.

Asimismo, el anlisis de coherencia comprender el establecimiento de un matching entre la


estructura del proyecto y el plan estratgico institucional.

Anlisis de coherencia

Comparacin entre el proyecto y PEI de la institucin.


Comparacin entre el proyecto y las prioridades de apoyo de la cooperacin.
Comparacin entre el proyecto y otras intervenciones de la entidad ejecutora.

Anlisis de eficiencia
Por eficiencia se entiende el grado en el que las actividades y resultados del proyecto se han
logrado en relacin a las metas programadas. Asimismo, el anlisis de eficiencia comprende la
evaluacin del grado de ejecucin del presupuesto asignado al proyecto. En otras palabras, el
anlisis de eficiencia consiste en determinar el grado en el que los diversos insumos se convierten
en productos de manera econmica. De all que una forma universal de operativizar el anlisis de
eficiencia sea a travs del clculo de la ratio costo-efectividad.
La eficiencia es la medida de la productividad del proceso de implementacin, esto es, en qu
grado los productos logrados derivan de un uso eficiente de los recursos financieros, humanos y
materiales. En principio, implica comparar insumos contra productos. La mayor dificultad para
medir la eficiencia radica en determinar el estndar de comparacin o lnea de corte. Esto
depender del tipo de proyecto, de las circunstancias locales y de otros factores. El estndar
difcilmente est predeterminado, por lo tanto en la prctica depende del equipo de evaluacin
especificar contra qu estndar se va a medir. Por ejemplo: contra proyectos comparables, sobre la
base de la experiencia con otros proyectos y sobre la base de criterios especficos de razonabilidad.
La evaluacin de la eficiencia queda implcita durante la planificacin del proyecto, cuando se
decide sobre los presupuestos e insumos. Asimismo representa una parte considerable de las
posteriores actividades de monitoreo y evaluacin. A lo largo de un proyecto slo se puede hacer
evaluaciones parciales de la eficiencia. Una valoracin completa y global solamente es posible
cuando el proyecto ha sido concluido. Para ello, se recopila informacin necesaria para medir la
eficiencia durante la preparacin de la evaluacin. El anlisis de eficiencia implicar realizar las
acciones siguientes:

20

Anlisis de eficiencia

Verificacin del cumplimiento de las metas fsicas programadas.


Verificacin del cumplimiento de las metas financieras programadas.
Verificacin del anlisis costo efectividad a nivel parcial, especficamente, en cada
una de las principales actividades comprendidas en los resultados del proyecto.

Anlisis de eficacia
La eficacia de un proyecto es una medicin del grado de avance sobre el logro del propsito del
proyecto, o bien de la probabilidad de que se logre al trmino del periodo previsto de ejecucin. La
eficacia implica el grado en que se logra el propsito o se espera alcanzarlo. Establecer la eficacia es
parte del monitoreo, de manera que podemos suponer que la informacin necesaria ser provista
por la gerencia del proyecto en el momento en que se realiza la evaluacin.
La determinacin de la eficacia presupone que el propsito del proyecto ha sido definido
operacionalmente y de manera no ambigua, de forma tal que sea posible una verificacin
razonablemente valida. Sin embargo, con frecuencia no se da esto: los objetivos pueden estar
formulados de manera poco clara y ser demasiado generales. En tales casos se debe resaltar esa
debilidad y el equipo de evaluacin tiene que operacionalizar los objetivos sobre la base de la
documentacin existente del proyecto, de manera de determinar qu se ha logrado realmente.
Usualmente, un proyecto de desarrollo es slo uno de los muchos factores que pueden contribuir al
logro de los objetivos de desarrollo de un pas. Por lo tanto, el equipo de evaluacin fijar su
atencin sobre las causas de la eficacia (o de la falta de sta), especialmente en qu grado se han
alcanzado los productos esperados, y si estos son suficientes o si se deben hacer cambios en el
diseo del proyecto para asegurar la eficacia en un tiempo determinado. Sin embargo, es
igualmente importante determinar minuciosamente los factores externos (supuestos) que tambin
influyen sobre las probabilidades de xito del proyecto. El anlisis de eficacia implicar realizar las
acciones siguientes:

Anlisis de eficacia

Comparacin de las metas programadas a nivel de propsito y fin.


Comparacin de las metas a nivel de cada uno de los resultados con las metas
realmente obtenidas.
Verificacin de la calidad de los procesos culminados.

Anlisis de impacto
El impacto del proyecto son las consecuencias para la sociedad, tanto las previstas como las no
esperadas, sean stas positivas y negativas. Aqu se debe tomar como punto de partida el fin y el
propsito del proyecto, pero va mucho ms all de simplemente establecer si se han cumplido. Este
tipo de evaluacin con frecuencia requiere de investigaciones que abarcan un mayor campo de
estudio. La eficacia es un criterio de evaluacin estrecho, ya que el propsito del proyecto indica
21

solamente los efectos positivos esperados por las partes involucradas. A diferencia de esto, el
concepto de impacto es mucho ms amplio porque incluye las consecuencias positivas y negativas,
tanto las previstas como las no esperadas. Una determinacin amplia de los impactos de un
proyecto es central en la evaluacin. Con frecuencia se trata de la parte ms difcil y exigente del
trabajo de evaluacin. En la determinacin de impactos el punto de partida debe ser el propsito
del proyecto en la forma en que ha sido definido, as como el grado de eficacia alcanzado, y luego se
debe analizar que otros efectos (positivos o negativos, previstos o no esperados) se han producido
como resultado de la ejecucin del proyecto.
El impacto total es el resultado de condiciones causales complejas que pueden ser difciles de
analizar. Puede ser especialmente problemtico probar que los cambios observables son
producidos por un determinado proyecto o accin de desarrollo. A fin de comprender las
conexiones causales, el evaluador puede necesitar emplear mtodos orientados al proceso, como la
observacin de los participantes. En distintos momentos pueden aparecer diferentes impactos. En
el trabajo de evaluacin se debe poner atencin tanto a los impactos de corto plazo como a los de
largo plazo. Las evaluaciones de proyectos en implementacin igual pueden producir conclusiones
valiosas aplicables en el futuro a proyectos de desarrollo similares. El anlisis de impacto implicar
realizar las acciones siguientes:

Anlisis de impacto

Determinacin de los efectos del proyecto sobre las poblaciones ms pobres del
pas.
Determinacin de los efectos del proyecto sobre las poblaciones de mayor
vulnerabilidad actual.

Anlisis de sostenibilidad
La sostenibilidad es una estimacin global sobre el grado en que los cambios positivos producidos
por el proyecto continuarn an despus que ste haya concluido y que en particular el apoyo de la
cooperacin haya concluido. Segn la OCDE12, la sostenibilidad es la prueba final del xito de un
proyecto de desarrollo. As, la determinacin de la sostenibilidad de un proyecto de desarrollo
implica mucho ms que la respuesta a la pregunta sobre el logro de los objetivos fijados: indica la
probabilidad que los impactos positivos continen una vez que hayan concluido las actividades del
proyecto. En el contexto de los proyectos de desarrollo, la sostenibilidad se define como la
capacidad para generar beneficios duraderos, que permanezcan vigentes incluso despus de que el
proyecto haya concluido13. Los puntos clave a destacar en la definicin de sostenibilidad son los
siguientes:
La atencin se centra en mantener el flujo de beneficios en lugar del mantenimiento del
proyecto mismo. Los proyectos, por definicin, no son sostenibles, ya que son acciones de
carcter temporal, con fechas de inicio y trmino predeterminadas en los correspondientes
estudios de pre inversin y convenio de donacin.
El concepto de beneficios sostenibles, por lo tanto, no necesariamente significa la continuidad de
las actividades del proyecto, ms all de un periodo razonable de tiempo.

12

Organizacin para la Cooperacin y Desarrollo Econmico.


Vese, Quality Assurance Group PIA/OPRE, Promoting Practical Sustainability. Australian Agency for International
Development (AusAID), Canberra, September 2000.
13

22

El anlisis de sostenibilidad es, pues, un proceso encaminado a maximizar y dar continuidad al flujo
de beneficios para la poblacin. Debe ser un proceso permanente y debe ser actualizado segn las
cambiantes circunstancias del entorno. Cabe destacar, sin embargo, que no existe una nica manera
de lograr la sostenibilidad, sino que cada proyecto debe definir su propia estrategia de
sostenibilidad, segn las circunstancias especficas internas y externas. El anlisis de sostenibilidad
de un proyecto consiste, pues, en determinar si ms all del logro de sus objetivos, es posible que
los impactos positivos continen despus que el proyecto haya concluido. El anlisis de
sostenibilidad implicar realizar las acciones siguientes:
Anlisis de sostenibilidad

Verificacin de la capacidad sostenible del proyecto para dar continuidad a la


atencin a los usuarios.
Verificacin de las capacidades sociales e institucionales para la realizacin de los
derechos ciudadanos.
Verificacin de capacidades nacionales, especialmente fiscales, para cubrir los
costos operativos del proyecto.

En general, se debe recopilar informacin cualitativa y cuantitativa sobre la ejecucin del proyecto.
A partir de esto se realizan diversos anlisis, con la finalidad de transformar la masa de datos
obtenida en informacin real para la toma de decisiones.

Anlisis de pertinencia
Por pertinencia se entiende la apreciacin global sobre si el proyecto se condice con los objetivos
de desarrollo del pas, as como las necesidades y prioridades locales. En otras palabras, se refiere a
clarificar si el proyecto debe ser continuado, reformulado o finalizado. As, la pertinencia es un
tema relevante dentro de la evaluacin y debe estar presente desde las etapas inciales de
planificacin y a lo largo de todo el ciclo del proyecto.
El anlisis de pertinencia es una cuestin de direccin del proyecto en relacin con su propsito.
Por otro lado, implica observar los cambios sociales e institucionales que puedan haber ocurrido
durante la ejecucin del proyecto y evaluar hasta qu punto esto puede alterar la lgica del
proyecto. Cabe indicar que determinados cambios en las condiciones externas podra disminuir el
grado de prioridad del proyecto o erosionar su fundamento lgico. Por ello, el anlisis de
pertinencia implica decisiones del ms alto nivel sobre la conclusin o continuacin del proyecto y,
en este ltimo caso, sobre posibles cambios en la estrategia y metodologas de ejecucin del
proyecto. El anlisis de pertinencia implicar realizar las acciones siguientes:
Anlisis de pertinencia

2.5

Anlisis de la vigencia de la prioridad del objetivo de desarrollo del proyecto.


Anlisis de la vigencia o de la necesidad de cambio en la estrategia de intervencin del
proyecto.
Anlisis de la vigencia de la modalidad de ejecucin del proyecto.

Marco lgico y evaluacin de impacto


23

La estimacin de beneficios del proyecto, a travs de la metodologa de evaluacin de impacto


social, tiene por finalidad medir el grado del cambio econmico que se puede atribuir a una
intervencin, eliminando el sesgo de factores ajenos al proyecto que podran haber influido en los
resultados obtenidos. Los beneficios obtenidos por el proyecto son de carcter incremental y
atribuible slo a la intervencin. Los beneficios del proyecto permiten determinar con mayor
certeza la relacin causa-efecto entre un proyecto dado y sus efectos directos sobre la poblacin
beneficiaria.
En esencia, la evaluacin de impacto social es un mtodo para evaluar la contribucin de un
proyecto al bienestar de la poblacin. El objetivo de esta metodologa es, en consecuencia,
determinar cul es la mejora alcanzada por los individuos participantes o beneficiarios de un
proyecto en trminos de ciertas variables clave, tales como ingreso, empleo, equidad y acceso a
servicios bsicos, entre otros. Bsicamente, se busca responder a la pregunta: qu ganan los
participantes de un proyecto en comparacin a no haber participado en el mismo? Ntese que est
pregunta es distinta a la pregunta: cul es la situacin de un individuo despus del proyecto en
comparacin a su situacin antes del mismo? Ello es as, porque entre los beneficiarios de un
proyecto pueden existir cambios en ciertas variables relevantes, debido a factores no
necesariamente atribuibles al contenido de la intervencin.14
De manera ideal, el cambio en las variables atribuibles al proyecto se podra determinar de manera
exacta si fuera posible observar a un individuo despus de haber participado en el proyecto y al
mismo individuo en el estado contrafactual, es decir, sin haber participado en l. Conceptualmente,
estos dos estados posibles se reflejan en los denominados grupo beneficiario (o grupo de
tratamiento) y grupo de control, donde el primero est integrado por individuos que tienen una
participacin directa en el proyecto, a diferencia del segundo, que est conformado por individuos
que por alguna razn no participan del proyecto. Lo crucial es lograr que el grupo de control y el de
beneficiarios sean los ms similares posibles.
Para construir un escenario contrafactual que simule la situacin de los beneficiarios en el escenario
de no participacin en el proyecto, se pueden utilizar tres tipos de diseos de evaluacin:
experimentales, cuasi-experimentales y no experimentales. La diferencia entre los dos primeros
diseos radica en la forma como se asignan los participantes a los grupos de tratamiento y control.
As tenemos que:

En el diseo experimental los participantes son asignados aleatoriamente antes del inicio
del proyecto. Ello permite conformar grupos que son en promedio similares en todas sus
caractersticas excepto por su participacin en el proyecto.
En el diseo cuasi-experimental la asignacin es no aleatoria, de modo que el grupo de
control puede conformarse una vez que el proyecto ha empezado. En este diseo el mtodo
de asignacin dificulta la conformacin de grupos similares, lo que hace necesario el uso de
tcnicas estadsticas y economtricas para corregir el sesgo de seleccin generado.
En el mtodo no experimental, a diferencia de los diseos experimentales y cuasiexperimentales, no se construye un grupo de control o comparacin para contrastar los
cambios en el grupo de tratamiento.

En estos diseos el grupo de beneficiarios se compara con un grupo conformado por no


participantes que pueden cumplir o no los criterios de seleccin del proyecto. Es decir, no
necesariamente son beneficiarios potenciales del proyecto o parte de la poblacin objetivo de la
intervencin. As, es muy probable que este grupo de no participantes difiera del grupo de
tratamiento en aquellas caractersticas observables y no observables que determinan la variable de
14

Esta seccin est basada principalmente en los trabajos del ILPES sobre evaluacin de impacto. Sin embargo, pueden
encontrarse magnficos trabajos en el Banco Mundial, especialmente los de Judy Baker y en la OIT, sobre todo el trabajo
de Abdala. En el Per, los trabajos de GRADE, especialmente el de evaluacin de impacto del programa PROJOVEN
constituye una excelente aplicacin del mtodo.

24

impacto. Para eliminar las diferencias entre estos dos grupos se utilizan tcnicas economtricas que
usan una o ms variables pertinentes a la participacin pero no a los resultados de la participacin.

Cuantificacin del impacto


Existen tres estimadores ampliamente usados para evaluacin de impacto de un proyecto
intervencin: el estimador antes y despus, el estimador de diferencia en diferencias y el
estimador de corte transversal.
Estimador Antes y Despus. En trminos grficos, el estimador antes y despus resulta de
comparar la situacin de los beneficiarios del proyecto antes del proyecto (E) con su situacin
despus de haber pasado por el proyecto (A). En este caso se usa como grupo de control a los
mismos beneficiarios en su situacin anterior al proyecto, siendo el estimador de impacto el
equivalente a (A-E). El supuesto detrs de la utilizacin correcta de este estimador es que (E) logra
aproximar bien la situacin de los beneficiarios en caso no hubieran participado en el proyecto (B),
lo cual requerira que no hubieran habido cambios en la situacin econmica en general durante ese
lapso. El problema de este mtodo radica en que, tpicamente, la simple comparacin antes y
despus puede llevar a atribuir errneamente al proyecto cambios que se hubieran dado en ese
grupo de beneficiarios independientemente de su participacin en el proyecto.
Estimador Diferencia en Diferencias. El estimador de diferencia en diferencias resulta de
comparar las situaciones antes-despus de los beneficiarios con aquella de los controles. As, el
impacto del proyecto se estima mediante la siguiente frmula (A-E) (D-F). El supuesto detrs de
este estimador es que el cambio en la situacin de los controles (D-F) entre el momento previo al
proyecto y el momento posterior al proyecto es una buena aproximacin del cambio que hubiesen
experimentado los beneficiarios durante ese mismo perodo de no haber pasado por el proyecto (BE).
Grfico 4.2 Estados posibles para beneficiarios y controles

Antes del proyecto

Beneficiarios

E: Situacin antes
del proyecto

Despus del proyecto


A: Estado de tratamiento
B: Estado de no tratamiento

Controles

F: Situacin antes
del proyecto

C: Estado de tratamiento
D: Estado de no tratamiento

Situaciones observables

Situaciones no observables

Estimador Corte Transversal. El estimador de corte transversal slo toma en cuenta la situacin
de beneficiarios y controles despus del proyecto. Directamente el impacto se estima a travs de AD. Aqu, el supuesto es que D es una buena representacin de B. Esta metodologa se utiliza en los
casos en los que no hay informacin acerca del proyecto al inicio del mismo, (lnea de base), y slo
25

se puede recoger informacin luego del proyecto. Ntese que si las situaciones de los beneficiarios y
controles son similares en el perodo anterior al proyecto, el estimador de diferencia en diferencias
es equivalente al estimador de corte transversal.

Evaluacin ex ante y ex post


La evaluacin de impacto, al igual que cualquier otra evaluacin, puede realizarse antes (ex- ante) o
despus (ex-post) de la ejecucin del proyecto. En trminos generales, es conveniente realizar
evaluaciones de impacto ex-ante cuando se quiere escoger un proyecto o una combinacin de varios
que puedan contribuir de forma ms efectiva a la reduccin de la pobreza; y evaluaciones ex-post,
cuando la evaluacin de impacto puede retroalimentar la efectividad del proyecto en cuestin.
En la Tabla 43 se resumen las principales caractersticas de los tres tipos de diseo utilizados en el
anlisis cuantitativo del impacto generado por los proyectos. Se puede concluir que existe una
relacin inversa entre la aplicabilidad de estos diseos y la confiabilidad de los resultados que se
pueden obtener al aplicar cada uno de los diseos. El diseo experimental es el ms robusto
estadsticamente, pero su aplicacin requiere de determinadas condiciones que son difciles de
encontrar en la prctica, y en especial en la implementacin de proyectos. Por su parte, los diseos
cuasi-experimental generalmente arrojan estimaciones menos precisas del impacto. Es decir, en
estos diseos es ms probable la presencia de factores diferentes al proyecto que estn
subestimado o sobreestimando el verdadero impacto de las intervencin. Sin embargo, su
aplicabilidad es mayor debido a que los controles que utiliza para construir el escenario
contrafactual son ms flexibles y no interfieren con la implementacin de los proyectos. En el caso
de los diseos no experimentales, la construccin del grupo de beneficiarios y no beneficiario es
sencilla, pero se requiere el uso de sofisticadas tcnicas estadsticas para remover el sesgo en las
estimaciones de impacto.
Grfico 4.3 Evaluacin de impacto: ejemplo
Antes
del proyecto

Despus del
proyecto

Comparacin
antes / despus

Con proyecto

100

150

50

Sin proyecto

100

120

20

30

30

Lnea
de base

Lnea
de salida

Beneficios
incrementales

Rubro

Comparacin
con/sin proyecto

Finalmente, se debe tener en cuenta que en muchas evaluaciones estos diseos, ms que
sustitutorios, son utilizados como alternativas complementarias de evaluacin. Por ejemplo, un
proyecto puede evaluar uno de sus objetivos con un diseo experimental y los dems con diseos
no experimentales. Tambin, una evaluacin podra seleccionar aleatoriamente las reas
geogrficas en donde el proyecto se implementara (diseo experimental) y, luego, utilizar un
diseo cuasi-experimental para conformar los grupos de tratamiento y comparacin dentro de cada
rea. La evaluacin de impacto es la base para dar respuesta a la pregunta: Qu hubiera ocurrido si
no se hubiera ejecutado el proyecto?

26

Grfico 4.4 Evaluacin de impacto: ejemplo detallado


Ingresos incrementales
Antes del
proyecto

Despus del
proyecto

Mtodo Antes / Despus


S/.

Ingresos con proyecto (S/.)


(Grupo Beneficiario)

43,597,200

83,895,000

40,297,800

Total

43,597,200

83,895,000

40,297,800

Nmero de personas

141,000

Ingreso anual per cpita

309

141,000

595

141,000
286

Ingresos sin proyecto (S/.)


(Grupo de Control)

43,597,200

73,207,200

29,610,000

Total

43,597,200

73,207,200

29,610,000

141,000

141,000

141,000

309

519

210

10,687,800

10,687,800

141,000

141,000

Nmero de personas
Ingreso anual percapita
Ingresos incrementales
Mtodo con y sin proyecto

92%

68%

Total
Nmero de personas
Ingresos incrementales (S/.)
Ingresos incrementales (%)

Lnea
de base

76

76

24.5%

24.5%

Lnea
de salida

Beneficios
incrementales

En una evaluacin de impacto, los resultados de un proyecto deben ser aislados o separados de
factores o sucesos correlacionados pero cuyo origen sea distinto a las acciones o productos
considerados en la intervencin.15 Como seala Baker, para asegurar rigor metodolgico, una
evaluacin de impacto debe estimar el escenario contrafactual o simulado alternativo, que equivale
a lo que habra ocurrido si el proyecto nunca se hubiera realizado o lo que habra ocurrido
normalmente.

2.6

Diseo de sistemas de monitoreo y evaluacin

El diseo de un sistema de monitoreo y evaluacin comprende cinco pasos fundamentales, los


cuales deben ser desarrollados en forma secuencial, en el contexto de la implementacin de un plan
estratgico
Paso 1: Determinar los resultados a evaluar. La determinacin de los objetivos se realiza sobre
la base del marco lgico. En l se establecen cuatro tipos de objetivos segn el nivel de resultado
esperado: misin/visin, objetivos generales, objetivos estratgicos y actividades. Dependiendo del
tipo de evaluacin que se quiera realizar, se elegir uno u otro tipo de objetivo. As por ejemplo, si
lo que se desea es una evaluacin de procesos, el foco de atencin sern las actividades
contempladas en marco lgico y sus correspondientes indicadores. En cambio, si se trata de una
evaluacin de resultados, el nivel de anlisis debe efectuarse sobre los objetivos contemplados en
marco lgico del plan. En el caso particular de una evaluacin de impacto, en la columna de
objetivos del marco lgico se configuran las hiptesis de desarrollo: se asume que los productos,
mas ciertas condiciones de entorno, debieran generar en un tiempo dado, el propsito (impacto
inmediato) y objetivos estratgicos (impacto de mediano y largo plazo). Estas son las hiptesis que

15

La presente seccin y otras con referencias conceptuales a la evaluacin de impacto estn basadas en el trabajo de Judy Baker,
Evaluacin del Impacto de los Proyectos de Desarrollo en la Pobreza. Banco Mundial, Washington DC, 2000.

27

la evaluacin debiera conformar o recusar, segn sean los resultados reales que se hayan producido
con el logro de los objetivos determinados en el plan estratgico.
Paso 2: Determinar el tipo de evaluacin y metodologa pertinentes. Las evaluaciones pueden
ser de tres tipos: evaluacin de procesos, evaluacin de resultados y evaluacin de impacto.
Frecuentemente, la evaluacin incluye los dos primeros tipos, y solo en pocos casos en aquellas
intervenciones consideradas de carcter estratgico en la lucha contra la pobreza- se realizan
evaluaciones de impacto. Los factores que determinan la seleccin de una evaluacin de impacto
estn vinculados a las siguientes interrogantes:

Es la intervencin considerada estratgica para la reduccin de la pobreza?


Contribuir la evaluacin a cerrar la brecha de conocimiento respecto de lo que funciona y no
funciona en estrategia de lucha contra la pobreza?
Est la intervencin probando enfoques innovadores para la reduccin de la pobreza?
Se espera que la intervencin tenga impactos diferenciados en funcin del gnero o de tipo
cultural?

Paso 3: Identificar los indicadores adecuados. En esta etapa se identifican los indicadores
necesarios para evaluar el desempeo de las actividades (evaluacin de proceso) y de los
resultados obtenidos (evaluacin de resultados y de impacto), tomando en consideracin, tanto los
criterios genricos de seleccin de indicadores como la data existente que podra ser obtenida a
costo razonable.
Cabe sealar que las evaluaciones de procesos pueden tener aspectos cuantitativos y cualitativos.
Los indicadores cuantitativos miden nmero, porcentaje, promedio, ndices u otras magnitudes
estadsticas, pero no siempre logran capturar la esencia de los aspectos cualitativos que queremos
evaluar. Por ejemplo, para evaluar el grado de satisfaccin de un taller, se puede aplicar un
cuestionario estructurado para determinar el porcentaje de participantes que opinaron que las
presentaciones fueron claras, que fueron interesantes, que proporcionaron informacin suficiente,
etc. (datos cuantitativos). Alternativamente, se pueden reunir a participantes en un grupo focal
para conocer sus actitudes hacia diferentes aspectos del taller (datos cualitativos). Ambos enfoques
tienen ventajas y desventajas. Lo esencial es que los resultados de ambos procesos puedan servir
para obtener retroalimentacin sobre la dinmica de la actividad que se est evaluando.
Paso 4: Recopilar la informacin. Para cada indicador es necesario recolectar datos de alguna
fuente que permita viabilizar la evaluacin. En algunos casos, los datos ya estn disponibles, por lo
que el trabajo se reduce al anlisis de los mismos. En otros casos, no existe data disponible, por lo
que se tiene que disear y conducir un estudio para obtener esos datos. Cabe anotar que la mayora
de evaluaciones utilizan mtodos cuantitativos y cualitativos. Si la fuente de informacin utilizada
es de carcter primario, las fuentes de datos cuantitativos ms importantes son:

Entrevistas estructuradas.
Estadsticas de servicio (datos administrativos).

Sin embargo, los datos cuantitativos requieren, por lo general, ser complementados con datos
cualitativos, por su mayor contenido de informacin en cuanto a actitudes, opiniones y valores. Las
tcnicas cualitativas ms importantes son:

Entrevistas en profundidad.
Grupos focales.
Observacin directa.

Paso 5: Anlisis de informacin y elaboracin del informe. Al igual que los pasos anteriores, el
anlisis de los datos requiere un trabajo de equipo para aclarar preguntas y garantizar resultados
oportunos y de calidad. Un primer problema que debe ser abordado se refiere a la depuracin de
28

los datos proveniente de fuentes primarias y secundarias. Existen diversas tcnicas de anlisis
cuantitativo basadas en mtodos estadstico, as como tambin existen muchas tcnicas para
analizar datos cualitativos. Particularmente en las evaluaciones de impacto, dos tcnicas son de uso
frecuente: anlisis de contenido y anlisis de casos.
El anlisis de contenido se usa para analizar datos obtenidos a travs de entrevistas, observaciones
y documentos. Sobre la base de un sistema de clasificacin de datos, la informacin debe ser
organizada de acuerdo con lo siguiente:

Las preguntas de evaluacin para las cuales se recopil la informacin.


La forma como ser usada la informacin.
La necesidad de realizar referencias cruzadas con la informacin.

Una vez establecido el sistema de clasificacin, se inicia la fase de anlisis. Esta consiste en buscar
patrones en los datos e ir ms all de la descripcin hacia la comprensin de los procesos,
resultados e impactos. Adems del trabajo de equipo, el anlisis de la informacin puede ser
reforzada con el uso de programas computacionales.
De otro lado, el anlisis de casos se basa en estudios de detalle de un determinado grupo o
individuo relacionado con el contexto bajo evaluacin. El alto nivel de detalle obtenido puede
proporcionar informacin valiosa para evaluar la calidad de los procesos, resultados e impactos del
proyecto. Los procesos de recopilacin y anlisis de los datos se llevan a cabo en forma simultnea,
puesto que los evaluadores realizan observaciones mientras recopilan la informacin.
Finalmente, cabe indicar que los informes de evaluacin se deben planificar como parte de una
estrategia de difusin, que puede incluir, adems del informe tcnico propiamente dicho, la
realizacin de presentaciones ante diversos pblicos y la difusin en los medios de comunicacin
de los resmenes ejecutivos sobre los hallazgos de la evaluacin.

29

Captulo 3. Construccin de Indicadores


Los indicadores representan los instrumentos de medicin de los cambios o
tendencias que emergen como consecuencia de la ejecucin de un plan, programa
o proyecto de desarrollo. Proporcionan la evidencia necesaria para medir el avance
en el logro de objetivos de un proyecto. Los indicadores son magnitudes
estadsticas, expresadas en cifras absolutas o relativas, que sintetizan la
informacin sobre las variables cuantitativas o cualitativas, obtenida de fuentes
primarias o secundarias.

3.1

Indicadores: definicin e importancia

Para evaluar es necesario medir y, de conformidad con su definicin clsica y ampliamente


aceptada, la medicin consiste en asignar nmeros a los objetos y eventos, de modo que las proposiciones
cualitativas puedan ser transformadas en expresiones cuantitativas. Bajo esta consideracin, en el contexto del
enfoque del marco lgico, es necesario seleccionar indicadores que permitan evaluar el grado de cumplimiento
de los resultados de un proyecto. En este contexto, los nmeros asignados a cada uno de los resultados u
objetivos constituyen los indicadores de desempeo. Desde luego, no existe medicin perfecta, toda vez que
resulta imposible representar fielmente en forma numrica conceptos (resultados, objetivos o variables en
general) tales como desarrollo econmico, credibilidad poltica, desarrollo integral infantil, etc. Pese a ello, las
instituciones ejecutoras deben realizar el esfuerzo necesario para establecer indicadores que se acerquen lo ms
fidedignamente posible a los objetivos que se desean medir o evaluar16.
Por otra parte, tcnicamente los indicadores son magnitudes estadsticas, expresadas en cifras absolutas o
relativas, obtenidas mediante la agregacin de datos primarios o mediante operaciones matemticas realizadas
sobre las observaciones primarias, que permiten describir las caractersticas de una situacin dada. Los
indicadores permiten medir o sintetizar un atributo o una caracterstica correspondiente a un objeto o evento,
expresados stos como objetivos de una determinada intervencin. Aqu radica su importancia y, en cierto
modo, su nivel cognoscitivo superior a las proposiciones expresadas en forma literal o narrativa. Sin embargo,
lo cuantitativo es indesligable de lo cualitativo, razn por la cual resultados e indicadores son conceptos
mutuamente complementarios.
En el contexto de la gestin de programas y proyectos, resulta de gran importancia el hecho que un indicador
pueda verificarse en forma objetiva. Por ello, junto a la especificacin de indicadores se deben seleccionar los
medios o fuentes apropiadas de verificacin. En realidad, la relacin ms amplia es la que existe entre
resultados (u objetivos), indicadores y medios de verificacin: la prueba de la correcta formulacin de un
objetivo es su capacidad para ser expresado cuantitativamente a travs de un indicador; y la prueba de que un
indicador es adecuado es que sea objetivamente verificable, a travs de determinados medios o fuentes de
verificacin.
Grfico 6.1 Indicadores objetivamente verificables

16

Una amplia revisin de los procedimientos de investigacin cientfica, en gran medida aplicables al diseo y
ejecucin de evaluaciones, puede encontrarse en Metodologa de la Investigacin Cientfica de Roberto
Hernndez, Carlos Fernndez y Pilar Baptista. Mc Graw-Hill, Mxico, 1999.

30

Cadena de
resultados

3.2

Indicadores
de desempeo

Fin

Indicadores
de Impacto

Propsito

Indicadores
de efecto

Componentes

Indicadores
de producto

Actividades

Indicadores
de proceso

Medios de
verificacin

Factores
externos

Variables, indicadores y metas

Cabe indicar que, en el contexto de las acciones de monitoreo y evaluacin de un proyecto, los
indicadores juegan un rol clave. Los indicadores resumen la informacin necesaria para efectuar la
comparacin entre lo planeado y lo ejecutado, y hacen que esta comparacin sea objetiva. Luego de haber
fijado los objetivos, el siguiente paso consiste en identificar los indicadores relevantes y establecer las metas
correspondientes. En otras palabras, para fijar metas previamente debe haberse identificado los indicadores, los
cuales, a su vez, corresponden a determinados objetivos. Dado que rara vez un objetivo puede ser medido
cabalmente a travs de un slo indicador, por lo general se requieren varios indicadores, tanto intermedios
como finales, para medir el alcance en el logro de un objetivo. A este respecto, cabe clarificar la relacin
conceptual entre los objetivos, los indicadores y las metas17:

Los objetivos, como ya ha sido sealado, son formulados en trminos cualitativos con
expresiones tales como: eliminar la pobreza extrema, mejorar el nivel de habilidades
empresariales, generar nuevos puestos de trabajo, elevar el nivel de ingresos, etc.
Los indicadores son el resumen de las variables que se utilizan para medir las caractersticas o
atributos que denotan el progreso hacia el logro de los objetivos. Por ejemplo, el avance en la
erradicacin de la pobreza extrema podra medirse a travs del nmero de personas con
necesidades bsicas insatisfechas o del nmero de personas con un ingreso menor a 1 dlar
diario.
Las metas son los niveles cuantificables de los indicadores que una organizacin o un pas desea
alcanzar en un momento dado. Son los valores a alcanzar con la intervencin: representan en
trminos cuantitativos la situacin con proyecto. Por ejemplo: reducir la tasa de analfabetismo al
3% en el 2005.

17

El rol de los indicadores en el diseo de sistemas de monitoreo y evaluacin es descrito ampliamente por G.
Rubio, G. Prenushi y K. Subbarao, Monitoring and Evaluation. Banco Mundial, 2000.

31

Finalmente, debe recordarse que la fijacin de objetivos claros es el primer requisito para alcanzarlos. Y
fijarlos en forma participativa es la nica manera de generar compromisos fuertes en torno a ellos. Objetivos
claros y compromisos fuertes son los dos grandes principios en la ciencia y el arte de la planificacin.

Grfico 6.2 Anatoma de un indicador


Variables

Nombre

Definicin
conceptual

Definicin
operativa

Forma

Forma de
clculo

Valor

Lnea de
base

Variables
especficas

Metas

Global

Hitos

Proceso de verificacin

Elementos de una variable


Los indicadores, sin embargo, constituyen un concepto derivado del otro concepto ms amplio:
variable. Una variable es una magnitud cuyos valores son objeto de estudio en una accin de
monitoreo y evaluacin. Puede referirse a individuos, grupos de personas u organizaciones. La
definicin de las variables torna susceptibles de medicin los temas de evaluacion. La identificacin
y definicin de variables es la tarea ms importante en el proceso de diseo de un sistema de
monitoreo y evaluacin. Tngase presente que las variables se deducen a partir de los objetivos del
proyecto que se pretende evaluar. Por lo general, una variable presenta cinco elementos basicos:
a)
b)
c)
d)
e)

Nombre o denominacin.
Definicin operativa.
Categoras o niveles de los valores de la variable.
Procedimiento para recopilar los datos desde las unidades de anlisis.
Indicadores o medidas de resumen de los datos recopilados.

Veamos, a modo de ejemplo, los elementos de la variable estado civil, que es una variable
cualitativa.
Nombre

Estado civil.

Definicin

Es la situacin de la persona empadronada en relacin con las leyes y


costumbres del pas.

Categoras
(01) Soltero (a)

(04) Viudo (a)


32

Obtencin de datos

(02) Casado (a)

(05) Divorciado (a).

(03) Conviviente

(06) Separado (a).

Cul es su estado civil o conyugal?

Indicadores

Distribucin porcentual.
Tasa de nupcialidad.

Veamos el caso de una variable cuantitativa, como por ejemplo la variable ingreso.
Nombre

Ingreso

Definicin

Son los recursos monetarios netos, incluyendo todas las bonificaciones


que percibe una persona por su ocupacin principal y secundaria durante
el perodo de referencia de la encuesta.

Categoras

Puede proponerse en forma de niveles o simplemente intervalos.


Por niveles de

Alto, Medio, Bajo.

ingreso
Por intervalos

Por ejemplo 11 intervalos (dlares)


(01) Menos de 200;

(02) 201- 400;

(03) 401-600;

(04) 601-800;

(05) 801-1000;

(06) 1001-1400;

(07) 14pl-1800;

(08) 1801-2200;

(09) 2201-2600;

(10) 2601-3000;

(11) Ms de 3000 dlares.


Obtencin de datos

Cul fu su ingreso total en el ltimo mes?

Indicadores

Ingreso promedio.
Ingreso mediano.
Coeficiente de Gini.

Veamos, finalmente, los elementos de la variable analfabetismo, utilizando el indicador tasa de


analfabetismo.
Nombre

Analfabetismo

Definicin

Proporcin de personas de 15 y ms aos, que no saben leer ni escribir.

Categoras

Obtencin de datos
Indicadores

Bajo

Menos del 10%

Medio

De 10 a 20%

Alto

De 21 a 30%

Muy Alto

Ms de 30%

Sabe leer y escribir?

Tasa de analfabetismo.
Proporcin de analfabetos hombres.
Proporcin de analfabetos mujeres.

Variables independientes y dependientes

33

Las variables claves de un sistema de monitoreo y evaluacin estn relacionadas con los objetivos
de la intervencin. Para ello, los objetivos deben ser claros, especficos y mensurables. Cuantificar
un objetivo consiste en asociarle patrones que permitan hacerlos verificables. Segn la relacin
causa-efecto analizada, las variables pueden dividirse, de acuerdo con el papel que desempeen en
la relacin causal, en dependientes e independientes:
a) Variable dependiente. Es aquella cuyo comportamiento es explicado por otra u otras
independientes. Se la denomina tambin variable a explicar o criterio y suele representarse
por la letra Y del eje de ordenadas. Por ejemplo, el consumo de helados (variable
dependiente) puede ser explicado por la edad del individuo.
b) Variable independiente. Es una variable que se utiliza para explicar el comportamiento de
otra dependiente. Se la denomina tambin variable explicativa o predictora y se representa
por la letra X del eje de abscisas. En el ejemplo anterior, la edad es la variable
independiente.

Variables cuantitativas y cualitativas


Existen dos tipos bsicos de variables: cualitativas y cuantitativas 18. Cuando la caracterstica que se
pretende medir es de naturaleza no numrica, recibe el nombre de variable cualitativa o categrica.
Algunos ejemplos de variables cualitativas son gnero, filiacin religiosa, pas de nacimiento y nivel
de instruccin. Cuando los datos son de naturaleza cualitativa, es de suma importancia la cantidad o
proporcin ubicada dentro de cada categora. Por ejemplo, qu porcentaje de la poblacin tiene
DNI? Cuntas personas en edad de trabajar tienen empleo?
Grfico 1.4 Resumen de los tipos de variables
Tipos de variables

Cualitativa

Marca de computadora.
Estado civil
Color de cabello.

Cuantitativa

Discreta

Continua

Hijos en una
familia
Goles en un
partido de futbol.
Aparatos electricos
que se poseen.

Monto del
impuesto a la renta
Peso de un
estudiante
Precipitacin anual
en el distrito X.

Cuando la variable que se estudia aparece en forma numrica, la variable se denomina variable
cuantitativa. Variables cuantitativas bastante conocidas son, por ejemplo, la tasa de crecimiento del
PBI, el ingreso per cpita y el valor de las exportaciones. Estas variables pueden ser discretas o
continuas. Las variables discretas adoptan slo ciertos valores y existen vacos entre ellos. Ejemplos
de variables discretas son el nmero de camas en un hospital (1, 2, 3, 4, etc.); el nmero de
automviles que cruzan una determinada interseccin de la ciudad y el nmero de estudiantes en
una escuela. Por consiguiente, existe un vaco entre los valores posibles. Las variables discretas son
el resultado de una relacin numrica. Las observaciones de una variable continua toman cualquier
valor dentro de un intervalo especfico. Ejemplos de variables continuas son: presin del aire en
una llanta, peso de un cargamento de tomates, valor de la produccin agrcola, etc. Se acostumbra
redondear a 3 lugares decimales (3.258, por ejemplo) todas las variables continuas, aunque esto es
opcional.
18

Basado en: Douglas A. Lind: Estadstica aplicada a los negocios y la Economa. Mc Graw Hill. Mxico DF, 2008.

34

Escalas de medida
La precisin con la que un indicador (variable operacionalizada) representa las caractersticas o
atributos del individuo u objeto que es materia de medicin, depende de la escala de medicin. Se
entiende por escala a los valores numricos asignados a cada variable segn ciertas reglas. Este es
el significado bsico del concepto de escala; concepto que, por otra parte, puede adoptar diversos
significados, entre ellos el de instrumento de medida compuesto por una serie de tems que se
utiliza para cuantificar caractersticas de los individuos a partir de sus respuestas a los tems.
La tipologa de escalas de medida ms difundida es la propuesta por Stevens (1946), que distingue
cuatro tipos19: nominal, ordinal, de intervalo y de razn; cada una de ellas ms precisa que la
anterior. Las dos primeras escalas son no mtricas o cualitativas, ya que reconocen en cada objeto
una determinada cualidad o atributo; mientras que las dos ltimas son escalas mtricas o
cuantitativas, capaces de reflejar diferencias de grado o cantidad.
La medida de las variables viene determinada por la escala utilizada. El tipo de escala, a su vez,
condiciona la eleccin de la tcnica estadstica de anlisis de los datos. La escala es un instrumento
utilizado para medir las variables. Pueden distinguirse cuatro tipos de escalas (Stevens, 1946):
a) Escala nominal. Indica slo la pertenencia a una clase o categora, dentro de una variable;
por ejemplo, hombre o mujer, en la variable sexo; soltero, casado, divorciado o
viudo, en la variable estado civil, etc. Si se asocian cdigos numricos a las categoras, su
finalidad es nicamente la de identificarlas y facilitar el tratamiento de los datos. No hay
jerarqua entre las categoras, ni igual diferencia entre ellas, ni, por supuesto,
proporcionalidad.
b) Escala ordinal. Es una variante de la escala nominal que presenta una ordenacin de algn
tipo (de ms a menos o de menos a ms) en las categoras o clases. Por ejemplo, en la
variable nivel de estudios existe una jerarqua (de conocimientos) entre sus clases o
categoras (<<sin estudios, estudios primarios, estudios medios y estudios
superiores); pero, al igual que en la escala nominal, los intervalos no son iguales ni existe
proporcionalidad entre ellos (la diferencia, por ejemplo, entre estudios primarios y
estudios medios no es la misma que entre esta ltima categora y la representada por
estudios superiores, ni puede decirse que los estudios superiores implican el doble o el
triple de conocimientos que los estudios primarios).
c) Escala intervlica. Supone que, adems de existir ordenacin, las distancias entre los
valores o intervalos de la escala son iguales, aunque no existe proporcionalidad entre ellos
ni el valor O de la escala es absoluto. Por ejemplo, los grados de temperatura (Celsius,
Fahrenheit, Rankine o Kelvin), o la valoracin de un servicio (-2 = muy negativo; -1 =
negativo; O = neutral; 1 = positivo; 2 = muy positivo). En esta ltima escala se podran
utilizar, alternativamente, valores comprendidos entre 1 y 5 para expresar la apreciacin
del servicio.
d) Escala proporcional o de razn. Supone que, adems de ordenacin e igual distancia,
como en la escala intervlica, existe proporcionalidad entre los valores de la escala y el
valor O es absoluto. Por ejemplo, los aos de edad, ingresos anuales, nmero de kilmetros
recorridos anualmente en automvil, saldo de la cuenta corriente, etc.

19

Basado en: Jean-Pierre LvyMangin: Anlisis multivariable para las ciencias sociales (2008). Prentice Hall.
Madrid.

35

Existe una jerarqua entre las escalas, de modo que las proporcionales ocupan la posicin ms alta.
Cualquiera de las escalas de orden superior cumple los requisitos de las de orden inferior y puede
transformarse en ellas, pero no a la inversa.
Las escalas nominales y ordinales constituyen escalas no mtricas, que carecen de significado
cuantitativo, mientras que las escalas intervlica y proporcionales son escalas mtricas, que s
tienen un significado cuantitativo. Por tal motivo, las variables medidas con escalas no mtricas son
variables cualitativas, mientras que las medidas con escalas mtricas se denominan variables
cuantitativas. En DYANE las variables identificadas como categricas son las que se miden con
escalas no mtricas, es decir, variables cualitativas, y las variables denominadas numricas, las que
se miden con escalas mtricas, identificadas tambin como variables cuantitativas.

Concepto de categora
Una categora o clase es un conjunto de personas, entidades u objetos que presentan los mismos
atributos o caractersticas. Por ejemplo, mujeres, empresas multinacionales, automviles
deportivos, etc. La categora es una medida de una variable en la que la escala utilizada es de tipo
nominal u ordinal. Por ejemplo, la variable edad suele medirse en aos, en cuyo caso se trata de una
escala de medida de tipo proporcional, con intervalos iguales y O absoluto, y a la que puede
aplicarse una gran variedad de tcnicas estadsticas. Pero la edad puede medirse tambin
utilizando una escala no mtrica, asignando los individuos a categoras o clases tales como nio,
adolescente, joven, adulto, etc., en las que, si bien existe una jerarqua u ordenacin, los
intervalos son desiguales y, por tanto, no hay proporcionalidad entre los mismos.
Una categora puede ser identificada por un nmero (1, 2, 3...), pero este nmero utilizado slo es
un cdigo distintivo de la categora, y no puede entenderse como un valor cuantitativo de la
variable al que, juntamente con otros, se le pueda calcular la media o la desviacin tpica, por
ejemplo. Las categoras pueden ser contadas o agrupadas, y se puede presentar su distribucin de
frecuencias de forma individualizada, mediante una tabulacin simple, o de forma conjunta y
simultnea con otra u otras variables, mediante tabulaciones cruzadas, pero no se les puede aplicar
estadsticas propias de las variables cuantitativas. La variable sexo, por ejemplo, puede ser
representada por dos categoras identificadas con dos cdigos: 1 = Hombre y 2 = Mujer. Si la
muestra estudiada es de 200 personas y la mitad son hombres y la otra mitad, mujeres, se puede
decir que en el total de la muestra hay 100 hombres y 100 mujeres, o que el 50 por 100 son
hombres y el otro 50 por 100 son mujeres. Tambin se puede calcular la distribucin absoluta y
relativa del sexo en cada una de las categoras de otra variable, por ejemplo, estado civil, y
presentar los resultados en forma de tabla cruzada.
Pero sera absurdo decir que la media de la variable es 1,5 o que la desviacin tpica es 0,5 (valores
que se obtendran al calcular estos estadsticos sobre los cdigos de la variable sexo), porque estas
medidas de resumen no tendran ningn sentido en este caso.
Los valores de una variable numrica, medida originalmente con una escala mtrica, pueden
agruparse en intervalos, no necesariamente iguales, y convertirse en una variable categrica. Un
intervalo es un conjunto de valores de una variable, comprendidos entre otros dos, uno superior y
otro inferior, que determinan sus lmites. Un intervalo sirve para reducir la presentacin de datos.
Por ejemplo, si las edades de una muestra de 100 personas estn comprendidas entre 18 Y 70 aos,
la distribucin de frecuencias de esta variable puede presentarse agrupada por intervalos, del
siguiente modo:

1.

Menos de 25 aos

10

2.

De 25 a 34 aos

16
36

3.

De 35 a 34 aos

24

4.

De 45 a 54 aos

18

5.

De 55 a 64 aos

23

6.

65 aos o ms

Total.

100

Los intervalos deben ser mutuamente excluyentes y colectivamente exhaustivos. Es decir, ningn
valor de la variable puede estar en ms de un intervalo, y el conjunto de intervalos ha de abarcar la
totalidad de casos posibles. Por ejemplo, los intervalos 5-7 y 7-9 no son mutuamente
excluyente s, porque ambos pueden contener el valor 7; y los intervalos siguientes: 3-6, 7-10, y
11-13, no son colectivamente exhaustivos, porque no abarcan los valores inferiores a 3 o
superiores a 13.
Una variable categrica puede convertirse en numrica utilizando variables ficticias. Como se ha
indicado anteriormente, una variable ficticia es una variable dicotmica que se obtiene
convirtiendo un nivel dado de una variable cualitativa en una variable binaria, en la que el valor 1
indica la presencia de la caracterstica y el valor O la ausencia de la misma. Si la variable categrica
tiene slo dos categoras o clases (como el sexo, en el ejemplo expuesto anteriormente), se necesita
una sola variable ficticia para expresar los dos estados posibles (l = Hombre, O = No hombre o
mujer). Pero una variable que originalmente se hubiera medido con tres categoras, como por
ejemplo la ocupacin (1 = Trabaja, 2 = Jubilado, 3 = En paro), necesitara dos variables ficticias para
representar las tres situaciones posibles. Si a la primera variable ficticia (X1) se la denomina
Trabaja (1 = S; O = No), y a la segunda (X2), Jubilado (1 = S; 0 = No), las tres categoras
originales de la variable ocupacin quedaran representadas por las dos nuevas variables ficticias
del siguiente modo:
Valores de las variables ficticias
Categoras de la variable original

X1
Trabaja

X2
Jubilado

1.

Trabaja

2.

Jubilado

3.

En paro

En general, con una variable cualitativa de n categoras, se precisan n - 1 variables ficticias para
representar la totalidad de las categoras de la variable original.

Anatoma de un indicador
Tal como se puede apreciar en el grfico 3.5, un indicador tiene una estructura compuesta por tres
partes claramente diferenciadas: definicin conceptual, definicin operativa y valores o datos.

Grfico 3.5 Anatoma de un indicador

37

Variables

Nombre

Definicin
conceptual

Definicin
operativa

Forma

Forma de
clculo

Variables
especficas

Valor

Lnea de
base

Metas

Global

Hitos

Proceso de verificacin

Cuadro 3.2 Partes de un indicador


Partes del indicador

Caractersticas

Referencia conceptual

Refiere la variable o el concepto que se espera captar mediante la


medicin. Por lo general, est asociado a un campo del desarrollo.

Definicin operativa

Es la frmula de conteo o frmula de clculo, la cual indica los


eventos u objetos que se deben considerar en la medicin.

Valores

Son los datos, ya sea correspondiente a la lnea de base o la lnea


de salida.

Veamos, a modo de ejemplo, el indicador denominado tasa de analfabetismo. Sus elementos son los
siguientes:

Referencia conceptual: refiere el nivel educativo de la poblacin.


Definicin operativa: poblacin de 15 a 65 aos de edad que no sabe leer ni escribir, y no
sabe las cuatro operaciones matemticas. La tasa se calcula dividiendo la poblacin
analfabeta entre la poblacin total y multiplicando el resultado por 100.
Variables especficas: adems de la poblacin analfabeta, interviene la variable poblacin
total.
Valores: son los datos para los aos de la medicin.
Fuente: Compendio Estadstico del INEI.

Esta es la estructura bsica de un indicador de desempeo, en el marco del diseo e


implementacin de sistemas de monitoreo y evaluacin.

Grfico 3.6 ndice de Desarrollo Humano


38

Variable

Indicador

ndice de la
variable

Vida larga y saludable

Esperanza de vida
al nacer

ndice de esperanza
de vida

Educacin

Tasa de
alfabetizacin de
adultos

Tasa bruta de
matriculacin

ndice de
alfabetizacin de
adultos

ndice de la TBM

ndice de educacin

Nivel de vida
digno

PIB per cpita

ndice de PBI

ndice de Desarrollo Humano IDH

Indicadores y bases de datos


El trabajo estadstico involucrado en la construccin de indicadores se asienta sobre tres elementos bsicos:
las unidades de anlisis (poblacin y muestra), las variables o caractersticas de la poblacin o muestra y sus
correspondientes indicadores y, finalmente, los datos o valores que tomarn cada uno de los indicadores.
Estos tres elementos, constituyen la matriz tripartita de informacin de una intervencin. Por lo general,
ocurre que los gestor de un proyecto observan sistemticamente fenmenos o hechos de un campo de la
realidad (unidades de anlisis), sobre la cual interesa analizar determinadas caractersticas (variables), con el
propsito de dimensionar o cuantificar determinados cambios (valores o datos) generados por la intervencin.
A tal efecto, se elabora una muestra de las unidades de estudio, se transforman las variables e indicadores en
preguntas de un cuestionario y, finalmente, se recopilan los datos mediante una encuesta. Esta es, en sntesis,
la metodologa operativa del uso de indicadores en la gestin de un proyecto.

Las unidades de anlisis, referidas, por lo general, a la poblacin beneficiaria que constituye el
objeto de anlisis. Toda poblacin tiene "N" elementos o unidades de anlisis, y una muestra de
"n" elementos, donde n<N.
Las variables son las dimensiones o caractersticas que se desea conocer en relacin a las
unidades de anlisis, tales como nivel de ingresos, productividad, nivel educativo, etc. Las
variables se definen e identifican en funcin de los objetivos del estudio y stos, a su vez,
estn relacionados con los objetivos del proyecto mismo.
Los datos o valores que alcanzan las unidades en las variables estudiadas, son las respuestas
o resultados que se obtienen cuando las unidades de anlisis son encuestadas o interrogadas,
o alternativamente, son observadas. Habr tantos datos como elementos tiene la poblacin
en estudio.

Definida la poblacin (o unidades de estudio) e identificadas las variables, se proceder a la


recoleccin de los datos. Estos tres elementos constituyen la Matriz Tripartita de Datos o Base de
Datos que permitir obtener los datos para las variables en cada unidad de anlisis y posteriormente
facilitar la cuantificacin del impacto del proyecto. Durante la etapa de anlisis de los resultados de
39

la encuesta, dicha base de datos ayudar a definir las categoras de las variables y luego facilitar la
construccin de las tablas de frecuencia con una o ms variables, en el marco de anlisis univariado
o multivariado de la informacin recopilada.

Grfico 6.3. Estructura de la base de datos

Variables de estudio
Pregunta

Pregunta

Pregunta

Unidades de anlisis

Registro 1

Registro 2

Registro 3

Datos

Variables e indicadores
Variables e indicadores son conceptos relacionados. El concepto de indicador es un concepto derivado de
otro concepto ms amplio: variable. Una variable es una magnitud cuyos valores son objeto de estudio en
una accin de monitoreo y evaluacin. Puede referirse a individuos, grupos de personas, organizaciones u
otra unidad de anlisis. La definicin de las variables torna susceptibles de medicin los temas de evaluacin
que, por lo general, estn relacionados a los objetivos de una intervencin. La identificacin y definicin de
variables es la tarea ms importante en el proceso de diseo de un sistema de monitoreo y evaluacin. Por lo
general, una variable presenta cinco elementos bsicos:

f)
g)
h)
i)
j)

Nombre o denominacin.
Definicin operativa.
Categoras o niveles de los valores de la variable.
Procedimiento para recopilar los datos desde las unidades de anlisis.
Indicadores o medidas de resumen de los datos recopilados.

Veamos, a modo de ejemplo, los elementos de la variable Satisfaccin del usuario interno, que es una
variable cualitativa.

40

Nombre

Satisfaccin del usuario interno.

Definicin
Indica la percepcin del grado de satisfaccin de los trabajadores de la
operativa y unidad SUNAT en relacin a las acciones de verificacin de documentos sujetos a
de medida
control.
Categoras y
Se establecen cinco categoras.
escala de medida
(01)
Muy
(04) Insatisfactorio.
satisfactorio.
(02) Satisfactorio.
(05) Muy insatisfactorio.
(03) Indiferente.
Obtencin
Considera que la verificacin se realiza en forma adecuada?
de datos
Indicadores
Porcentaje de aprobacin.

Veamos el caso de una variable cuantitativa, como por ejemplo la variable Ingreso.
Nombre

Ingreso.

Definicin

Son los recursos monetarios netos, incluyendo todas las bonificaciones que
percibe una persona por su ocupacin principal y secundaria durante el
perodo de referencia de la encuesta.
Puede proponerse en forma de niveles o simplemente intervalos.
Por
niveles
de Alto, Medio, Bajo.
ingreso
Por intervalos
Por ejemplo 11 intervalos (dlares)
(01) Menos de 200;
(02) 201- 400;
(03) 401-600;
(04) 601-800;
(05) 801-1000;
(06) 1001-1400;
(07) 14pl-1800;
(08) 1801-2200;
(09) 2201-2600;
(10) 2601-3000;
(11) Ms de 3000 dlares.
Cul fue su ingreso total en el ltimo mes?
Ingreso promedio.
Coeficiente de Gini.

Categoras

Obtencin de datos
Indicadores

El nombre de una variable debe ser breve y de fcil recordacin. Debe ser inequvoco, evitando que se le
confunda con otras variables. Una variable es un atributo o caracterstica susceptible de medicin, pero que
sin una adecuada definicin operativa no podra ser medida. La definicin operativa es su forma de clculo,
que en unos casos puede ser una frmula, pero en otras simplemente una especificacin de los elementos que
debern considerarse. Para obtener los datos (cuando se trata de variables de fuente primaria) se elabora una
encuesta, cuyo ncleo est constituido por las preguntas del cuestionario y sus respuestas, las cuales para su
procesamiento sistemtico son agrupadas en categoras y a las cuales se aplican distintas escalas de medida.
Finalmente, obtenidos los datos, hay que resumirlos, a cuyo efecto se crean indicadores. Por ejemplo, luego
de recopilar datos sobre el nivel de ingresos de la poblacin del pas, stos son resumidos en dos indicadores:
Ingreso promedio e ndice de Gini. Estos indicadores son los que se anotan en la lnea de base, pues, resumen
la situacin de las unidades de anlisis, que en este caso estn constituidos por toda la poblacin del pas.
41

3.3

Tipos de indicadores

En su clasificacin ms amplia, los indicadores pueden ser simples y compuestos. Los indicadores
simples son cifras absolutas o relativas, con carcter de observaciones primarias, en cuyo proceso de
construccin se han realizado operaciones de adicin o sustraccin. A su vez, stos se clasifican en
indicadores simples elementales (por ejemplo, poblacin total) e indicadores agregativos simples (por
ejemplo, PBI agrcola).
Los indicadores compuestos son cifras absolutas o relativas en cuya construccin se han realizado
operaciones matemticas que han permitido establecer relaciones entre determinados indicadores simples. A
su vez, se clasifican en: relaciones en cifras absolutas (productividad del trabajo, por ejemplo), relaciones en
cifras relativas (tasa de subempleo, por ejemplo) y agregaciones ponderadas (ndice de pobreza, por
ejemplo).

Ejemplos de indicadores

PBI per cpita.


Tasa de desempleo.
Tasa de analfabetismo.
Numero de microempresas capacitadas.
Longitud de vas asfaltadas.

Los indicadores, por otra parte, se pueden clasificar en dos grupos genricos: indicadores intermedios e
indicadores finales. Cuando un indicador mide un objetivo final o el efecto de una intervencin sobre el
bienestar de la gente, lo llamamos indicador de impacto o indicador de resultado. Por ejemplo, la
alfabetizacin se puede considerar como un objetivo final, por lo tanto, un indicador que los mida- como la
proporcin de personas de cierta edad que saben leer, escribir y realizar las cuatro operaciones
aritmticas- sera un indicador final.
Cuando un indicador mide un factor que determina un resultado o contribuye al proceso de lograr un resultado,
lo llamamos un indicador de insumo o de producto, dependiendo de la etapa del proceso. Por ejemplo, se
pueden necesitar muchas cosas para subir el nivel de alfabetizacin: ms escuelas y maestros, ms alumnos
atendiendo clases, etc. El gasto pblico para aulas y personal docente sera un indicador de insumo, mientras
que las aulas construidas y del personal docente capacitado seran indicadores de producto. Lo obvio es
que los insumos y los productos no son en s mismos objetivos de desarrollo, sino ms bien ayudan a alcanzar
los objetivos. En este caso se habla genricamente de indicadores intermedios.

Indicadores estructurados
En concordancia con lo anterior, en el contexto del enfoque del marco lgico, los indicadores se
clasifican en los cuatro grupos que se especifican a continuacin.
Indicadores de impacto. Son las medidas de desempeo para los objetivos del nivel ms alto a los cuales
apunta un proyecto. Miden los efectos de largo plazo, vinculados por lo general a los cambios duraderos y
perdurables en la situacin de los beneficiarios. Por este motivo, los indicadores de este nivel pueden ir ms
all de la responsabilidad de la institucin ejecutora.
42

Indicador de impacto: ejemplos


En programas de capacitacin laboral
En programas de formalizacin de la propiedad
En programas de asistencia tcnica para agricultores

Tasa de insercin laboral.


Ingreso per-cpita.
Valor del patrimonio predial.
Tasa de crecimiento del crdito.
Tasa de crecimiento del PBI agrario.
Ingreso per- cpita.

Indicadores de efecto. Estos indicadores a menudo definen el cambio en el comportamiento de los


beneficiarios del proyecto o el cambio en la manera en que funcionan las instituciones como resultado del
proyecto. Miden los resultados intermedios o de mediano plazo, vinculados, por lo general, a cambios
relativamente directos e inmediatos generados por el proyecto en el comportamiento o situacin de los
beneficiarios.

Indicadores de efecto: ejemplos.

Nmero de familias campesinas y organizaciones comunales que han incrementado sus


ingresos.
Porcentaje de inversin utilizada por las familias campesinas en el crecimiento de su
patrimonio familiar.
Porcentaje de inversin de las organizaciones comunales destinada a la mejora de la
infraestructura y recursos naturales productivos comunales.
Nmero de familias que han logrado incrementar la capacidad productiva mejorando y
ampliando sus recursos naturales productivos.
Nmero de comunidades campesinas que han logrado incrementar la capacidad productiva
mejorando y ampliando sus recursos naturales productivos.
Nmero de organizaciones comunales que obtienen recursos a partir de acciones de
articulacin interinstitucional.
Nmero de organizaciones comunales que ejecutan acciones de desarrollo rural a partir de
actividades de articulacin y asociacin interinstitucional.
Indicadores de producto. Se refieren a los bienes y servicios entregados por el proyecto a los beneficiarios.
Establecen los marcos de referencia para la evaluacin de resultados del proyecto, ya que corresponde a la
institucin ejecutora entregar determinados bienes y/o servicios contemplados en la estructura de la
intervencin. Los indicadores de producto reflejan cuantitativamente los resultados inmediatos que emergen
como consecuencia de la ejecucin de las actividades del proyecto.
Indicadores de producto: ejemplos.

Nmero de comunidades campesinas que aplican y cumplen los trminos de los estatus y
reglamentos.
Nmero de comunidades campesinas que logran ejecutar eficientemente sus planes anuales.
Nmero de comunidades campesinas que cumplieron satisfactoriamente con el convenio y
43

contratos suscritos.
Nmero de mujeres campesinas que ejercen o han ejercido cargos directivos.
Nmero de comunidades campesinas que desarrollan eficientemente los concursos de
manejo de recursos naturales.

Indicadores de proceso. Son los indicadores a nivel de actividades que, generalmente, se asocian a los
recursos asignados al proyecto. Lo recomendable es que solo exista uno y solo un indicador de proceso por
cada actividad. La prueba cida para comprobar que una actividad haya sido correctamente formulada es que
slo admita un indicador como lo suficiente para la medicin del avance en su realizacin.

Indicadores de proceso: ejemplos.

Nmero de convenios y contratos suscritos.


Nmero de mapas de planificacin.
Nmero de planes comunales.
Nmero de autoridades hombres y mujeres capacitados.
Nmero de promotores comunales hombres y mujeres capacitados.
Nmero de Yachachiq hombres y mujeres capacitados.
Nmero de talleres de capacitacin.
Nmero de contratos de yachaqs.

En proyectos complejos, ningn indicador es por s solo suficiente. En ocasiones, tambin se hace alusin a
dos tipos adicionales de indicadores vinculados al marco lgico: indicadores de insumos e indicadores de
entorno. Los primeros se refieren a los recursos fsicos y/o monetarios requeridos para llevar a cabo las
actividades; en tanto que los segundos variables del entorno, necesarias para efectuar el seguimiento de los
supuestos claves del proyecto.
Grfico 6.4 Indicadores estructurados

44

Impacto

Efecto

3.4

Como estn cambiando


las condiciones que
estamos interviniendo?

Qu cambios se
observan en la poblacin
beneficiaria?

Producto

Cuntas unidades de
productos o servicios se
estn entregando a la
poblacin?

Proceso

Se estn realizando las


actividades previstas en la
cantidad, tiempo y calidad
previstas?

Criterios para seleccionar indicadores

En general, existen tres principios que guan el proceso de seleccin de indicadores: primero, validez
y confiabilidad; segundo, factibilidad tcnica; y tercero factibilidad financiera.

Primero :
Segundo :

Los indicadores deben ser vlidos y confiables.


Los datos requeridos para hacer clculos deben ser factibles de una
recopilacin oportuna y econmica.
Tercero : Los indicadores y su clculo deben estar acordes con la capacidad
de la entidad ejecutora.

Por otra parte, existen un conjunto de criterios que debieran tomarse en consideracin en el proceso de
seleccin de indicadores de desempeo20.

Validez
Un indicador debe medir tan estrechamente como sea posible el objetivo para el cual ha sido establecido. No
debe estar situado a un nivel ni ms bajo ni ms alto que el objetivo o resultado a ser medido. En ocasiones no
existe posibilidad de contar con indicadores directos en la frecuencia requerida por los evaluadores de la
intervencin. En tales casos se podran usar indicadores proxy, medidas indirectas relacionadas al objetivo que
20

Los criterios planteados estn basados en diversas publicaciones de los organismos internacionales de desarrollo,
pero especialmente del USAID Center for Development Information and Evaluation.

45

se desea medir. Por ejemplo, en las reas rurales remotas es frecuentemente muy difcil medir los niveles de
ingreso en forma directa. Medidas tales como porcentaje de hogares sin techo (u otras parecidas) pueden ser
tiles, aunque sean unas medidas rudimentarias y aproximadas. El supuesto es que cuando los pobladores
tienen ingresos ms altos ellos tienden a comprar ciertos bienes. Si existe evidencia convincente de que el
supuesto es vlido (por ejemplo, est basado en estudios o experiencias anteriores), entonces el proxy puede
ser un indicador adecuado, actuando como un segundo ptimo respecto a las medidas directas.

Objetividad
Un indicador objetivo no tiene ambigedad respecto a lo que est midiendo. Es decir, existe un consenso
general respecto a la interpretacin de sus resultados. Es al mismo tiempo unidimensional y operacionalmente
preciso. Ser unidimensional significa que mide solo un fenmeno a la vez. La precisin operacional significa
que no tiene ambigedad sobre el tipo de datos que deberan ser recopilados para un indicador. As por
ejemplo, mientras el indicador nmero de firmas exportadoras exitosas es ambiguo, algunos otros como
nmero de firmas exportadoras que experimentan un crecimiento anual de sus ingresos en por lo menos
5% son operacionalmente precisos.

Adecuacin
Tomados como grupo, un indicador de desempeo y sus indicadores complementarios deberan medir
adecuadamente el objetivo en cuestin. Una pregunta frecuentemente formulada es cuntos indicadores
deberan ser usados para medir un determinado objetivo? La respuesta depende de los siguientes factores:

a) Complejidad del objetivo a ser medido,


b) Nivel de recursos disponibles para el trabajo de monitoreo y evaluacin, y
c) Cantidad de la informacin necesaria para tomar decisiones razonablemente confiables.

Para algunos objetivos un indicador de desempeo podra ser suficiente. Por ejemplo, si el objetivo abordado
es exportaciones tradicionales incrementadas, el indicador valor en dlares de las exportaciones
tradicionales por ao es probablemente suficiente.
En los casos en los que un indicador simple no sea suficiente, o cuando existe beneficios a ser obtenidos
mediante la triangulacin, entonces dos o ms indicadores podran ser necesarios. Sin embargo, por regla
general se debera evitar el uso de demasiados indicadores. Debe existir un equilibrio entre los recursos
disponibles para la medicin de desempeo y la cantidad de informacin que los ejecutivos deben tener para
tomar decisiones razonablemente bien informadas.

Cuantitativo, donde sea posible


Los indicadores cuantitativos son numricos (por ejemplo, nmero o porcentaje, dlares, tonelaje, kilmetros,
etc.); a diferencia de los indicadores cualitativos, que son observaciones descriptivas (por ejemplo, opiniones
de expertos, descripcin de actitudes, etc.). Los indicadores cuantitativos no son necesariamente ms objetivos:
su precisin numrica los lleva a un mayor consenso sobre la interpretacin de los datos resultantes y son por
lo tanto preferibles. Sin embargo, aun cuando puedan estar siendo usados determinados indicadores
46

cuantitativos, ciertos indicadores cualitativos pueden complementarlos, logrando con ello una mayor riqueza
de informacin.

Desagregados, donde sea apropiado


Desagregar los resultados de un proyecto a nivel de la poblacin segn gnero, edad, ubicacin o algunas otras
dimensiones es frecuentemente importante desde el punto de vista del evaluador o ejecutivo de un proyecto.
Las experiencias demuestran que las actividades de desarrollo frecuentemente requieren diferentes enfoques
para diferentes grupos y afectan a aquellos grupos en formas distintas. Los datos desagregados ayudan al
seguimiento pormenorizado de grupos especficos de participantes en el proyecto. Por lo tanto, los indicadores
deberan ser sensitivos a tales diferencias.

Prcticos
Un indicador es prctico si los datos pueden ser obtenidos oportunamente y a un costo razonable. Los
ejecutivos y evaluadores requieren datos que puedan ser recopilados con la frecuencia suficiente para evaluar
el avance y adoptar las decisiones que sean necesarias. Las unidades ejecutoras de proyectos deben reconocer
que ser necesario incurrir en determinados costos, razonables pero no exorbitantes, para obtener informacin
til sobre el desempeo de los proyectos. Una regla de oro es destinar una asignacin presupuestal que flucte
entre el 3 y 5% del costo total del proyecto para el trabajo de monitoreo y evaluacin.

Confiables
Una consideracin final se refiere a la confiabilidad de los datos para la adopcin de decisiones acertadas.
Baste sealar al respecto que los datos que una entidad ejecutora necesita para tomar decisiones
razonablemente acertadas no tiene necesariamente la misma rigurosidad que busca un cientfico social. En
general, si bien el trabajo de un evaluador de proyectos se nutre de los procedimientos de la investigacin
cientfica, las circunstancias que lo rodean, tales como el carcter perentorio de las decisiones que deben ser
adoptadas y la necesidad de responder a las necesidades de grupos de beneficiarios no siempre iguales, hacen
que su trabajo tenga casi siempre connotaciones propias de lo poltico y lo pragmtico.

3.5

Reglas bsicas para la construccin de indicadores21

A continuacin se ofrece un conjunto de reglas para la construccin de indicadores de monitoreo y


evaluacin de las intervenciones pblicas y sociales elaboradas bajo el enfoque del marco lgico.

Regla N 1: Todos los resultados y procesos deben tener por lo menos un indicador
Cada resultado y proceso establecido en la primera columna del marco lgico debe tener por lo menos un
indicador. Esto es vlido para el fin, propsito, componentes y actividades.

RESULTADOS

INDICADORES

21

Gran parte de los ejemplos a los que se hace referencia en esta seccin y en las siguientes han sido tomados de
los subproyectos que se ejecutan en el marco del Proyecto INCAGRO.

47

Elaboracin de estudios para el manejo de cuencas.

N de estudios.

Elaboracin de proyectos en zonas de proteccin y


tratamiento paisajstico.

N de proyectos elaborados.

Actualizar la normatividad en materia ambiental.

N de normas aprobadas.

Regla N 2: Los indicadores deben ser vlidos


Los indicadores deben estar relacionados con el resultado o proceso que se pretende medir. Este es el requisito
esencial de todo buen indicador: su validez o pertinencia.

RESULTADOS

INDICADORES

Capacitacin a miembros de juntas de usuarios de


agua.

N de juntas de usuarios de agua capacitados.

Formalizacin de organizaciones vecinales

N de organizaciones vecinales formalizadas

Promover el uso de ciclovas

N de ciclovas operativas

Regla N 3: Los indicadores deben guardar una jerarqua congruente con la cadena de
resultados
Deben seleccionarse indicadores correspondientes al nivel de impacto, efecto o producto, segn corresponda.
RESULTADOS

COMPONENTES

INDICADORES

Fin

Contribuir a mejorar la
competitividad y las exportaciones
del sector horto-frutcola.

Valor de las exportaciones de frutas y


hortalizas susceptibles.

Propsito

Mantener reas libres y reducir las


prdidas econmicas por moscas de
la fruta.

N de hectreas libres de moscas de la


fruta Ceratitis.
Prdidas econmicas evitadas.

Componentes

Campaa de erradicacin de la
mosca de la fruta.

N de hectreas hospedantes en las que


se aplica medidas de control.

Vigilancia y proteccin
permanentes de reas libres.

N de hectreas hospedantes libres de


la plaga con monitoreo permanente.
N de hectreas hospedantes libres de
la plaga con proteccin de reinfestacin.

48

Regla N 4: Los indicadores deben ser verificables


Los indicadores deben ser verificables a costo y en tiempo razonables. La verificacin de un indicador debe ser
costo- efectividad; es decir, ser efectiva en funcin de su costo.
MEDIOS DE
RESULTADOS

INDICADORES
VERIFICACIN

Incremento de la productividad en
crcuma.

Rendimiento de la tierra.

Informe estadstico de la DGIA


MINAG.

Mejoramiento de la seguridad
ciudadana.

Tasa de victimizacin.

Anuario Estadstico Policial MININTER

Fortalecimiento de la identidad cultural


y la integracin social.

ndice de participacin vecinal.

Gerencia de Participacin VecinalMML.

Regla N 5: No se debe confundir indicadores con objetivos


Los indicadores deben expresarse en forma de una variable mensurable, que refleje cuantitativamente el grado
de cumplimiento del objetivo del proyecto. No debe expresarse como el cambio esperado en la poblacin
beneficiaria.
RESULTADOS

INDICADORES

Fortalecimiento de capacidades de grupos organizados


de mujeres.

N de grupos de mujeres capacitados.

Fortalecimiento del programa Escuela para Padres

N de padres participantes.

Fortalecimiento de capacidades tcnicas y humanas

N de personas capacitadas

Regla N 6: No se debe confundir indicadores con actividades


Distinguir los indicadores de las actividades tomando en cuenta que, mientras stas se refieren a proceso,
aqullos se refieren a mediciones que por lo general toman la forma de metas fsicas.

RESULTADOS

Realizacin de estudios para conocer la variabilidad


genotpica y fenotpica del velln de rebaos de alpaca.

INDICADORES
N de estudios de evaluacin de la calidad del
velln de los rebaos de alpacas.
N de estudios de identificacin preliminar de
reproductores con vellones de calidad.
N de estudios de evaluacin del efecto gentico
de los padres reproductores seleccionados, en su
progenie.
N de estudios sobre la calidad del velln de las
49

cras con las tcnicas evaluadas.

Regla N 7: Se deben establecer metas para cada indicador


La meta es el valor a alcanzar en un determinado periodo de tiempo. La confusin puede evitarse
estableciendo indicadores y metas por separado.

RESULTADOS

INDICADORES

METAS

Incremento de la productividad en
crcuma.

Rendimiento de la tierra.

Incremento a 10 TM/HA en 2
aos.

Fortalecimiento de organizaciones de
productores.

N de organizaciones
fortalecidas.

05 organizaciones
fortalecidas.

Diseo de nuevos programas para


atencin en salud

N de programas diseados

04 programas diseados en 4
aos

Regla N 8: Un indicador operacionaliza slo una variable correspondiente a un resultado


Las intervenciones tienen variables independientes y dependientes, organizadas en cuatro niveles: actividades,
productos, propsito y fin. Un mismo indicador no debe utilizarse en ms de un objetivo ni en diferentes
niveles de la jerarqua de objetivos.
COMPONENTES

INDICADORES

Propsito

Seguridad jurdica de los predios


individuales y territorios de las
comunidades campesinas y
nativas.

N de propietarios de
predios rurales y de
comunidades campesinas y
nativas que reciben ttulos
de propiedad debidamente
inscritos en RR.PP.

Componentes

Clasificacin, saneamiento y
deslinde de zonas intangibles de
proteccin ecolgica.

N de reas naturales
protegidas que han sido
demarcadas.

Inventario, saneamiento y
deslinde de zonas intangibles de
proteccin cultural.

N de reas culturales en
zonas de titulacin rural que
han sido demarcadas.

RESULTADOS

50

Regla N 9: No se deben fusionar indicadores


Se deben seleccionar los indicadores ms representativos y no agrupar varios indicadores en una frase extensa.
Si los indicadores son independientes, entonces deben expresarse por separado.

RESULTADOS

INDICADORES

Titulacin y registro de predios rurales individuales


y de comunidades campesinas y nativas.

N de expedientes de predios individuales y de


comunidades campesinas y nativas inscritos en
SUNARP.

Promocin de la proteccin de las reas naturales


protegidas y culturalmente importantes, adyacentes
a las zonas de titulacin.

N de reas naturales protegidas demarcadas.

Normativa municipal que incentive y exija como


requisito el DNI para acceder a programas y
servicios municipales.

N de normas aplicadas.

Regla N 10: No se deben especificar demasiados indicadores


Si se disponen de demasiados indicadores y todos parecen ser apropiados, entonces se debe priorizar y
seleccionar aquellos cuyo monitoreo no tenga un costo alto y que permita una evaluacin efectiva.

RESULTADOS

INDICADORES

Promover la conservacin y el aprovechamiento


sostenible y competitivo de los CS y sus
ecosistemas.

Poblacin de vicuas.
Poblacin de alpacas.
Volumen de fibra de vicua comercializada.

Desarrollo de capacidades, RRHH y logstica

Implementar un sistema de transporte pblico

N de rutas racionalizadas.
N de empresas optimizadas.
Porcentaje de personas que usan transporte pblico.

N de personal capacitado.
N de campaas y/o talleres.
N de cursos dictados.
N de equipos re potenciados o adquiridos.

51

3.6

Errores comunes en la construccin de indicadores

A continuacin son listados los errores ms frecuentes en la construccin de indicadores, con la


finalidad de que las entidades ejecutoras de intervenciones pblicas, ya sean programas o proyectos eviten la
comisin de los mismos.

Error N 1: No disponer de al menos un indicador para cada resultado y proceso


No debe haber ningn fin, propsito, componente ni actividad que no cuente con sus respectivos indicadores.

RESULTADOS

INDICADORES

Estudios para el manejo de cuentas

N de estudios de manejo de cuencas

Registro de prcticas de conservacin de suelos

N de prcticas registradas.

Direccin y gestin de manejo de cuencas.

N de informes elaborados.

Error N 2: Falta de validez o pertinencia de los indicadores


El indicador guarda poca relacin con el objetivo o cambio que pretende medir.

RESULTADOS

INDICADORES

Capacitacin a miembros de juntas de usuarios.

N de canales construidos.

Adecuada utilizacin de recursos naturales.

N de proyectos ejecutados.

Fortalecimiento en interinstitucional e intersectorial.

N de personas capacitadas.

Error N 3: Confusin en la naturaleza de los indicadores


Suele ocurrir cuando se utilizan las consecuencias inmediatas de las actividades como indicadores de impacto
o efecto. Este error tambin puede presentarse al considerar los efectos sobre el bienestar de la poblacin
objetivo como indicadores de proceso o producto.

RESULTADOS

INDICADORES

Contribuir a mejorar la competitividad y exportaciones N de canales construidos.


del sector horto-frutcola.
Mayores oportunidades para la poblacin pobre y N de personas que reciben apoyo crediticio y capacitacin.
excluida en la construccin del desarrollo humano.

52

Una ciudad integrada, competitiva, saludable y atractiva N de campaas culturales establecidas.


para todos.

Error N 4: Seleccionar indicadores no verificables


Los indicadores, aun cuando estn formalmente bien construidos, no son verificables debido a:

La fuente de verificacin no existe.


La fuente est desactualizada.
La fuente no est agregada al nivel requerido.
RESULTADOS

INDICADORES

Contribuir al desarrollo rural con equidad de gnero.

Satisfaccin de las mujeres que habitan en mbitos


rurales.

Contribuir a la mejora de la calidad ambiental

Satisfaccin de las personas por reduccin de la


contaminacin.

Mejorar las oportunidades de desarrollo de la poblacin


pobre y excluida.

Porcentaje de poblacin que se siente excluida

Error N 5: Confusin entre indicadores y objetivos


El indicador est redactado bajo la forma de objetivo; es decir, como cambio esperado en la situacin de los
beneficiarios del proyecto, mas no en forma de una proposicin mensurable.

RESULTADOS

INDICADORES

Fortalecimiento de capacidades de grupos organizados


de mujeres.

Los grupos organizados de mujeres inician negocios


rurales sostenibles.

Mejoramiento de las condiciones urbano ambientales.

Las familias mejoran sus condiciones ambientales.

53

Mejorar la calidad del agua.

Aumenta el porcentaje de familias que accede a agua


potable de calidad.

Error N 6: Confusin entre indicadores y actividades


Los indicadores no son actividades ni componentes; son nmeros que permiten medir logros a los distintos
niveles de la columna de objetivos.

RESULTADOS

INDICADORES

Estudios para conocer la variabilidad genotpica y


fenotpica del velln de rebaos de alpaca.

A los 12 meses se tendr la evaluacin de la calidad


del velln de los rebaos de alpacas.

A los 12 meses se tendr una identificacin


preliminar de reproductores con vellones de
calidad.
A los 32 meses se evaluar los resultados del efecto
gentico de los padres reproductores seleccionados,
en su progenie.
A los 36 meses se verificar la calidad del velln de
las cras con las tcnicas evaluadas.

Error N 7: Confusin entre indicadores y metas


Es mejor separar los indicadores de las metas, para establecer separadamente la lnea de base y la tendencia.

RESULTADOS

INDICADORES

Los productores incrementan la productividad en


crcuma.

Incrementar el rendimiento de la tierra a 10 TM/ha en


02 aos.

Promocin de empleos dignos

Aumento de 1491 empleos dignos en 4 aos

Formacin integral de lderes populares

Capacitacin de 400 lderes para el ao 2014

Error N 8: Repeticin de indicadores


Este error hace referencia a la utilizacin de un mismo indicador en dos niveles distintos.

54

COMPONENTES

INDICADORES

RESULTADOS
Propsito

Consecucin de la seguridad
jurdica de los predios individuales
y territorios de las comunidades
campesinas y nativas.

N de expedientes de predios
individuales y de comunidades
campesinas y nativas inscritos en
SUNARP.
N de reas naturales protegidas
demarcadas

Componentes

Titulacin y registro de predios


rurales individuales y de
comunidades campesinas y nativas
Promocin de la proteccin de las
reas naturales protegidas y
culturalmente importantes,
adyacentes a las zonas de titulacin.

N de expedientes de predios
individuales y de comunidades
campesinas y nativas inscritos en
SUNARP.
N de reas naturales protegidas
demarcadas.

Error N 9: Fusin de indicadores


Especialmente en los indicadores de efecto (propsito) se comete el error consistente en fusionar dentro de una
misma frase varios indicadores distintos e independientes.

RESULTADOS

COMPONENTES

INDICADORES

Componentes

Titulacin y registro de predios rurales N de expedientes de predios


individuales y de comunidades
individuales y de comunidades
campesinas y nativas
campesinas y nativas inscritos en
SUNARP y N de reas naturales
protegidas que han sido demarcadas.

Componentes

Promocin del empleo juvenil

N de jvenes que se insertan al


mercado laboral y N de jvenes
capacitados en emprendimiento de
negocios.

Error N 10: Elevado nmero de indicadores


Consiste en consignar un nmero exagerado de indicadores para medir una determinada variable. Este hecho
determina un alto costo de las acciones de monitoreo y evaluacin, sin que necesariamente mejore la
efectividad de las evaluaciones. Esta observacin es aplicable sobre todo a los indicadores de producto
(componentes), en los que se abunda en indicadores en parte debido a su confusin con las actividades del
proyecto.
RESULTADOS

INDICADORES

55

Promover la conservacin y el aprovechamiento


sostenible y competitivo de los camlidos
sudamericanos y sus ecosistemas

Poblacin de vicuas.
Poblacin de alpacas.
Volumen de fibra de vicua comercializada.
Titulares que implementan planes de manejo.
Productores formalizados.
Propuestas concertadas e implementadas.
Proporcin de mujeres que participan en cargos directivos en
organizaciones de base para el manejo de camlidos
sudamericanos.

Mejoramiento de la salud familiar y comunal

Zonas capacitadas en mejoramiento de sus niveles


nutricionales
Zonas que muestran reduccin en la tasa de morbilidad
Zonas que muestran reduccin en la tasa de mortalidad
Zonas que reducen sus ndices de violencia familiar.

Desarrollo de capacidades, RRHH y logstica

N de personal pertinente capacitado


N de adquisiciones de equipamiento
N de compaas y/o cursos, talleres
N de instituciones de gestin administrativa y logstica
reestructuradas.

56

Captulo 4. Elaboracin de lneas de base

La lnea de base es un elemento clave del sistema de monitoreo y evaluacin. Supone la


identificacin de las variables clave del proyecto y su expresin en un conjunto de
indicadores. Los indicadores son informacin utilizada en las acciones de monitoreo del
logro de los objetivos de un proyecto. La comparacin de las metas logradas con los
valores de la lnea de base permite evaluar los cambios generados por el proyecto. El
proceso de formulacin de lneas de base debe desarrollarse considerando los
indicadores que han sido seleccionados en la etapa de pre inversin y que se encuentran
consignados en el marco lgico del proyecto. Sin embargo, al mismo tiempo, la
elaboracin de lneas de base debe tener en consideracin aspectos operacionales, como
la disponibilidad de informacin y el costo de los procesos de diseo de los instrumentos
de medicin y de recopilacin de la informacin.

4.1 Concepto de lnea de base


Un Estudio de Lnea de Base (ELB, en adelante) es un estudio de carcter principalmente descriptivo
realizado con la finalidad de describir la situacin inicial de la poblacin objetivo de un proyecto y del
contexto pertinente, a efectos de que esta informacin pueda compararse con mediciones posteriores
y, de este modo, pueda cuantificarse la magnitud de los cambios obtenidos y, en general, evaluar el
grado de efectividad del proyecto. Siendo as, un ELB representa una investigacin dirigida a obtener
los referentes bsicos de la evaluabilidad del proyecto, as como un instrumento para mejorar los
procesos de gestin del conocimiento y toma de decisiones.
Una lnea de base, esencialmente, est constituida por los valores de un conjunto de indicadores
directamente relacionados a las variables clave de un proyecto. Por lo tanto, representan la primera
evaluacin de la situacin de la poblacin beneficiaria o, extensivamente, de los beneficios privados y
sociales que conforman la razn de ser del proyecto. La contraparte de una lnea de base es la lnea
de salida, que muestra el valor de los mismos indicadores luego de concluida la intervencin. La
comparacin de la lnea de base con la lnea de salida es la base para la evaluacin de un proyecto.
El objeto especco de un ELB es determinar la situacin inicial de los indicadores de efecto e impacto
del proyecto, levantando su primer valor mediante tcnicas estadsticas y utilizando fuentes primarias y
secundarias de informacin. Adems, los ELB deben mostrar evidencias cualitativas de la situacin de
la poblacin objetivo al inicio de la intervencin, recogidas a travs de entrevistas, talleres, grupos
focales y cualquier otro tipo de tcnicas cualitativas y participativas de recopilacin de informacin.
Para garantizar una ejecucin exitosa de los proyectos es necesario comprender claramente el
problema que se quiere abordar. El anlisis exhaustivo de los factores claves que influyen en un
problema complementa la formulacin de datos de la lnea de base y la determinacin de metas. Para
que la informacin sea lo ms precisa y objetiva posible, y se superen las limitaciones usuales de los
anlisis descriptivos, se utilizan indicadores de desempeo. Desde esta perspectiva, los indicadores
utilizados en el contexto de una intervencin, tienen dos aspectos: lnea de base y lnea de salida, valor
actual y valor futuro deseado, situacin previa y situacin posterior.
57

La lnea de base es la situacin anterior a la intervencin, por lo que constituye el punto de


partida en los procesos de seguimiento y evaluacin.
La lnea de salida es la situacin que se prev se lograr al final del periodo de ejecucin del
plan estratgico. Es, en cierto modo, la situacin posterior a la gestin pblica.

La lnea de base de un proyecto debe brindar informacin sobre los aspectos siguientes:

Situacin inicial de los indicadores de efecto e impacto del proyecto.


Dinmica del contexto y su relacin con la poblacin objetivo.
Factores de riesgo no controlables que afectan el impacto (supuestos que se encuentran en la
matriz del marco lgico), a fin de capitalizar las oportunidades del entorno o en su defecto
denir estrategias para aminorar y/o frenar sus posibles inuencias negativas.

En sntesis, la idea fundamental a tener en cuenta es que los ELB son muy acotados, pues slo
recogen informacin que pueda ser comparada posteriormente con los resultados del proyecto, para
determinar el antes y el despus. Como se sabe, un principio inherente en la evaluacin es la
posibilidad de establecer comparaciones, disponiendo de valores y valoraciones iniciales respecto a los
indicadores de evaluacin. Por ello, la informacin al respecto debe estar estrechamente vinculada a
los indicadores de efecto e impacto del proyecto, puesto que el mismo anlisis ha de repetirse en la
evaluacin intermedia y evaluacin final.

4.2 Estudio transversal y lnea de base


Los estudios exploratorios, tipo genrico de investigacin en la que se enmarca un ELB, establecen,
por lo general, modelos basados en hiptesis, las cuales en el caso de un proyecto se encuentra
explcita en el marco lgico del proyecto: hiptesis sobre los cambios que tendrn lugar en la poblacin
beneficiaria, como consecuencia de la ejecucin de las actividades contempladas en cada
componente, bajo ciertas condiciones del entorno. Por otra parte, los estudios exploratorios se
subdividen en dos tipos bsicos: estudios longitudinales y estudios transversales. Estos ltimos,
tambin conocidos como estudios cross-section, entre los que se ubican los ELB, ofrecen una
instantnea o fotografa del fenmeno bajo estudio; mientras que los estudios longitudinales tratan de
mostrar una historia o pelcula del problema en cuestin.
El estudio longitudinal es aquel que, mediante mediciones repetidas de un mismo fenmeno, tiene
como finalidad mostrar la evolucin en el comportamiento de las variables investigadas. Puede
basarse, aunque no necesariamente, en los datos de un panel (muestra permanente de individuos o
entidades de los que se obtienen datos de forma continua, a intervalos de tiempo regulares), o bien
utilizar en cada ocasin que se repita el estudio los datos de muestras distintas en cuanto a su
composicin, pero siempre representativas de la poblacin a investigar. Los estudios de intencin de
voto son ejemplos de estudios longitudinales en los que la muestra utilizada es distinta en cada
ocasin.
El estudio transversal, tambin denominado estudio de seccin cruzada, proporciona una instantnea
de las variables de inters y sus relaciones en un momento dado. Se divide en dos clases: estudios en
profundidad y encuestas.

58

El estudio en profundidad es el que trata de conseguir el conocimiento integral del fenmeno estudiado.
Se denomina tambin investigacin cualitativa. Los estudios en profundidad se basan en pequeas
muestras. Para obtener los datos utilizan formularios poco estructurados y flexibles, con preguntas
abiertas y entrevistas de larga duracin (ms de media hora). No persiguen la cuantificacin de las
respuestas, sino obtener ideas y una mejor comprensin del fenmeno a investigar (Parasuraman,
1991). Utilizan fundamentalmente tcnicas psicolgicas: entrevistas en profundidad, reuniones de
grupo, tcnicas proyectivas, de asociacin, frases incompletas, etc.
La encuesta constituye un mtodo muy habitual de obtener informacin en investigacin social y de
mercados. Se basa, por lo general, en grandes muestras representativas de la poblacin objeto de
estudio. Los datos se obtienen mediante comunicacin, a travs de entrevista personal, por correo
(ordinario o electrnico), por telfono, fax, Internet, etc., y empleando un cuestionario. Se denomina
tambin investigacin cuantitativa, porque se utilizan tcnicas estadsticas para analizar los datos.

4.3 Marco lgico y evaluacin


Tomando como punto de partida el marco lgico de un proyecto, el propsito y dems elementos de un
proyectos que pueden ser visualizados y conceptualizados en forma interrelacionada. As tenemos
que:
Los resultados se encuentran localizados en las filas del propsito y fin del marco lgico;
Los resultados tambin se encuentran, en parte, localizados en la fila correspondiente a los
componentes del marco lgico. Se refieren a los productos entregados por el proyecto a la
poblacin beneficiaria.
Finalmente, los procesos estn localizados en las actividades del marco lgico, ya que se
refieren al uso de insumos para la realizacin de actividades generadoras de los productos.

Grfico 3.1 Marco lgico y evaluacin

59

Fin
Contribuir a la reduccin del incumplimiento tributario
y el fortalecimiento de la institucionalidad de la Sunat.

Propsito

Resultados

Facilitar la validacin, en tiempo real, de documentos sujetos a control


y fiscalizacin en los puestos de control a nivel nacional.

Productos
1. Acceso a redes de comunicacin.
2. Acceso a equipos mviles.
3. Acceso a sistemas de control integrado.
4. Implementacin de sistema de control mediante video.
5. Desarrollo de normas y procedimientos.
6. Implementacin de programa de entrenamiento.

Procesos

Actividades
1.1 Interconexin de puestos de control.
1.2 Mecanismos de continuidad del servicio en puestos de control.
1.3 Implementacin de redes wifi/wimax.
2.1 Implementacin de equipos mviles en puestos de control.
3.1 Desarrollo de sistema de control integrado.
4.1 Implementacin de solucin de cmaras IP.
5.1 Normas y procedimientos de operacin de la solucin.
6.1 Entrenamiento.

Las actividades, sin embargo, estn asociadas a los componentes y pueden conformar el referente
para la evaluacin en la etapa de ejecucin de un proyecto.
La lnea de base es un elemento clave del sistema de monitoreo y evaluacin. Supone la identificacin
de una serie de variables clave y su organizacin en un conjunto de indicadores. Los indicadores son
informacin utilizada por los mecanismos de control para monitorear y ajustar las acciones dirigidas al
logro de determinados objetivos, en el marco de una intervencin o sistema dado. La comparacin de
las metas logradas con los valores de la lnea de base permite evaluar los cambios generados por el
proyecto.
Evaluar es, en efecto, comparar los resultados planeados con los resultados efectivamente logrados.
En general, la evaluacin es la disciplina que se ocupa de la comparacin de los resultados de un
proyecto con las metas que se propuso alcanzar y que, por ende, mide hasta qu punto un proyecto
alcanza ciertos objetivos. En esta definicin hay dos tipos de riesgos:
En primer lugar, podra existir una sobreestimacin de las metas, en cuyo caso,
independientemente de la calidad del diseo y de la implementacin, se consideraran como
deficientes aquellos proyectos que no alcancen dichas metas, an cuando desde una
perspectiva realista, pudieran haber sido considerados exitosos.
Tambin existe el riesgo contrario: la subestimacin de las metas. En este caso, proyectos mal
concebidos y ejecutados, podran tener una evaluacin aparentemente positiva, debido a que
sus formuladores, cautos en el momento de plantearse las metas, situaron stas en un nivel
ostensiblemente bajo.
Cabe destacar el hecho que las evaluaciones son tiles siempre que los resultados que generen
aporten valor agregado para las entidades ejecutoras, en trminos de lecciones aprendidas que
60

puedan ser incorporadas en el diseo de futuras intervenciones. En el contexto del enfoque del marco
lgico y como ya ha sido sealado se pueden establecer hasta tres tipos de evaluacin: evaluacin de
procesos (monitoreo), evaluacin de resultados (o simplemente evaluacin) y evaluacin de impacto.
Cabe destacar que estos tres tipos de evaluacin tienen su razn de ser en el hecho que, por lo
general, cuando se evala un proyecto se busca responder a tres preguntas fundamentales:

4. Cmo est funcionando el proyecto?


5. Se logr o no el cambio deseado?
6. Si se logr el cambio, en qu medida ste se puede atribuir al proyecto?

Evaluacin de procesos. La evaluacin de procesos o monitoreo nos permite conocer a fondo la


dinmica de implementacin del proyecto. Se enfoca ntegramente en la implementacin de las
actividades del proyecto. Este tipo de evaluacin no investiga cun eficaces fueron estas actividades
en producir resultados. Por lo tanto, la gran utilidad de este tipo de evaluacin es identificar mientras
el proyecto est es plena marcha - los aspectos exitosos para replicarlos y los aspectos deficientes
para mejorarlos. Efectuado oportunamente, la evaluacin de procesos permite realizar modificaciones
en la ejecucin de actividades con base en los hallazgos, incrementando as la probabilidad de que el
proyecto logre sus objetivos.
Evaluacin de resultados. La evaluacin de resultados busca determinar el grado de logro del
resultado deseado en la poblacin objetivo. Al evaluar los resultados de un proyecto, a fin de
determinar si el diseo y la gerencia del mismo fueron adecuados, se pone nfasis en cinco aspectos
importantes:

Pertinencia. Grado en el cual el objetivo del proyecto es consistente con las prioridades de
desarrollo de la poblacin objetivo y las polticas de la entidad ejecutora y el organismo donante
o financiador.
Eficacia. Grado en el cual se logran los objetivos especficos y el propsito del proyecto.
Eficiencia. Anlisis de los resultados con relacin al costo; es decir un anlisis de la
transformacin de los insumos en producto mediante la realizacin de determinadas
actividades.
Impacto. Valoracin socioeconmica global, incluyendo los efectos positivos y negativos, tanto
aquellos que son deseados y estaban previstos, como los no previstos y no deseados.
Sostenibilidad. Apreciacin de la capacidad para mantener los impactos positivos del proyecto
por un largo periodo de tiempo. Anlisis sobre si el efecto global en trminos, por ejemplo, de
empleo e ingresos es positivo tambin en el largo plazo.

Estos aspectos estn estrechamente relacionados al enfoque del marco lgico. As, la pertinencia
alude a la relacin del propsito con las prioridades de desarrollo; la eficacia a la relacin entre los
productos y el propsito; la eficiencia es una comparacin de los insumos con los productos; el
impacto establece relaciones entre las variables controlables por el proyecto y el fin; y, por ltimo, la
sostenibilidad analiza la interaccin entre el fin y los supuestos al mismo nivel.

61

Evaluacin de impacto. Las evaluaciones de impacto permiten determinar con mayor certeza la
relacin causa-efecto de un proyecto dado y sus resultados en la poblacin beneficiaria. Por lo general,
la metodologa de evaluacin consiste en la construccin de un escenario contrafactual, a travs del
cual se compara la situacin con proyecto versus la situacin sin proyecto y, de este modo, se estima
tanto la magnitud de los cambios como la proporcin de dichos cambios atribuible al proyecto. El
escenario contrafactual se puede construir usando diversas metodologas que se clasifican en dos
categoras generales: diseos experimentales y no experimentales. Tambin se pueden usar mtodos
cualitativos y participativos para evaluar el impacto. Estas tcnicas con frecuencia proporcionan
informacin decisiva sobre las perspectivas de los beneficiarios, el valor que los proyectos tienen para
ellos, los procesos que pueden haber afectado los resultados y una interpretacin ms profunda de los
resultados observados en el anlisis cuantitativo.

4.4 Procedimiento general


Un ELB se realiza, por lo general, en diez pasos, desde la determinacin del mbito de estudio hasta la
redaccin del informe final. Estos pasos, sin embargo, estn enmarcados en tres procesos amplios: la
determinacin del marco muestral, la especificacin de las variables de estudio y generacin, almacenamiento
y anlisis de los datos. Una lnea de base, esencialmente, est constituida por los valores de un conjunto de
indicadores directamente relacionados a las variables clave de un proyecto. Por lo tanto, representan la primera
evaluacin de la situacin de la poblacin beneficiaria o, extensivamente, de los beneficios privados y sociales
que conforman la razn de ser del proyecto. La contraparte de una lnea de base es la lnea de salida, que
muestra el valor de los mismos indicadores luego de concluida la intervencin. La comparacin de la lnea de
base con la lnea de salida es la base para la evaluacin de un proyecto.
Cuadro 7.1 Pasos de un estudio de lnea de base

1.

Determinacin del mbito de estudio.

Determinacin de los objetivos del estudio.

Seleccin de variables e indicadores del estudio.

Determinacin del marco muestral.

Diseo del cuestionario.

Prueba piloto del cuestionario.

Realizacin del trabajo de campo.

Construccin de la base de datos.

Anlisis de datos.

10

Redaccin del informe final.

Elaboracin propia.

Paso 1: Determinacin del mbito de estudio

62

La determinacin del mbito del estudio implica precisar la poblacin objetivo del proyecto. En el contexto de
un estudio de lnea de base, debe entenderse por poblacin al conjunto de todos los casos que concuerdan con
una serie de especificaciones. La delimitacin de la poblacin implica determinar la unidad de anlisis, es
decir, el grupo de personas, instituciones u objetos a ser evaluados, lo cual depende del objetivo de la
intervencin. La caracterizacin de la poblacin objetivo implica la descripcin de los siguientes elementos:
caractersticas demogrficas y sociales, caractersticas econmicas y productivas, caractersticas tecnolgicas y
caracterstica histrico - culturales. La caracterizacin de la poblacin objetivo de la intervencin se efecta
mayormente con base en informacin obtenida a travs de fuentes secundarias, tales como revisin
bibliogrfica, consulta de documentos oficiales y entrevistas a tcnicos y expertos.

Paso 2: Determinacin de los objetivos del estudio


Como se ha sealado, el objetivo general de un ELB es determinar la situacin inicial de las unidades
beneficiarias antes de la ejecucin de un proyecto, a travs de la determinacin de los valores de ciertas
variables clave resumidas a travs de los indicadores que usualmente se encuentran consignados en el marco
lgico del estudio de preinversin. Debe destacarse el hecho que mientras en el marco lgico se encuentran los
nombres de los indicadores, en el ELB debe establecerse los valores de los mismos, a cuyo efecto, en el caso
de los indicadores de fuente primaria, se debe identificar las variables, sus respectivas definiciones operativas,
unidades de medida, preguntas y categoras de agrupamiento de las respuestas en funcin de la escalas de
medicin establecidas.
Adems, los ELB deben mostrar evidencias cualitativas de la situacin de la poblacin objetivo al inicio de la
intervencin, recogidas a travs de entrevistas, talleres, grupos focales y cualquier otro tipo de tcnicas
cualitativas y participativas de recopilacin de informacin.
Los objetivos especficos de un ELB en un proyecto concreto estn en funcin de dos factores: los objetivos
del proyecto bajo evaluacin y el tipo de evaluacin adoptado. El diseo de un ELB tendr determinadas
caractersticas en el marco de una evaluacin de impacto que en el caso de una evaluacin de resultados
simple. Por lo general, en una evaluacin de resultados simple basta con recabar informacin de las variables
relevantes sobre las unidades beneficiarias. En cambio, en una evaluacin de impacto suele ser necesario en
el contexto de un diseo cuasi experimental- la recopilacin de informacin tanto de las unidades beneficiarias
como de las unidades no beneficiarias que acten como grupo de control.

Paso 3: Seleccin de las variables e indicadores del estudio


La seleccin de indicadores debe considerar la idoneidad del indicador respecto de los objetivos del estudio,
as como la viabilidad de obtener la informacin de base necesaria, bien sea de fuentes propias o secundarias.
Para determinar los indicadores que en cada caso especfico sern utilizados, se recomienda el procedimiento
siguiente:

Identificacin de las variables relacionadas con los objetivos de la intervencin.


Seleccin de los indicadores que permiten operativizar la medicin de las diversas variables.
Definir conceptualmente los indicadores seleccionados.
Definicin operativa de los indicadores, especificando la frmula de clculo en el caso de los indicadores
compuestos y las unidades de medida en el caso de los indicadores simples.
Identificacin de las variables especficas involucradas en los indicadores compuestos. (En el caso de los
indicadores simples esto no es necesario, ya que, por definicin, se trata de indicadores univariables).
Establecimiento del nivel de medicin de cada variable especfica. Existen cuatro niveles de medicin
ampliamente conocidos: nominal, ordinal, por actividades, y de razn.

63

Las variables claves estn relacionadas con los objetivos de la intervencin. Para ello, los objetivos deben ser
claros, especficos y mensurables. Cuantificar un objetivo consiste en asociarle patrones que permitan hacerlos
verificables.

Paso 4: Determinacin del marco muestral


Para la recopilacin de informacin debe tomarse en consideracin el hecho de que, en principio, existen dos
tipos generales de estrategias de muestreo: muestreo probabilstico y no probabilstico o dirigido. El muestreo
probabilstico es un tipo de muestreo en el que se conoce la probabilidad de seleccionar un miembro individual
de la poblacin. El muestreo dirigido es aquel en el que se desconoce la probabilidad de seleccionar cualquier
miembro individual de la poblacin.
Muestra probabilstica

Muestra dirigida

Subgrupo de la poblacin en el que todos los Subgrupo de la poblacin en la que la eleccin


elementos de sta tienen la misma de los elementos no depende de la probabilidad
posibilidad de ser elegidos.
sino de las caractersticas de la sistematizacin.

Cuando una encuesta se realiza slo a una parte de la poblacin, se trata de un estudio muestral. Una muestra
es un conjunto de elementos de una poblacin o universo del que se quiere obtener informacin. A efectos de
que la informacin obtenida de una muestra sea vlida, sta debe ser representativa de la poblacin; es decir,
que en su estructura se reproduzcan exactamente las caractersticas y comportamientos de la poblacin de la
que ha sido obtenida. Aunque la precisin o exactitud de los datos obtenidos a travs de una muestra es menor
que en un estudio censal, las ventajas de coste y tiempo superan con creces tal inconveniente.
La unidad muestral es el elemento de la poblacin de la cual se obtienen los datos. Pueden ser individuos,
hogares, tiendas, empresas u objetos (productos, marcas, modelos, etc.). La muestra puede ser seleccionada por
procedimientos aleatorios o no aleatorios. En el primer caso, se trata de un muestreo probabilstico, mientras
que en el segundo es un muestreo no probabilstico. En un muestreo probabilstico todos los elementos de la
poblacin tienen igual oportunidad de ser seleccionados para componer la muestra. En un muestreo no
probabilstico, en cambio, la seleccin de los elementos de la muestra se realiza, total o en parte, segn
criterios fijados por el investigador.

Paso 5: Diseo del cuestionario


El cuestionario es el formulario que contiene las preguntas o variables de la investigacin y en el que se
registran las respuestas de los encuestados. El diseo del cuestionario no es sencillo y presenta ciertas
dificultades. Si bien preguntar es relativamente fcil, hacer buenas preguntas es un arte que requiere
creatividad y experiencia. Para un diseo apropiado del cuestionario es fundamental cumplir tres requisitos
bsicos:
1. Definir correctamente el problema a investigar.
2. Formular de forma precisa las hiptesis.
3. Especificar adecuadamente las variables y las escalas de medida.

64

Un cuestionario es un conjunto articulado y coherente de preguntas redactadas en un documento para obtener


la informacin necesaria que permita realizar la investigacin que la requiere. Desempea funciones
esenciales, tales como las siguientes:

Traslada el objetivo de la investigacin a preguntas concretas que sern respondidas por las personas
encuestadas.
Homogeniza las obtencin de informacin, ya que todos los encuestados responden a las mismas
preguntas del cuestionario.
Si su diseo, estructura, ordenacin y aspecto es acertado, el cuestionario contribuye eficazmente a
que las personas proporcionen informacin
Ayuda a que el tratamiento de datos se haga ms rpido, porque facilita las tareas de codificacin de
datos, pues figuran en el propio cuestionario, y su grabacin en los equipos informticos,
especialmente cuando se trata de cuestionarios que se pueden leer con un lector ptico.

Las preguntas que contiene un cuestionario estn determinadas por los objetivos de la investigacin que se
desea realizar, que pueden ser medir comportamientos, actitudes u opiniones. Una investigacin se disea
globalmente. Se fijan unos objetivos de conocimiento, los cuales determinan qu informacin debe recogerse y
cmo va a medirse. Paralelamente, debe seleccionarse la tcnica idnea para tratar la informacin. Cada tipo
de datos exige una tcnica de anlisis, y cada estudio necesita aplicar la tcnica idnea.

Paso 6: Prueba piloto del cuestionario


Una vez que se ha elaborado el cuestionario conviene hacer una valoracin del mismo. Para ello debe darse
respuesta a las siguientes preguntas de esta lista de comprobacin.

Responde el cuestionario a los objetivos de la investigacin?


Son necesarias todas las preguntas?
Podr el encuestado contestar a todas las preguntas?
Querrn los encuestados contestar a todas las preguntas?
Es fluido?
Es de una extensin razonable?
La secuencia de preguntas es correcta?
Se han incluido transiciones e introducciones?

Una vez que se haya diseado el cuestionario, ste debe ser aplicado a un grupo de personas para efectuar una
prueba. En una primera confeccin, es posible que no se acierte con aspectos semnticos en las preguntas. Es
decir, la redaccin del cuestionario puede no ser del todo correcta o que no se comprenda bien. Es posible,
tambin, que algunas preguntas importantes no se hayan incluido, o no estn bien matizadas, o que haya un
exceso de preguntas y algunas no sean significativas.

Los defectos de contenido y/o forma que pudieran aparecer en el cuestionario se detectan mediante pruebas
piloto, dirigidas a pequeos grupos. Una vez subsanados los errores o perfeccionado el cuestionario se podr
dirigir a la totalidad de la muestra. De esta manera se evita tener que repetir la investigacin por haber
difundido un cuestionario confuso o errneo.

En la prueba piloto se mide la consistencia interna del cuestionario, a travs del coeficiente a de Cronbach.
Las pruebas piloto se repiten las veces necesarias hasta conseguir la mayor validez del cuestionario.
65

Paso 7: Realizacin del trabajo de campo


El conjunto de actividades realizadas para la recopilacin efectiva de los datos recibe la denominacin de
trabajo de campo. Incluye la supervisin de los cuestionarios y el control de los errores de la falta de
respuesta. El trabajo de recoleccin de datos pocas veces es realizado por la persona que disea la
investigacin. Sin embargo, la etapa de recoleccin de datos es crucial, porque un estudio no es mejor que los
datos recolectados en campo. Por tal razn, se debe seleccionar personas capaces y confiar en ellos para
reunir los datos. Una irona de la investigacin de campo es que individuos con alta educacin y capacitacin
disean la investigacin, pero cuando se realizan las encuestas las personas que recolectan los datos por lo
comn tienen poca capacitacin o experiencia. Al saber que la investigacin no es mejor que los datos
recolectados en el campo, los coordinadores de la investigacin deben concentrarse en seleccionar
cuidadosamente a los trabajadores de campo.

Gran parte del trabajo de campo lo realizan proveedores de investigacin que se especializan en la
recoleccin de datos. Cuando una segunda parte es subcontratada, la tarea del diseador del estudio no es slo
la de contratar un proveedor de investigacin, sino la de construir controles de supervisin sobre el servicio
de campo. En algunos casos se usa una tercera firma. Si el administrador de la investigacin contrata a un
entrevistador interno o selecciona un servicio de entrevistas en el campo, idealmente los trabajadores de
campo deben satisfacer ciertos requisitos. Aun cuando los requerimientos del puesto para diferentes tipos de
encuesta varan, por norma los entrevistadores deben gozar de buena salud, ser extrovertidos y de
presentacin agradable, bien arreglados y vestidos. Las personas que les gusta hablar con desconocidos casi
siempre son los mejores entrevistadores. Una parte esencial de la entrevista es entablar una buena relacin
con el participante. Una personalidad abierta ayuda a los entrevistadores a garantizar la cooperacin del
participante. Los prejuicios del entrevistado pueden presentarse si el vestido o apariencia fsica del
entrevistador de campo es poco atractiva o descuidada. Una excepcin a esto sera la investigacin
etnogrfica, en la cual el entrevistador debe vestirse de acuerdo con el grupo que se estudia.

El objetivo de la capacitacin es asegurar que el instrumento de recoleccin de datos se administre de manera


uniforme por todos los trabajadores de campo. La meta de estas sesiones es que cada participante sea dotado
de informacin comn. Si los datos se obtienen de manera uniforme por todo los que participan, la
participacin habr tenido xito.

Paso 8: Construccin de la base de datos


La construccin de la base de datos es la fase posterior a la recopilacin de los datos en campo. Por lo
general, supone un tratamiento informtico, incluyendo su almacenamiento en algn tipo de software, para su
posterior tabulacin y anlisis. La base de datos constituye la plataforma sobre la cual el investigador realizar
los anlisis que le permitirn convertir los datos en informacin relevante para la toma de decisiones. La
construccin de una base de datos requiere tpicamente de tres tipos de actividades: registro, edicin y
codificacin de datos.

66

La entrada y grabacin de los datos es el registro de los cdigos y valores de las variables en un
sistema informtico para su posterior tratamiento y anlisis. Se entiende por dato un valor especfico
de una variable. Por ejemplo, 35 aos es un dato de la variable edad.
La edicin de datos es la inspeccin de las respuestas de los cuestionarios, con el fin de asegurar que
estn suficientemente contestados y que las respuestas sean consistentes. De ser necesario, se
efectuarn las correcciones oportunas o se rechazarn los cuestionarios mal o insuficientemente
contestados.
La codificacin de los datos consiste en asignar cdigos numricos a las respuestas dadas a un
cuestionario para poder efectuar el tratamiento estadstico de los datos. En las preguntas cerradas los
cdigos estn preestablecidos en el cuestionario, pero en las preguntas abiertas (variables tipo texto)
deben asignarse cdigos a las respuestas obtenidas. Para ello debe procederse a agrupar las
respuestas obtenidas por su similitud, y asignarles un cdigo y su correspondiente significado en una
nueva variable categrica.

Los datos codificados se recopilan sistemticamente en un fichero o matriz de datos que permite el
tratamiento estadstico posterior. Cada fila del fichero recoge las respuestas o la informacin recogida en un
cuestionario. A cada pregunta o variable se le asigna una o ms columnas del fichero. La interseccin de la
fila i con la columna j recoger la respuesta codificada del individuo i a la pregunta asignada a la columna j.
Las primeras columnas se suelen reservar para la identificacin de la observacin o individuo.

Para el anlisis se debe definir la naturaleza de cada variable, cualitativa mtrica o textual. El fichero de
trabajo puede contener la siguiente informacin:

Variables cualitativas o categricas: gnero, situacin familiar, estado civil, etc.


Variables mtricas o cuantitativas: gasto en ocio, nmero de horas de trabajo, etc.
Variables textuales: identificado, respuestas a preguntas abiertas, comentarios del entrevistador.

Un registro de datos es el espacio de un fichero informtico ocupado por un conjunto de datos


correspondientes a una unidad de anlisis (un sujeto o un objeto). Un registro est formado por campos de
informacin. Por ejemplo, un registro puede contener el conjunto de datos representativos de las respuestas
dadas por un encuestado. Para las respuestas posibles a cada una de las preguntas o variables del cuestionario
se reserva un campo. Un campo es el espacio ocupado por el dato de una variable en un registro informtico.
Comnmente, en un fichero los registros de datos son las filas de la tabla y los campos estn representados
por las columnas.

Paso 9: Anlisis de datos


El aspecto culminante del proceso de construccin de una lnea de base es el anlisis de los datos obtenidos
en la etapa de recopilacin de informacin. En trminos generales, el objetivo del anlisis de datos es su
transformacin en informacin relevante 22 . En el contexto de un ELB una determinada informacin se
califica de relevante si sirve para medir las variables relacionadas a los efectos e impactos del proyecto. La
aplicacin de tcnicas estadsticas de anlisis de datos, especialmente las ms sofisticadas, ha tenido en los
ltimos aos un crecimiento muy importante en la investigacin social, especialmente por la mayor
22

Este aparatado se basa en el texto de Miguel Santesmases Mestre, Diseo y anlisis de encuestas en
investigacin social y de mercados. Editorial Pirmide, Madrid 2009.
67

disponibilidad y abaratamiento de los medios electrnicos de clculo y el desarrollo de paquetes de


programas estadsticos.

La informacin obtenida en el paso anterior se encuentra como datos recopilados en forma de cuestionarios,
guas de entrevistas con informes manuscritos de los temas predeterminados, listados de personas
encuestadas, etc. En este paso, toda esa informacin, fruto de la recopilacin de un amplio conjunto de
observaciones, se transforma en informacin organizada mediante el uso de la estadstica descriptiva, tanto en
lo que se refiere al anlisis de una sola variable, como la de las observaciones de las relaciones entre dos o
ms variables. En funcin del nmero de variables analizadas simultneamente, las tcnicas de anlisis de
datos pueden clasificarse en univariables, bivariables y multivariables, segn se analicen, respectivamente,
una sola variable, la relacin o dependencia entre dos variables y la relacin o interdependencia entre ms de
dos variables.

Al igual que los pasos anteriores, el anlisis de los datos requiere un trabajo de equipo para aclarar preguntas
y garantizar resultados oportunos y de calidad. Un primer problema que debe ser abordado se refiere a la
depuracin de los datos proveniente de fuentes primarias y secundarias. Existen diversas tcnicas de anlisis
cuantitativo basadas en mtodos estadstico, as como tambin existen muchas tcnicas para analizar datos
cualitativos. Particularmente en los estudios de lnea de base y evaluaciones de impacto, dos tcnicas son de
uso frecuente: anlisis de contenido y anlisis de casos.

El anlisis de contenido se usa para analizar datos obtenidos a travs de entrevistas, observaciones y
documentos. Sobre la base de un sistema de clasificacin de datos, la informacin debe ser organizada de
acuerdo con lo siguiente:

Las preguntas de evaluacin para las cuales se recopil la informacin.


La forma como ser usada la informacin.
La necesidad de realizar referencias cruzadas con la informacin.

De otro lado, el anlisis de casos se basa en estudios de detalle de un determinado grupo o individuo
relacionado con el contexto bajo evaluacin. El alto nivel de detalle obtenido puede proporcionar
informacin valiosa para evaluar la calidad de los procesos, resultados e impactos del proyecto. Los procesos
de recopilacin y anlisis de los datos se llevan a cabo en forma simultnea, puesto que los evaluadores
realizan observaciones mientras recopilan la informacin.

Paso 10: Redaccin del informe final


La redaccin del Informe del ELB es, obviamente, el paso final. Este documento, por lo general, incluye los
aspectos siguientes:

68

Resumen del proyecto bajo estudio.


Caracterizacin del mbito del proyecto,
Situacin de base en el rea de influencia del proyecto
Resumen de indicadores
Base de datos, incluyendo un diccionario de variables.
Pautas metodolgicas para el diseo de un sistema de monitoreo y evaluacin del desempeo.

Al redactar el informe final del estudio, debe tenerse en cuenta que la lnea de base de un proyecto debe
brindar informacin sobre los aspectos siguientes:

Situacin inicial de los indicadores de efecto e impacto del proyecto.


Dinmica del contexto y su relacin con la poblacin objetivo.
Factores de riesgo no controlables que afectan el impacto (supuestos que se encuentran en la matriz
del marco lgico), a fin de capitalizar las oportunidades del entorno o en su defecto denir estrategias
para aminorar y/o frenar posibles factores negativos.

En sntesis, la idea fundamental a tener en cuenta es que los ELB son muy acotados, pues slo recogen
informacin que pueda ser comparada posteriormente con los resultados del proyecto, para determinar el
antes y el despus. Como se sabe, un principio inherente en la evaluacin es la posibilidad de establecer
comparaciones, disponiendo de valores y valoraciones iniciales respecto a los indicadores de evaluacin. Por
ello, la informacin al respecto debe estar estrechamente vinculada a los indicadores de efecto e impacto del
proyecto, puesto que el mismo anlisis ha de repetirse en la evaluacin intermedia y evaluacin final.
Finalmente, cabe indicar que los informes de lnea de base se deben programar como parte de una estrategia
de difusin, que puede incluir, adems del informe tcnico propiamente dicho, la realizacin de
presentaciones ante diversos pblicos y la difusin en los medios de comunicacin de los resmenes
ejecutivos sobre los hallazgos de la evaluacin.

Cuadro 7.2 Pasos del estudio de lnea de base

1. Determinacin del
mbito de estudio

La determinacin del mbito del estudio implica precisar las unidades de anlisis, que pueden
ser sujetos u objetos. El tipo de unidades de anlisis depende del objetivo de la intervencin.

2. Determinacin de
los objetivos

Por lo general, el objetivo de un ELB es ofrecer una referencia slida para la medicin de los
cambios que se lograran gracias a la ejecucin del proyecto. Adems, los ELB deben mostrar
evidencias cualitativas de la situacin de la poblacin objetivo al inicio de la intervencin.

3. Seleccin de
variables e
indicadores

La seleccin de las variables y sus correspondientes indicadores debe considerar la capacidad


de estos para representar vlidamente los objetivos o resultados que se desean medir, as
como la viabilidad de obtener la informacin de base necesaria, bien sea de fuentes propias o
secundarias. Para ello, los objetivos deben ser claros, especficos y mensurables.

69

4. Determinacin del
marco muestral

Para la recopilacin de informacin debe tomarse en consideracin el hecho de que, en


principio, existen dos tipos generales de estrategias de muestreo: muestreo probabilstico y no
probabilstico o dirigido. Cuando una encuesta se realiza slo a una parte de la poblacin, se
trata de un estudio muestral. A efectos de que la informacin obtenida de una muestra sea
vlida, sta debe ser representativa de la poblacin.

5. Diseo del
cuestionario

El cuestionario es el formulario que contiene las preguntas o variables de la investigacin y en


el que se registran las respuestas de los encuestados. Las preguntas que contiene un
cuestionario estn determinadas por los objetivos de la investigacin que se desea realizar.

6. Prueba piloto del


cuestionario

Una vez que se ha elaborado el cuestionario conviene hacer una valoracin del mismo, para
ello, debe ser sometido a un grupo de personas para efectuar una prueba. Lo cual nos ayudar
a detectar los defectos de contenido y/o forma que pudieran aparecer en el cuestionario. Una
vez subsanados los errores o perfeccionado el cuestionario se podr dirigir a la totalidad de las
personas que se considere oportuno.

7. Realizacin del
trabajo de campo

El conjunto de actividades realizadas para la recopilacin efectiva de los datos recibe la


denominacin de trabajo de campo. Incluye la supervisin de los cuestionarios y el control de
los errores de la falta de respuesta.

8. Construccin de
la base de datos

La construccin de la base de datos, supone un tratamiento informtico, incluyendo su


almacenamiento en algn tipo de software, para su posterior tabulacin y anlisis. La base de
datos constituye la plataforma sobre la cual el investigador realiza los anlisis que le permitirn
convertir los datos en informacin relevante para la toma de decisiones.

9. Anlisis de datos

En trminos generales, el objetivo del anlisis de datos es su transformacin en informacin


organizada y relevante mediante el uso de estadstica descriptiva, tanto en lo que se refiere al
anlisis de una sola variable, como la de las observaciones de las relaciones entre dos o ms
variables.

10. Redaccin del


informe final

La redaccin del Informe del Estudio de Lnea de Base es, obviamente, el paso final. Los
informes de lnea de base se deben planificar como parte de una estrategia de difusin, que
puede incluir, adems del informe tcnico propiamente dicho, la realizacin de presentaciones
ante diversos pblicos y la difusin en los medios de comunicacin de los resmenes
ejecutivos.

Elaboracin propia.

4.5 Importancia del anlisis de datos


El aspecto culminante del proceso de construccin de una lnea de base es el anlisis de los datos
obtenidos en la etapa de recopilacin de informacin. En trminos generales, el objetivo del anlisis de
datos es su transformacin en informacin relevante23. En el contexto de un ELB una determinada
informacin se califica de relevante si sirve medir las variables relacionadas a los efectos e impactos
del proyecto. La aplicacin de tcnicas estadsticas de anlisis de datos, especialmente las ms
sofisticadas, ha tenido en los ltimos aos un crecimiento muy importante en la investigacin social,
especialmente por la mayor disponibilidad y abaratamiento de los medios electrnicos de clculo y el
desarrollo de paquetes de programas estadsticos.
En funcin del nmero de variables analizadas simultneamente, las tcnicas de anlisis de datos
pueden clasificarse en univariables, bivariables y multivariables, segn que analicen, respectivamente,
una sola variable, la relacin o dependencia entre dos variables y la relacin o interdependencia entre
ms de dos variables.
23

Este aparatado se basa en el texto de Miguel Santesmases Mestre, Diseo y anlisis de encuestas en
investigacin social y de mercados. Editorial Pirmide, Madrid 2009.
70

Anlisis estadstico univariable


El anlisis estadstico univariable incluye un conjunto de tcnicas que estudian la medida y el
comportamiento de una sola variable. Entre las tcnicas ms importantes destacan las siguientes:
Estadsticas bsicas:

Nmero de casos, suma, mximo, mnimo.


Promedios: media, mediana y moda.
Medidas de dispersin: rango, varianza y desviacin estndar.

Distribucin de frecuencias: tabulaciones simples.

Anlisis estadstico bivariable


El anlisis estadstico bivariable es el conjunto de tcnicas que estudian la relacin (de asociacin o de
dependencia) entre dos variables. Pueden considerarse, en algunos supuestos, como casos
especiales o simplificados de las tcnicas de anlisis multivariable. Entre las tcnicas ms importantes
destacan las siguientes:
a.
b.

c.
d.
e.
f.
g.
h.

Tabulaciones cruzadas. Anlisis de tablas de contingencia con prueba ji cuadrado


Tests t de medias:
De una muestra independiente.
De dos muestras independientes.
De dos muestras emparejadas.
Anlisis de la varianza.
Anlisis de la covarianza.
Correlacin entre rangos de Spearman.
Correlacin lineal.
Coeficiente alfa de Cronbach.
Anlisis de regresin simple (caso particular de la regresin mltiple, en el que hay una sola
variable independiente).

Anlisis estadstico multivariable


Consiste en el anlisis simultneo del comportamiento de ms de dos variables. Es un anlisis ms
completo, que permite un mejor acercamiento a la realidad de los fenmenos sociales. Por definicin,
tales fenmenos suelen ser complejos y no se limitan a un nmero reducido de dimensiones, sino que,
por el contrario, son multidimensionales, y su estudio precisa de herramientas adecuadas que no
supongan una simplificacin de la realidad. sta es la principal contribucin del anlisis multivariable a
la investigacin social, particularmente en la elaboracin de ELB.
Las tcnicas que se incluyen en el anlisis multivariable suelen clasificarse en dos grandes grupos,
segn analicen relaciones de dependencia o de interdependencia entre variables u objetos. En el
primer caso, el anlisis multivariable permite estudiar la medida o intensidad con que se da la
dependencia entre las variables y determina, por lo general, una relacin funcional. En el caso de
interdependencias, el anlisis multivariable estudia las interrelaciones entre todas las variables o
agrupa los sujetos u objetos por su similitud, de acuerdo con los valores mostrados por las variables
analizadas.

71

Una dependencia es una relacin o asociacin entre dos o ms variables en la que el comportamiento
o el valor de una o ms de ellas (variables dependientes, criterio o a explicar) es el efecto (depende)
del valor de otra u otras variables causales (independientes, predictoras o explicativas). Una relacin
de dependencia es, por ejemplo, la que se da entre el nmero de peridicos que se lee diariamente
(variable a explicar) y la edad, sexo y nivel de estudios del individuo (variables explicativas). El
comportamiento de la primera variable puede estar en funcin o depender (por esto se la denomina
variable dependiente) de las otras variables consideradas explicativas (identificadas como variables
independientes).
Las tcnicas estadsticas multivariables de anlisis de dependencias se subdividen, a su vez, en dos
grupos:

Tcnicas que analizan la relacin de dependencia entre una sola variable dependiente o a
explicar y mltiples independientes o explicativas (como en el ejemplo antes citado de relacin
entre el nmero de peridicos ledos diariamente y la edad, sexo y nivel de estudios del
individuo).
Tcnicas que analizan la relacin de dependencia entre mltiples variables dependientes y
mltiples variables independientes (como sera el caso, por ejemplo, de relacin entre el nivel
de utilizacin de varios medios de informacin alternativos -prensa, radio, televisin- y las
caractersticas socioeconmicas indicadas del lector -edad, sexo y estudios).

Dentro de las tcnicas de anlisis de interdependencias, se distinguen tambin dos grupos:

Aquellas que ponen el nfasis en la interrelacin entre las variables, como las tcnicas de
anlisis factorial y relacionadas.
Las que analizan la interrelacin entre los sujetos u objetos analizados, como las tcnicas de
cluster analysis o anlisis de grupos.

Las primeras pueden utilizarse, por ejemplo, en el estudio de actitudes. Las segundas, en estudios de
segmentacin, para determinar grupos homogneos.

72

Grfico 7.1. Mapa conceptual del estudio de lnea de base

Proyecto

Objetivos
del estudio
Variables
de estudio

Unidades
de anlisis

Puestos
de control

Recopilacin
de datos

Variables de fuente
primaria

Variables de fuente
secundaria

Variables
cuantitativas

Variables
cualitativas

Priorizacin
de poblacin

Diseo del
cuestionario

Estratificacin de
poblacin y cuoteo

Prueba piloto

Tamao y marco
muestral

Trabajo de campo
Base de datos
Indicadores
y anlisis
Redaccin
de Informe
73

Captulo 5. Evaluacin de Procesos


En el presente captulo se ofrece una definicin de la evaluacin de procesos,
comnmente conocida como monitoreo, as como el procedimiento recomendado para
su implementacin. Luego se exponen los principales criterios para la adopcin de
decisiones operativas respecto a la marcha del proyecto. Por lo general el monitoreo o
evaluacin de procesos toma como referencia bsica al plan operativo.

5.1

En qu consiste el monitoreo?

El monitoreo o evaluacin de procesos es una herramienta de gestin destinada a controlar el


avance de los proyectos en ejecucin, midiendo los resultados reales en funcin de los previstos 24.
El monitoreo es parte integrante de la ejecucin de proyectos y constituye una forma de control del
avance de los mismos, al mismo tiempo que proporciona informacin sistemtica, uniforme y
confiable.

En principio, se puede realizar un monitoreo a todo lo que figura en el plan operativo y en


el marco lgico del proyecto: fin, propsito, productos, actividades y recursos, expresados
a travs de sus respectivos indicadores y datos cualitativos. Sin embargo, lo usual es
realizar un control en la ejecucin de las actividades contempladas en cada uno de los
componentes del marco lgico del proyecto.
Una vez establecido, el monitoreo representa ahorro de tiempo y esfuerzo a la entidad ejecutora
facilitando el control y preparacin de los reportes correspondientes. No aumenta la complejidad
del proyecto, sino que permite hacerlos objeto de una gestin ms sistemtica y manejable. En
trminos generales, la gerencia del proyecto se beneficia del monitoreo en la medida en que este:

Proporciona informacin til para las entidades de control superior nacionales y los
organismos de financiacin externos;
Proporciona una base para la toma de decisiones sobre posibles cambios en la
programacin, ya que tal vez haya que reajustar la utilizacin de recursos, modificar la
escala de prioridades e introducir actividades nuevas.
Brinda mayores oportunidades para servir bien a la poblacin destinataria, porque el efecto
sobre la misma se analiza en forma reiterada, a lo largo de la ejecucin del proyecto.

El monitoreo tiene por objeto orientar la ejecucin de un proyecto hacia su finalidad y detectar
cualquier problema que haga probable que no logre los resultados previstos. Esta tarea supone un
seguimiento peridico del avance tcnico y los gastos financieros correspondientes, por medio del
cual se compara el desempeo y los resultados efectivos con los planes.

5.2

Monitoreo: principales pasos

En esta seccin se presenta ante el lector, en forma pormenorizada, un proceso tpico de monitoreo,
de un proyecto de inversin pblica en el sector agrario.

24

Los principales conceptos e instrumentos tratados en el presente captulo estn basados en el Manual de
Monitoreo de la Ejecucin de Proyectos (OPS, Abril, 1999)

74

A. Revisin del documento del proyecto


Los documentos de base para la organizacin del monitoreo son el estudio de preinversin y el
informe tcnico, vinculados a la declaratoria de viabilidad. Estos documentos contienen por lo
general, indicaciones respecto a las metas fsicas y financieras, modalidades de ejecucin de las
actividades y obligaciones de la entidad ejecutora sobre algn aspecto de la ejecucin del proyecto.
Por otra parte, un proyecto financiado por la comunidad internacional da lugar a la suscripcin de
un convenio especfico o un convenio marco, que rige las relaciones entre donante y donatario
(unidad ejecutora). El gerente del proyecto debe familiarizarse con ese convenio para asegurar el
cumplimiento de todas sus especificaciones. Los convenios de proyectos tienen clusulas especficas
en lo referente a las transferencias de los fondos, las estructuras para la ejecucin de proyectos, el
personal del proyecto, adquisiciones de insumos, relaciones con contrapartes nacionales,
participacin del donante en diferentes etapas, requisitos de presentacin de informes, etc. Estos
son todos elementos cruciales a ser considerados por el gerente del proyecto cuando se definen
planes de accin y cuando se monitorea su ejecucin.

B. Formulacin del plan operativo


Una vez aprobado el documento del proyecto se debe elaborar un plan operativo o programas de
metas fsicas y financieras que abarquen el perodo del proyecto en su totalidad. Esto significa que
hay que delinear las actividades requeridas para lograr los resultados esperados, indicando su
secuencia y definiendo las fechas en que deben alcanzarse los resultados indicados. Un plan
operativo simplificado y condensado se puede organizar de la siguiente manera:

Cuadro 6.1 Plan operativo de un proyecto: ejemplo


Resultados Esperados
01
02
03

01

02

03

Cronograma
E

Agua pura suministrada a aldeas de la


regin noroeste
Trabajadores de salud adiestrados
Comunidad informada acerca de
tcnicas de tratamiento del agua
ACTIVIDADES
Consultas con representantes
regionales y locales
Escoger lugares para pozos
Determinar tcnicas
Llamado a licitacin
Empresa contratista
Formular un programa de estudios
Preparar material de adiestramiento
Adiestrar a los instructores
Seleccionar participantes
Dictar cursos de adiestramiento
Evaluar los resultados del
adiestramiento
Evaluar las prcticas higinicas
para crear un nivel de referencia
bsico
Organizar talleres locales
Contratar instructores
Contratar representantes locales
Realizar talleres
75

Evaluar las prcticas higinicas


despus del adiestramiento

Plan operativo global


El plan operativo global del proyecto contiene, por definicin, las metas fsicas y financieras para el
conjunto del perodo de ejecucin. Al respecto, se suelen establecer sub-perodos anuales a fin de
especificar con mayor detalle las metas.

Planes operativos anuales


Con base en el plan operativo global hay que elaborar planes de trabajo anuales en los que se
especifiquen en mayor detalle la distribucin cronolgica de la ejecucin tcnica y los gastos
financieros conexos. Se debe establecer un calendario de actividades y un presupuesto relacionados
con los resultados esperados. En lo que respecta al primer ao, el plan debe ser pormenorizado y
concreto; luego, hacia fines de ese ao, se elabora un plan de trabajo ms concreto para el siguiente,
y as sucesivamente. Enmarcados en el plan de trabajo, cada ao es necesario definir los siguientes
aspectos:

Resultados esperados.
Actividades que debern realizarse.
Tareas que debern emprenderse.
Costos, es decir, un presupuesto en el que se especifiquen los fondos requeridos para
ejecutar el plan de trabajo anual.

El plan de trabajo constituye la base para el monitoreo tcnico o programtico.

Presupuesto del proyecto


El presupuesto del proyecto indica los recursos financieros requeridos durante la duracin del
mismo. Los costos correspondientes se calculan sobre la base de las tareas, actividades y resultados
previstos. Luego, el presupuesto debe desglosarse por ao o perodos ms breves, a fin de mostrar
qu recursos se necesitarn para cumplir con el plan de trabajo. El plan de trabajo anual en el que se
esboza la ejecucin tcnica debe ir acompaado de un desglose de los costos previstos en relacin
con las tareas, actividades y resultados esperados correspondientes. A continuacin se muestra un
presupuesto simplificado del proyecto:

Cuadro 6.2 Presupuesto simplificado del proyecto


A

AO 1

AO 2

AO 3

PRESUPUESTO
TOTAL
76

Resultado 01
Actividad 1
Tarea 1
Tarea 2
Actividad 2
Tarea 1
Tarea 2
Costos por ao

C. Preparacin del plan de monitoreo


Un plan de monitoreo se utiliza para planificar, administrar y documentar el proceso de
recopilacin de datos, de manera oportuna y en forma comparable. Asimismo, determina los
indicadores que debern hacerse objeto de monitoreo; especifica la fuente, el mtodo, el
cronograma de recopilacin de datos, y asigna responsabilidades. El plan ayuda a mantener el
sistema de monitoreo bien encaminado y a asegurar que los datos sean notificados en forma
peridica a los encargados de la gerencia del proyecto. Preferentemente, la elaboracin de dicho
plan debe realizarse dando participacin a todos los interesados directos en el proyecto,
especialmente a un representante del grupo beneficiario, y al socio de financiacin. Los siguientes
elementos deben integrar el plan de monitoreo:
Indicadores de desempeo y sus definiciones.
Datos de referencia bsicos.
Metas de desempeo.
Fuente de datos.
Mtodo de recopilacin de datos.
Frecuencia y cronograma de recopilacin de datos.
Responsabilidades en cuanto a la adquisicin de datos.
A continuacin se explica cada uno de estos elementos.
Indicadores de desempeo y sus definiciones. A los efectos del seguimiento, los indicadores no
necesitan definirse ms que para el nivel de los resultados esperados. En el plan de trabajo pueden
haberse determinado ciertos indicadores preliminares, en cuyo caso deberan revisarse y, de ser
necesario, complementarse. Ejemplo:
PROPSITO DEL
PROYECTO
La gestin de los servicios de
salud ha mejorados

RESULTADOS
ESPERADOS
1. El perodo de espera de los
pacientes se habr reducido en
30%

INDICADOR
Duracin del perodo de espera

2. El personal mdico habr pasado


a recibir 10% ms de pacientes por
da

Nmero de pacientes

3. El nivel de satisfaccin de los


usuarios continuar siendo el
mismo.

Opiniones de los pacientes

77

Los buenos indicadores comienzan con un enunciado claro de los objetivos o los resultados
esperados. Cada indicador requiere una definicin detallada en la que se especifiquen cantidad,
calidad y tiempo. A la hora de seleccionar indicadores, las caractersticas ms importantes son las
siguientes:

Validez. El indicador mide realmente aquello que se supone debe medir.


Confiabilidad. Varias mediciones reiteradas arrojan los mismos resultados.
Sensibilidad. El indicador es sensible a los cambios y ,
Especificidad. El indicador mide solamente los cambios relacionados con la intervencin del
proyecto en cuestin.

Datos de referencia bsica. Es casi imposible establecer metas o medir avances sin saber cul es la
situacin de partida de un proyecto. Es por ello que antes del comienzo del mismo hay que
establecer datos de referencia bsicos que reflejen, con la mayor fidelidad posible, el valor de cada
indicador al principio del proyecto. Esos datos bsicos sern el valor en funcin del cual se medirn
los cambios durante todo el perodo abarcado por el proyecto.
Ejemplo
En un proyecto destinado a aumentar la produccin triguera de los pequeos
agricultores (resultado esperado) resulta fcil, establecer el nivel de referencia bsico:
nivel de produccin triguera al comienzo del proyecto.
Cuando los resultados esperados son de carcter ms cualitativo, como por ejemplo
"mayor conocimiento de las prcticas higinicas relacionadas con el uso del agua", el
establecimiento de un punto de referencia bsico requiere un poco ms de
imaginacin.
Metas de desempeo. Las metas representan el nivel y cronograma exacto de los resultados que
se espera lograr con un proyecto. Mientras el indicador define la forma en que se ha de medir el
desempeo segn una escala o dimensin, la meta determina el nivel planificado especfico del
resultado que se debe lograr en un plazo determinado.
Ejemplo
Si el resultado esperado es "reducir 30%, en un plazo de dos aos, el perodo de espera
de los pacientes", se pueden establecer las siguientes metas provisionales: "reduccin de
10% en el perodo de espera medio, para el mes de julio del primer ao; reduccin ulterior
de 10% para el mes de enero del segundo ao y, por ltimo, reduccin adicional de 10%
para el mes de julio del segundo ao".
Una meta final es el valor planificado de un indicador para la culminacin del proyecto o el perodo
de planificacin. Si ese plazo resulta demasiado prolongado, conviene establecer metas
provisionales o, como se las denomina a menudo, hitos.

Ejemplo

78

Resultado esperado: "Acceso a un agua potable limpia para 80% de la poblacin rural de la
provincia de Santa Clara". Al comenzar el proyecto, slo 50% de la poblacin tiene acceso
al agua limpia (valor de referencia bsico). El proyecto se ha planificado para un plazo de
siete aos. Su objetivo final es el nivel de 80% que debe haberse alcanzado al cabo de
dicho plazo. En este caso quiz convenga fijarse metas intermedias, por ejemplo 60% tras
dos aos, 70% tras cuatro y 80% al cabo de los siete.
Conviene utilizar una curva acumulativa para ilustrar las metas intermedias y la final. Dicha
curva pasar a ser una buena base para realizar una comparacin con los logros reales del
caso.

Medios de verificacin y fuente de datos. Los medios de verificacin permiten comprobar el


estado de los indicadores, y se deben definir en la matriz del enfoque de Marco Lgico del
documento del proyecto. Si esto no se hace, o si se seleccionan indicadores nuevos, los encargados
de la gestin del proyecto deben establecer medios de verificacin. La fuente de datos es el lugar
donde se encuentran los datos que permiten verificar el estado del indicador. Puede ser una
institucin que se encarga de recopilar datos, o bien un sistema para dicha recopilacin establecido
por el proyecto. Es importante poder usar habitualmente la misma fuente, porque el cambio de
fuente de datos para el mismo indicador, con el tiempo, puede dar lugar a incongruencias y errores
de interpretacin. Por ejemplo, si los clculos estimados de las tasas de mortalidad infantil basados
en unas encuestas nacionales por muestreo se dejan de lado en favor de cifras estimadas basadas en
las estadsticas de inscripciones hospitalarias, se puede llegar a tener una falsa impresin de
cambio.
Mtodo de recopilacin de datos. Se debe especificar el mtodo de recopilacin de datos para
cada indicador, sealando si se trata de recopilacin de datos primarios o si se basa en datos
secundarios. Para la recopilacin de datos primarios hay que tener en cuenta:

La unidad de anlisis.
Las necesidades de desglose de datos (por sexo, edad, grupo tnico, ubicacin).
Las tcnicas de muestreo.
Las tcnicas o los instrumentos para adquirir datos.

Para los indicadores basados en datos secundarios se deben proporcionar tanto el mtodo de
clculo de los puntos de datos del indicador especfico como las fuentes de informacin. Asimismo,
hay que suministrar detalles suficientes sobre el mtodo de recopilacin o clculo de datos, para
poder repetirlo si se quiere.
Frecuencia y cronograma de recopilacin de datos. Para poder medir el avance de un proyecto,
los sistemas de seguimiento deben recopilar peridicamente datos comparables. Con qu
frecuencia hay que recopilar datos? No hay respuestas generales a esta pregunta. Segn el
indicador, tal vez convenga hacerlo con una frecuencia trimestral, anual, o incluso menor. Por
ejemplo, como los cambios son lentos, los datos sobre el grado de descentralizacin de funciones de
determinado sector se pueden recopilar cada cierto nmero de aos, mientras que los
correspondientes respecto al nivel de produccin de determinado producto agroindustrial.
Cuando se planifican la frecuencia y programacin de la recopilacin de datos, los factores
importantes a tener en cuenta son las necesidades de los encargados de la gestin del proyecto para
una toma de decisiones oportuna, y los momentos de decisin dentro del ciclo del proyecto.
Responsabilidades en cuanto a la obtencin de datos. La responsabilidad de la adquisicin
oportuna de datos a partir de su fuente se debe asignar claramente, en funcin de cada indicador, a
79

una persona, equipo u oficina especfica, determinndose asimismo la modalidad de registro de


datos.
Plan de anlisis de datos. En la medida de lo posible, conviene planificar con antelacin no slo la
recopilacin de datos, sino tambin su anlisis, notificacin, examen y empleo, a fin de determinar
las tcnicas de anlisis de la informacin y los formatos que se usarn para su presentacin.
Identificacin de necesidades de evaluaciones complementarias. Las evaluaciones de los
proyectos en curso deben realizarse solamente cuando es improbable el logro de la finalidad del
proyecto. Por ejemplo, si no se entienden a fondo las razones por las que no se alcanzan las metas,
conviene programar evaluaciones para investigar y analizar el proyecto.
Planes para la comunicacin y el uso de la informacin obtenida a travs del monitoreo del
proyecto. Influenciar las decisiones de gestin;
1.
2.
3.

Escribir informes de progreso, semestrales o anuales, dirigidos a los superiores, las


entidades homlogas nacionales y los socios financieros; y
Compartir la informacin con los interesados directos para su discusin y anlisis.
Anlisis de los resultados del monitoreo.

El anlisis de los resultados del monitoreo supone, bsicamente, comparar el desempeo real con
los planes, y los gastos reales con el presupuesto, analizando cualquier desviacin o discrepancia.
Ello se puede expresar tanto en palabras como mediante cuadros y diagramas. Por lo general, los
cuadros y grficos resultan ms fciles y rpidos de interpretar, e ilustran claramente la
comparacin entre planes y resultados.
Ejemplo: Adiestramiento de agricultores
En este caso la ejecucin tcnica, es decir, el nmero de agricultores adiestrados, es
apenas 90% del nivel esperado, mientras que el costo excede 16% la cifra presupuestada.
Dicho sobrecosto puede obedecer a razones vlidas, que hay que explicar, o bien pueden
existir problemas que obliguen a modificar la organizacin del adiestramiento. Las
discrepancias y deficiencias pueden obedecer a problemas o situaciones inherentes al
proyecto, como su organizacin, sus sistemas administrativos, el cambio de los
coordinadores / gerentes del mismos o la escasez de personal.

Nmero
Nmero real
planificado de agricultores
adiestrados
180

162

90%

Costo
Presupuesto
US$
8.600

Costo real
US$

10.100 116%

5.3 Adopcin de decisiones operativas


En funcin de los resultados del anlisis, el gerente del proyecto puede optar por proponer medidas
correctivas, mejorar el diseo del proyecto o rectificar la asignacin de recursos. Tal vez deban
hacerse reajustas en el marco operativo o la asignacin de responsabilidades. Los resultados del
monitoreo ayudarn a justificar dichas medidas.

80

Los resultados del monitoreo deben incorporarse en informes peridicos y tenerse en cuenta al
formularse nuevos planes de trabajo. Los informes siempre deben relacionar con los documentos
del proyecto y con la matriz del Enfoque del Marco Lgico presentada en dicho documento.
Hay dos temas bsicos que se deben tratar en los informes:

La ejecucin tcnica en relacin con el plan anual, y con nfasis en el nivel de resultados
esperados, ms que en los niveles de actividades y tareas;
La ejecucin financiera en relacin con el presupuest y, concretamente, con los costos
previstos para alcanzar los resultados esperados y realizar las actividades.

La notificacin sobre ambos aspectos debe estar sincronizada, al comparar el grado de ejecucin
tcnicas con la utilizacin de fondos. El gerente del proyecto tiene la responsabilidad de velar por
que se d esa correspondencia.
El seguimiento de la ejecucin tcnica proporciona al gerente del proyecto elementos para la
notificacin de los factores tcnicos.
Los requisitos de presentacin de informes de los socios financiadores externos se defines en los
convenios respectivos y el socio o parte contratante. Dichos requisitos varan en cierta medida en
cuanto a frecuencia, contenido y nivel de detalle. Es importante que los informes estn bien
estructurados y que sean concisos y concretos. El objeto es proporcionar una vista panormica del
avance del proyecto, de la medida en que se han logrado los resultados esperados, de los problemas
surgidos en la ejecucin y el entorno del proyecto, y de las perspectivas para el prximo perodo
que ser objeto de un informe. Conviene evitar un nivel de detalle excesivo.
La estructura de los informes no se debe modificar durante el plazo de vigencia del proyecto,
mantenindose asimismo el nivel y las categoras de notificacin para facilitar las comparaciones
correspondientes.

81

Formato 3. INFORME DE MONITOREO


RESUMEN EJECUTIVO

Principales logros del proyecto, problemas, resumen de la ejecucin financiera y propuestas futuras. MXIMO: 1 PGINA.

INFORMACIN TCNICA

En esta seccin se deben describir las actividades realizadas, de conformidad con el Plan Operativo Anual y la
programacin especfica del periodo correspondiente (mensual o trimestral). MXIMO: 4 PGINAS.

INFORMACIN FINANCIERA

En esta seccin se debe describir la ejecucin de los gastos, de conformidad con el presupuesto aprobado y la
programacin especfica del periodo. MXIMO: 4 PGINAS.

PROGRAMACIN FUTURA

Proponer las caractersticas bsicas del plan de trabajo para el periodo siguiente. Slo es necesario formular comentarios si
se introducen actividades nuevas o se proponen cambios a nivel de las actividades o el presupuesto contenidos en el
documento original del proyecto. MXIMO: 1 PGINA.
.

ANEXOS

Se pueden incluir anexos diversos: fotos, noticias aparecidas en los medios relacionadas con el proyecto, estadsticas de
produccin, etc.

82

Formato 4. INFORME DE MONITOREO


INFORME DE MONITOREO
(Correspondiente al .. trimestre)

Componentes
/Acciones
(2)

Unidad
de
Medida
(4)

Meta programada (PIA)


Ao.
Fsica
(5)

Finan
(6)

Meta programada (PIM)


Ao.
Fsica
(7)

Finan
(8)

Meta ejecutada y/o obtenida


En el.Trim.
Fsica
(9)

%
(10)=(9)/(5)

Finan
(11)

%
(12)=(11)/(6)

Avance acumulado de metas


Al..Trim.
Fsica
(9)

%
(10)=(9)/(5)

Finan
(11)

%
(12)=(11)/(6)

Responsa
ble
(9)

Componente 1
Indicador:
Accin 1:
Accin 2:
Accin 3:
Accin n:

Componente 2
Indicador:
Accin 1:
Accin 2:
Accin 3:
Accin n:

Componente n
Indicador:
Accin 1:
Accin 2:
Accin 3:
Accin n:
TOTAL

83

Captulo 6. Evaluacin de Resultados


En el presente captulo se ofrece una definicin de evaluacin de resultados, as
como de sus principales diferencias con la evaluacin de impacto. Adems, se
presentan los procedimientos y criterios a tener en cuenta al momento de disear un
sistema de evaluacin de resultados, destacando especficamente los criterios de
eficacia, eficiencia, pertinencia sostenibilidad y calidad.

6.1

Definicin de evaluacin de resultados

Los proyectos transforman insumos en resultados; es decir, realizan actividades invirtiendo


recursos materiales, financieros y habilidades tcnico-administrativas, para resolver problemas
especficos que afectan a una poblacin objetivo o a su entorno. Desde esta perspectiva, los
resultados de los proyectos son cambios positivos, irreversibles, duraderos y sostenibles en tres
niveles sucesivos y secuencialmente superiores: productos, efectos e impactos.

Los productos son bienes o servicios que obtiene la poblacin beneficiaria como
resultado inmediato de cumplir las actividades. Ejemplo: carreteras construidas,
campesinos capacitados, crditos recibidos, etc.

Los efectos o resultados inmediatos vienen a ser nuevas habilidades de la poblacin, o


nuevos factores en el entorno donde vive esta poblacin que surgen como resultados
sinrgicos del uso de los productos de la poblacin. Ejemplos: mayor productividad de
las tierras, mejor calidad de los productos agropecuarios, mas ventas de productos,
suelos estabilizados contra la erosin, etc.

Los impactos o resultado final vienen a ser cambios positivos fundamentales en algn
aspecto de la propia vida de la gente o en el ecosistema en el que se asientan. Son
resultados sinergticos generados por los efectos. Ejemplo: mayores ingresos familiares,
reduccin de la morbi-mortalidad y conservacin del medio ambiente, entre otros.

La evaluacin de resultados tiene por objeto verificar en el mbito del proyecto, el cumplimiento
de los objetivos (a nivel de productos, propsito y fin), sin mayor preocupacin por determinar
en qu medida los resultados se pueden atribuir en estricto al proyecto o tienen su origen en
factores externos.
Tipologa de evaluacin
Un proyecto, visto de manera agregada, consta de procesos y resultados. Mientras los
procesos son la materia de estudio de la evaluacin de procesos (monitoreo), los
resultados son abordados a travs de la evaluacin de resultados.

Para medir los resultados de los proyectos se utilizan indicadores verificables objetivamente
(IVOs) que vienen a ser evidencias empricas comprendidas y aceptadas por todos los actores de
un proyecto: poblacin objetivo, equipo ejecutor, supervisores y financieras. Los IVOs pueden ser
directos o proxys segn expliquen los contenidos de un resultado directamente o utilicen un
fenmeno aproximado para hacerlo, tal como se puede observar en los ejemplos siguientes:

Producto: El volumen de alimentos cultivados aumenta.

La cosecha de papa yungay para consumo en la comunidad de Chicche, Huancayo, se incrementa

Ao
TM
%

2000
100
-

2001
120
20

2002
150
50

2003
180
80

2004
210
110

2005
250
150

Efecto: La erosin de suelos en la micro cuenca habitada por la comunidad de Janjaillo,


disminuye.

El contenido de materia en suspensin de las aguas del ro Canipaco, emisario principal de la micro cuenca
Quishuarcancha y hbitat de la comunidad de Janjaillo, medida en el Puente Calicanto, en marzo, mes de mxima
avenida, disminuye

Ao
grs./litro
%

6.2

2000
12
-

2001
12
-

2002
10
16

2003
180
80

2004
210
110

2005
250
150

Evaluacin de resultados y evaluacin de impacto

La evaluacin de resultados y la evaluacin de impacto son dos actividades diferentes pero


complementarias, y unidos al monitoreo o seguimiento de procesos, pueden constituir un
sistema bastante completo de evaluacin de un proyecto social. Ambos tipos de evaluacin
requieren de la recopilacin de informacin, como del anlisis sistemtico de la informacin
sobre la ejecucin del proyecto, pero difieren en cuanto al tipo de datos requeridos, tanto en lo
metodolgico como en su uso final.
As tenemos que, en la evaluacin de resultados la metodologa es relativamente sencilla. Como
bien sealan Rubio, Prennushi y Subbanao, el nivel ms bsico, implica una comparacin del
nivel alcanzado en un determinado objetivo con la meta correspondiente (o el nivel existente
antes del proyecto). La evaluacin de impacto, en cambio, se concentra en la estimacin
cuantitativa de los cambios en el bienestar de las personas que se pueden atribuir
inequvocamente a un proyecto. Las principales diferencias entre el control de resultados y la
evaluacin de impacto se muestran a continuacin:

Cuadro 7.1 Comparacin entre evaluacin de resultados y de impacto

85

Aspecto

6.3

Evaluacin de resultados

Evaluacin de impacto

Objetivos

Verifica cambios en los


resultados de medicin de la
pobreza a travs del tiempo.

Evala cambios en los


resultados en la medicin de la
pobreza, atribuibles a medidas
pblicas especficas, y evala
impactos sobre diferentes
grupos de la poblacin y dentro
de la familia.

Informacin necesaria

Datos a nivel nacional, local y


familiar recopilados a intervalos
frecuentes.

Datos sobre las familias


representando la poblacin del
estudio, recopilados por lo
menos en dos oportunidades,
antes y despus de la puesta en
prctica de la poltica o
programa. Los datos sobre
miembros individuales de una
familia permiten un anlisis de la
asignacin de recursos al seno
de una familia.

Metodologa

Comparacin de indicadores a
travs del tiempo.

Comparacin de los indicadores


antes y despus de la
intervencin, entre unos grupos
comparables de participantes y
no participantes.

Diseo de un sistema de evaluacin de resultados

El diseo de un sistema de seguimiento de resultados debe determinar los objetivos, metas,


indicadores apropiados y niveles de desglose, as como los datos necesarios y la frecuencia de las
acciones de seguimiento.
A. Determinacin de objetivos y metas
Los objetivos ayudan a guiar la asignacin de recursos y priorizar los esfuerzos. A continuacin
ofrecemos algunos lineamientos generales a considerar para fijar objetivos y metas.
Primero, los objetivos para los pases se seleccionan mejor por medio de procesos
participatorios dentro de cada pas. Esto toma tiempo al principio pero puede ayudar a alcanzar
objetivos a largo plazo.
Segundo, las metas son seleccionadas sobre la base de la situacin actual y en funcin lo que se
puede llegar a lograr en el pas en un momento dado.
Tercero, las metas pueden ubicarse en diferentes niveles de desglose dependiendo de factores
como el tamao de un pas, la distribucin de la poblacin por grupos socio tnicos, etc. Adems
de las metas a nivel nacional, se pueden fijar metas especficas para ciertas regiones o ciertos
grupos.

86

Cuarto, es importante incluir los factores cualitativos y subjetivos cuando se fijan los objetivos.
Numerosos factores que afectan la calidad de vida no se pueden cuantificar fcilmente pero no
por ese motivo son menos importantes. Cuando sea factible, se pueden aadir indicadores
cualitativos y subjetivos por ejemplo, si la gente se considera pobre o no.

Identificacin de indicadores
Despus de haber fijado los objetivos, el prximo paso es identificar los indicadores para medir
el progreso hacia esos objetivos.
Los indicadores se pueden clasificar en general, en dos grupos: intermedios y finales. Cuando un
indicador mide un objetivo final o el efecto de una intervencin sobre el bienestar de la gente, lo
llamamos indicador de impacto o indicador de resultados o sea un indicador final. Por
ejemplo, la alfabetizacin se puede considerar como un objetivo final, por lo tanto, un indicador
que lo mide como la proporcin de personas de cierta edad que puede leer un texto sencillo y
escribir su nombre seria un indicador final.
Cuando un indicador mide un factor que determina un resultado o contribuye al proceso de
lograr un resultado, lo llamamos un indicador de aporte o de producto. Dependiendo de la
etapa del proceso puede considerarse un indicador intermedio. Por ejemplo, se pueden
necesitar realizar varias actividades para elevar el nivel de alfabetizacin: ms escuelas y
maestros, ms alumnos atendiendo clases, etc. Una medida del monto de inversin en aulas y
personal docente sera un indicador de aporte, mientras que la medida de aulas construidas y
personal docente capacitado seran indicadores de producto. Lo que es importante es que los
aportes y los productos no son objetivos en s; ms bien ayudan a alcanzar los objetivos
escogidos.
Los datos sobre indicadores intermedios pueden generalmente ser recopilados mediante
sistemas de informacin para la administracin (management information system o MIS)
diseados para administrar proyectos y programas, mientras que los datos sobre resultados e
impactos normalmente deben ser recopilados a partir de los beneficiarios, requiriendo de
encuestas con personas o familias.
Ambos indicadores, los finales (resultado e impacto) y los intermedios (proceso y producto) son
importantes. El examen de indicadores finales ayuda a juzgar el progreso hecho hacia las metas
fijadas. Sin embargo, estos indicadores cambian generalmente ms lentamente con el tiempo y
son los resultados de muchos factores, algunos fuera de control de los responsables de la poltica
y de los administradores de programa. Por otra parte, el examen de los indicadores intermedios
da una imagen ms correcta de lo que est ocurriendo.
Los indicadores intermedios que son los ms tiles para seguir la marcha del progreso hacia un
impacto o un resultado varan segn las zonas o grupos al pasar el tiempo. Por ejemplo, si todas
las escuelas tuvieran ms o menos el mismo coeficiente de maestro por alumno, el coeficiente de
maestro por alumno no sera un indicador intermedio muy til para examinar las diferencias en
la calidad de educacin en diferentes regiones, aunque podra todava servir para observar
cambios al pasar el tiempo.
Los indicadores finales e intermedios podran ser completados con otros indicadores escogidos
para medir el rendimiento general del pas y describir el contexto en el cual la estrategia de
reduccin de pobreza se est llevando a cabo. Por ejemplo, los indicadores que miden los
factores externos que podran afectar los indicadores de resultados como la lluvia o la sbita
propagacin de una epidemia se podran incluir en el sistema de control.

Desglose de indicadores

El desglose de indicadores es tan importante como la seleccin de los indicadores mismos. Se


puede desglosar los indicadores en varias dimensiones, incluyendo la ubicacin, el sexo, el nivel
87

de ingresos y el grupo social (etnicidad, religin, tribu, casta). Los indicadores colectivos a nivel
de pas son tiles para algunos propsitos y dan una imagen de conjunto. Sin embargo, los
indicadores colectivos tienden a ocultar diferencias significativas en las diferentes zonas, sexo o
grupos sociales. Sin obtener una imagen ms desglosada de esas diferencias, es difcil concebir
buenas polticas y programas para mejorar las consecuencias de la pobreza. El tipo y nivel
apropiados de desglose dependen de las condiciones de un pas y del indicador mismo.
Un tipo bsico de desglose es por zonas geogrficas, incluyendo las unidades administrativas
urbanas y rurales y las zonas geoclimticas. La divisin entre zona urbana y rural es comn y
esencial, pero no siempre suficiente. Las ciudades ms pequeas tienden a veces a ser ms
similares a zonas rurales que grandes ciudades por ejemplo, en cuanto a la importancia de la
agricultura como fuente de sustento. Podra ser til desglosar an ms las zonas urbanas por
dimensin de la aglomeracin para distinguir las ciudades muy grandes de las dems. De la
misma manera, la ciudad capital tiende a menudo a tener diferentes caractersticas: ingresos
medios ms altos, mayor disponibilidad de servicios, una mayor cantidad de empleos en
servicios, etc. Por lo tanto, podra ser til establecer unos indicadores separados para la capital.
La mayora de los pases son divididos en unidades administrativas ms pequeas como estados,
regiones, provincias, distritos, municipalidades y pueblos, etc. categoras que pueden ser usadas
para el desglose.
Un tercer tipo de desglose es por zonas geoclimticas. La mayora de los pases tienen numerosas
zonas geogrficas caracterizadas por suelos, lluvia y topografa diferentes y por consiguiente
difieren las prcticas agrcolas, la configuracin de los asentamientos, la facilidad de acceso, etc.
Otro tipo de desglose es por sexo. Los indicadores de sexo apropiados miden factores que varan
segn los sexos y toman en cuenta el impacto de las diferencias biolgicas. Por ejemplo, la
esperanza de vida tiende a ser ms alta para las mujeres, por eso una esperanza de vida ms
corta para mujeres que para hombres es generalmente una indicacin que las mujeres pudieran
tener altos riesgos para su salud durante el parto.
El desglose por nivel de ingresos o de consumo es una manera comn de ver como los
indicadores varan entre la poblacin. Es generalmente preferible a un desglose sencillo de pobre
no pobre porque capta la realidad de que muchas caractersticas de familias y de personas
varan a lo largo de una lnea continua. Existen a menudo unas diferencias significantes entre los
que se clasifican como pobres, y los que se encuentran justo por debajo de la lnea de pobreza
tienen generalmente unas caractersticas muy similares a los que estn justo por encima. Por lo
tanto, es preferible dividir la poblacin en grupos del mismo tamao en vez de simplemente en
pobres y no pobres. Algunas agrupaciones comnmente utilizadas basadas en el nivel de
ingresos y de consumo son:

Nombre

Nmero de grupos

Porcentaje de la poblacin

Deciles

10

10 por ciento

Quintiles

20 por ciento

Cuartiles

25 por ciento

n percentil

100/n por ciento

En la mayora de los pases hay diferencias significativas entre los grupos socialmente definidos,
bien sea por el lado tnico, tribal, religioso u otro. La definicin de los grupos pertinentes puede
variar naturalmente segn los pases.

Determinacin de datos

88

Los datos provenientes diversas fuentes son generalmente utilizados para examinar los
resultados. La tabla N 21 proporciona una lista de diferentes tipos de datos utilizados para
examinar resultados, sus fuentes y los organismos responsables de su recopilacin.
Cuadro 7.2 Recopilacin de datos
Datos

Fuente

Organismos

Nacional
Cuentas nacionales:
producto nacional bruto,
consumo, inversin,
exportaciones,
importaciones, etc.
Finanzas pblicas: ingresos,
gastos por categora

Sistema de cuentas
nacionales, estadsticas
comerciales

Organismo central de
estadsticas

Precios al consumidor y al
productor

Presupuesto y datos efectivos Ministerio de finanzas,


organismo central de
estadsticas, ministerios
sectoriales
Encuestas sobre precios y
Organismo central de
salarios
estadstica, banco central

Indicadores sociales

Sistemas administrativos

Sistema de informacin
administrativa de los
ministerios sectoriales

Clima: temperatura, lluvia,


etc.

Medicin directa.

Organismo nacional de
Meteorologa

Local
Disponibilidad de servicios

Encuestas en las
comunidades, encuestas de
hogares sobre mltiples
temas; estudios cualitativos

Administracin local,
ministerios sectoriales

Individual y familiar
Uso de servicios

Encuestas de observacin

Proveedores de servicios
locales

Consumo e ingresos
familiares; condiciones de
vida, indicadores sociales

Presupuesto/gastos/ingresos
de familias, encuestas de
hogares sobre mltiples
termas
Encuestas sobre prioridades,
encuestas sobre indicadores
de bienestar bsico

Organismo central de
estadsticas, ministerio del
trabajo /del empleo

Estudios cualitativos;
encuestas de usuarios

Organismo central de
estadsticas, ministerio
sectoriales, otros

Nivel de vida de hogares


(consumo e ingresos sin
detalles)
Prioridades familiares,
percepcin de bienestar,
satisfaccin del usuario

Organismo central de
estadsticas, ministerio del
trabajo /del empleo, otros

Se debe notar que los datos de esas fuentes son complementarios y no substitutos entre s. El
hecho de tener muy buenos datos al nivel familiar sobre consumo e ingresos no ser suficiente
para proyectar tendencias en los resultados sobre determinados objetivos.

Frecuencia de seguimiento

89

La decisin sobre la frecuencia de seguimiento, dependen de una cuidadosa evaluacin de las


ventajas relativas entre la necesidad de obtener datos recientes y el costo de su recopilacin. La
Tabla N 22 indica la frecuencia deseable de la recopilacin de datos de diferentes tipos usados
para el control de resultados.
Cuadro 7.3 Frecuencia de recopilacin de datos
Datos

Frecuencia
Nacional

Cuentas nacionales: Producto nacional


neto, consumo, inversin, exportaciones,
importaciones, etc.

Mensual o trimestral cuando es posible


(estadsticas comerciales, por ejemplo);
por lo menos anualmente

Finanzas pblicas:
ingresos, gastos por categora

Mensual o trimestral cuando es posible


(estadsticas comerciales, por ejemplo);
por lo menos anualmente

Precios al consumidor y al productor;


salarios

Mensual; cesta de ndice de precios al


consumidor actualizada por lo menos
cada cinco aos

Indicadores sociales

Anualmente cuando sea posible

Datos climticos: temperatura, lluvia, etc.

Diariamente

Local
Disponibilidad de servicios

Anualmente

Uso de servicios

Anualmente

Individual y familiar

6.4

Consumo e ingresos, condiciones de


vida, indicadores sociales de la familia

Cada dos aos a cinco

Nivel de vida familiar (consumo o


ingresos sin detalles); indicadores
sociales

Anualmente

Prioridades familiares, percepciones de


bienestar, satisfaccin del usuario

Cada uno o tres aos

Criterios de evaluacin

Con la finalidad de determinar si el diseo y la gerencia del proyecto fueron adecuados se pone
nfasis en cinco aspectos importantes:
a. Pertinencia. Grado en el cual el objetivo del proyecto es consistente con las prioridades de
desarrollo de la poblacin objetivo y las polticas de la entidad ejecutora y el organismo
donante o financiador.
b. Eficacia. Grado en el cual se logran los objetivos especficos y el propsito del proyecto.

90

c. Eficiencia. Anlisis de los resultados con relacin al costo. Es un anlisis de cmo los
insumos se transforman en productos mediante la realizacin de determinadas actividades.
d. Impacto. Valoracin socioeconmica global, incluyendo los efectos positivos y negativos,
tanto aquellos que son deseados y estaban previstos, como los no previstos y no deseados.
e. Sostenibilidad. Apreciacin de la capacidad para mantener los impactos positivos del
proyecto durante un largo perodo.
Estos aspectos de la evaluacin estn estrechamente relacionados al enfoque del marco lgico.
As, la pertinencia alude a la relacin del propsito con las prioridades de desarrollo; la eficacia
a la relacin entre los productos y el propsito; la eficiencia es una comparacin de los
insumos con los productos; el impacto establece relaciones entre las variables controlables por
el proyecto y el fin; y, por ltimo, la sostenibilidad analiza la interaccin entre el fin y los
supuestos al mismo nivel.
Cabe reiterar que en la evaluacin ex-post se suele convenir que el concepto de resultado abarca
tres niveles de la columna de objetivos del marco lgico: los productos (o componentes), los
efectos (o propsito) y los impactos (o fin). En ocasiones se suele diferenciar a la evaluacin de
resultados del anlisis de impactos, con la intencin de estimar cualitativamente y
cuantitativamente la incidencia del proyecto sobre determinados aspectos o reas del desarrollo.
A este anlisis se denomina evaluacin de impacto.

Pertinencia
La pertinencia debe ser considerada desde las primeras etapas de planificacin y a lo largo de
todo el ciclo del proyecto. La pertinencia se preocupa de la razn de ser de un proyecto en
relacin con las prioridades de la comunidad beneficiaria y la sociedad en su conjunto. Por una
parte, esto se refiere a la direccin del proyecto en relacin con su objetivo principal o propsito.
Por otra, significa observar los cambios sociales que pueden haber tenido lugar mientras el
proyecto ha sido ejecutado, precisando hasta qu punto pueden alterar la razn de ser del
mismo. Un cambio en las condiciones externas puede significar que se conceda menos prioridad
al proyecto o que ste pierda parte de su razn de ser. Por ejemplo, una vez solucionado un
conflicto poltico, puede ser que ya no sea necesario un campo de refugiados. En otras palabras,
la pertinencia es bsicamente una cuestin de prioridades, que conduce a decisiones del ms alto
nivel acerca de si se debe finalizar el proyecto o permitir que este contine. En caso de optar por
su continuidad: Qu cambios deben realizarse y en qu direccin?, Son todava validos los
objetivos acordados y tienen suficiente razn de ser para continuar con el proyecto?

En el nivel superior, se refiere a la relacin entre el proyecto y la poltica de desarrollo


del pas receptor, y a la relacin del proyecto con las prioridades del organismo donante.
En un nivel inmediatamente inferior, se refiere a la relacin con otros proyectos e
iniciativas de desarrollo pertenecientes a un programa o sector.
En el siguiente nivel, determinando en qu medida el proyecto ha alcanzado a los
beneficiarios, y si est orientado hacia reas que las partes implicadas consideran de alta
prioridad.

Eficacia
La eficacia se define como el grado en que se alcanzan los objetivos y metas del proyecto en un
perodo determinado, independientemente de los costos que ello implique. Si bien la referencia
bsica para la evaluacin de eficacia es el conjunto de objetivos (y sus correspondientes
indicadores) planteados en el marco lgico del proyecto, esto por s solo no necesariamente
refleja un buen desempeo, puesto que tanto los niveles programados como los alcanzados
pueden estar alejados de estndares adecuados. Por esta razn, una evaluacin en profundidad
del nivel de eficacia alcanzado debe realizarse tomando en cuenta determinados estndares para

91

cada objetivo/indicador establecido en forma independiente, hacia los cuales deberan apuntar
las metas del proyecto.
Por lo general, un proyecto de desarrollo es slo uno de los varios factores que contribuyen al
logro de los objetivos globales. El equipo responsable de la evaluacin deber por tanto prestar
atencin a las causas que estn detrs de la eficacia o de la ausencia de la misma, especialmente
al grado en el que se han alcanzado los resultados esperados; y si stos son suficientes o es
necesario realizar cambios en el diseo del proyecto para asegurar la eficacia en el marco
temporal establecido. Igualmente importante es realizar un minucioso anlisis de los factores
externos -los supuestos- que ejercen tambin una influencia sobre las posibilidades de xito del
proyecto.
En general, el concepto de eficacia relaciona dos variables fundamentales: metas y tiempo. El
logro de las metas en el tiempo previsto.

Eficacia

Re sultados obtenidos
Metas previstas

Eficiencia
La eficiencia del proceso de ejecucin de un proyecto consiste en la obtencin del mximo
producto con el mnimo de recursos. La eficiencia, o su expresin cuantitativa, la productividad,
est contenida en la L del extremo inferior izquierdo del marco lgico, constituida por los
casilleros productos-actividades-insumos. En el contexto del manejo de proyectos, la eficiencia
consiste en organizar las actividades de modo que se obtengan los productos previstos con los
recursos asignados.
La dificultad principal para evaluar la eficiencia radica en determinar un valor de referencia. Este
depende del tipo de proyecto, de las circunstancias locales, de la tecnologa disponible y de otros
factores. En algunos casos existen estndares o valores de referencia predeterminados que
actan como lneas de corte para determinar en qu casos una ejecucin es eficiente o
ineficiente. Estas lneas de corte pueden establecerse sobre la base de la experiencia adquirida
en proyectos comparables ejecutados en otros lugares, o pueden estar dados por instituciones
independientes. El concepto de eficiencia puede operativizarse desde dos perspectivas:
Si la cantidad de producto est predeterminada, se persigue minimizar el costo total y
medio.
Si el gasto total est fijado de antemano, se busca optimizar la combinacin de insumos
para maximizar el producto.
La productividad es una medida de la eficiencia con la cual se miden los insumos utilizados para
generar productos. Por ello, productividad y eficiencia, se asumen como conceptos semejantes.
La eficiencia, intuitivamente puede representarse mediante la frmula:

92

Eficiencia

Metas obtenidas
Re cursos utilizados

La medicin de eficiencia es una relacin entre dos variables: una de producto y otra de insumo.
Esto rige para cualquier tipo de indicador de eficiencia: parcial o total y media o marginal. Y
como relacin que es, atendiendo a su naturaleza estrictamente matemtica, la eficiencia puede
expresarse en forma de razn geomtrica o aritmtica, o en otras formas menos usuales.
Cuando se expresa en trminos de relacin geomtrica lo que obtenemos es un coeficiente de
productividad, (Q/F), donde el antecedente o numerador es la variable de producto y el
consecuente o denominador es la variable representativa de insumo. Cuando, por el contrario, la
expresin se hace en trminos de razn aritmtica, lo que obtenemos es una ganancia de
productividad (Q - F), donde el antecedente es el minuendo o la variable de producto y el
consecuente o sustraendo es la variable de insumo.
Usualmente, la expresin geomtrica se aplica en las mediciones de productividad media
(promedio), ya sea de cobertura parcial o total. En cambio, la expresin aritmtica se utiliza
mayormente para las mediciones de productividad marginal, ya sea en su vertiente parcial o en
el total. Es usual, asimismo, armar series de nmeros a partir de los coeficientes de
productividad media; aunque, claro, los nmeros ndices pueden ser construidos a partir de
cualquier otro tipo de datos.
En ciertos estudios del Banco Mundial se hace una interesante distincin entre dos dimensiones
de la productividad, la esttica y la dinmica. En un contexto esttico, los mejoramientos de
productividad se producen sin modificaciones de la base tecnolgica y, por lo tanto, se deben a
cosas como la racionalizacin de procedimientos, el mayor esfuerzo laboral y la aplicacin de
nuevos mtodos administrativos, entre otros. Bajo un punto de vista dinmico, el cambio
tecnolgico juega un rol protagnico en la generacin de mejoramientos dramticos de la
productividad total, al igual que la acumulacin de capital, la cual influye particularmente sobre
la productividad del factor trabajo.

Impacto
El concepto de impacto es ms amplio que los de eficacia y eficiencia, ya que incluye no slo las
consecuencias positivas, vale decir los objetivos o productos deseados por el proyecto, sino
tambin las consecuencias negativas, hayan sido o no previstas durante el diseo del proyecto.
Adems, una evaluacin de impacto tiene la ventaja que permite estimar la magnitud de los
efectos logrados y determinar la causalidad de los mismos, de modo que se pueda precisar la
contribucin exacta del proyecto al logro de determinados objetivos de desarrollo.
Al momento de analizar los impactos, el punto de partida debe ser el propsito y fin del proyecto,
as como el grado de eficacia alcanzado. Acto seguido se debe formular la siguiente pregunta:
Qu otros efectos, positivos o negativos, esperados o imprevistos, han tenido lugar como
resultado del proyecto? Puede tratarse de efectos econmicos, sociales, polticos, tcnicos o
ambientales, tanto en el nivel local, como regional y nacional. El impacto total del proyecto es el
resultado de condiciones causales complejas cuyo anlisis puede resultar difcil. As:

Puede ser especialmente problemtico probar que los cambios observables pueden
adscribirse a determinado proyecto.
A fin de comprender las conexiones causales, el evaluador puede necesitar tanto mtodos
cuantitativos como mtodos cualitativos y participativos.
Pueden apreciarse impactos diferentes en distintos momentos, por lo que el trabajo de
evaluacin debe prestar atencin a los impactos de un proyecto tanto en el corto como en
el largo plazo.
93

El tiempo que debe transcurrir para que se puedan apreciar los impactos variar segn el tipo de
proyecto. Un proyecto agrcola, por ejemplo, puede dar lugar a impactos considerables slo
despus de unos meses, mientras que un proyecto educativo producir generalmente sus
mayores efectos varios aos despus de que hayan finalizado el proyecto. Por tal razn, si bien se
considera que una evaluacin de impacto debe realizarse algunos aos despus de culminada la
ejecucin del proyecto, en ciertos casos es posible realizar un anlisis de impacto en las
momentos previos o en los inmediatamente posteriores al trmino de la intervencin, en la
medida en que se evidencien cambios importantes en la poblacin objetivo vinculados al
propsito y fin del proyecto.
Cuadro 7.4 Impactos socioeconmicos y ambientales: ejemplos
DESARROLLO ECONMICO

Productividad incrementada.

Cobertura de crdito aumentada.


Circuitos productivos articulados.

MEJORAMIENTO DE
CONDICIONES DE VIDA

Pobreza extrema reducida.

Desnutricin infantil reducida.


Promotores de salud capacitados.

FORTALECIMIENTO
INSTITUCIONAL
Organizaciones sociales fortalecidas.
Capacidad de gestin mejorada.
Espacios de concertacin fortalecidos.

DESARROLLO AMBIENTAL
Suelos ampliados y/o recuperados.
Recursos genticos mejorados.
Capacitacin en manejo ambiental
brindada.

Sostenibilidad
El anlisis de sostenibilidad de un proyecto consiste en determinar si, ms all del logro de sus
objetivos, es posible que los impactos positivos continen despus que la ayuda o el
financiamiento externo haya finalizado. El concepto de sostenibilidad en general alude a la
capacidad de un proyecto para generar beneficios por un periodo mayor al del apoyo externo o
al perodo de vigencia del proyecto.
A diferencia del anlisis de eficacia, eficiencia, pertinencia e impacto, el anlisis de sostenibilidad
del proyecto es ms bien una cuestin del proceso de desarrollo en s mismo, en una perspectiva
de largo plazo. La sostenibilidad es, en cierto modo, la prueba definitiva del xito del proyecto.
Muchos proyectos encuentran dificultades una vez terminada la fase de ejecucin, debido a que
los beneficiarios o los responsables del mismo no son disciplinados o carecen de la motivacin
suficiente para proporcionar los recursos necesarios para que las actividades continen. Por lo
general, la sostenibilidad de un proyecto es afectada por tres amplio grupos de factores:

La calidad del diseo y de la ejecucin del proyecto.


La naturaleza de los factores externos que operan en el mbito relevante para el
proyecto.
La respuesta de los beneficiarios ante los productos entregados por el proyecto.

Como seala la Agencia Noruega de Desarrollo (NORAD), la sostenibilidad est


progresivamente convirtindose en un tema central en el trabajo de evaluacin, dado que

94

muchas agencias de desarrollo estn concediendo mayor importancia a las perspectivas de largo
plazo y a las mejoras duraderas. La viabilidad de cualquier proyecto depender en gran medida
de si el impacto positivo justifica las inversiones necesarias y si la comunidad local valora el
proyecto lo suficientemente como para dedicar sus escasos recursos a continuarlo. En otras
palabras, la sostenibilidad se preocupa de lo que ocurre cuando el proyecto ha finalizado. Por lo
tanto, ser difcil proporcionar cualquier anlisis seguro de la sostenibilidad mientras el
proyecto est en marcha o inmediatamente despus de su conclusin. En esos casos, el anlisis
tendr que basarse en suposiciones acerca de desarrollos futuros, partiendo del conocimiento
disponible sobre el proyecto y la comunidad local.

95

Formato 5. INFORME DE EVALUACIN FINAL


1.

INTRODUCCIN

1.1 Descripcin del proyecto

Datos generales

Marco Lgico
1.2 Metodologa de evaluacin

Diseo/ enfoque general

Instrumentos y fuentes de datos

Organizacin de la evaluacin Perodo:


2

ANALISIS DE EFICACIA

2.1 Evaluacin de los componentes


2.2 Evaluacin del logro del propsito
2.3 Contribucin al logro del fin
2.4 Efectos no previstos
2.5 Conclusiones y recomendaciones sobre eficacia
3

ANLISIS DE EFICIENCIA

3.1 Costo total del proyecto


3.2 Costo por principales productos/ componentes
3.3 Anlisis costo- efectividad
3.4 Anlisis costo- beneficio
3.5 Conclusiones y recomendaciones sobre eficiencia.
4

EVALUACIN DE IMPACTO

4.1 Metodologa de evaluacin


4.2 Impacto social
4.3 Impacto econmico
4.4 Impacto ambiental
4.5 Conclusiones y recomendaciones sobre impacto
5

SOSTENIBILIDAD DEL PROYECTO

5.1 Sostenibilidad institucional


5.2 Sostenibilidad financiera
5.3 Sostenibilidad social
5.4 Sostenibilidad ambiental
5.5 Conclusiones y recomendaciones sobre sostenibilidad
6

ANLISIS DE PERTINENCIA

6.1 Cambios en el entorno


6.2 Prioridades de la poblacin beneficiaria
6.3 Conclusiones y recomendaciones sobre la posible continuidad del proyecto.

96

CONCLUSIONES Y RECOMENDACIONES GENERALES

97

Captulo 7. Evaluacin de Impacto


En el presente captulo se ofrece una definicin de evaluacin de impacto y se
describen los diferentes tipos de diseo que puede adoptar. En trminos generales,
la evaluacin de impacto tiene como finalidad estimar los cambios en el bienestar de
la poblacin atribuibles directamente a la intervencin, separndolos de aquellos que
podran tener su origen en factores exgenos. En este captulo se describen los
cinco pasos indispensables de un plan de evaluacin de impacto. Esta, al igual que
cualquier otra forma de evaluacin, se puede realizar antes (evaluacin ex - ante) o
despus (evaluacin ex post) de la ejecucin del proyecto.

7.1

Definicin de evaluacin de impacto

En esencia, la evaluacin de impacto es un mtodo para evaluar la contribucin de un proyecto al


bienestar de la poblacin. El objetivo de la evaluacin de impacto es, en consecuencia,
determinar cul es la mejora alcanzada por los individuos participantes o beneficiarios en
trminos de ciertas variables clave, tales como ingreso, empleo, equidad y acceso a servicios
bsicos, entre otros. Bsicamente, se busca responder a la pregunta: qu ganan los participantes
de un proyecto en comparacin a no haber participado en el mismo? Ntese que est pregunta es
distinta a la pregunta: cul es la situacin de un individuo despus del proyecto en comparacin
a su situacin antes del mismo? Ello es as, porque entre los beneficiarios de un proyecto pueden
existir cambios en ciertas variables relevantes, debido a factores no necesariamente atribuibles
al contenido de la intervencin.25
De manera ideal, el cambio en las variables atribuibles al proyecto se podra determinar de
manera exacta si fuera posible observar a un individuo despus de haber participado en el
proyecto y al mismo individuo en el estado contrafactual, es decir, sin haber participado en l.
Conceptualmente, estos dos estados posibles para un individuo se reflejan en un primer grupo
llamado Grupo Beneficiario y un segundo llamado Grupo de Control, donde el primero est
integrado por individuos que tienen una participacin directa en el proyecto, a diferencia del
segundo grupo, que est conformado por individuos que por alguna razn no participan del
proyecto. Lo crucial es lograr que el grupo de control y el de beneficiarios sean los ms similares
posibles.
Para construir un escenario contrafactual que simule la situacin de los beneficiarios en el
escenario de no participacin en el proyecto, se pueden utilizar tres tipos de diseos de
evaluacin: experimentales, cuasi-experimentales y no experimentales. La diferencia entre los
dos primeros diseos radica en la forma como se asignan los participantes a los grupos de
tratamiento y control. As:
En el diseo experimental los participantes son asignados aleatoriamente antes del inicio del
proyecto. Ello permite conformar grupos que sean en promedio similares en todas sus
caractersticas excepto por su participacin en el proyecto.
En los diseos cuasi-experimentales la asignacin es no aleatoria, de modo que el grupo de
control puede conformarse una vez que el proyecto ha empezado. En estos diseos el mtodo de
25

Esta seccin est basada principalmente en los trabajos del ILPES sobre evaluacin de impacto. Sin embargo,
pueden encontrarse magnficos trabajos en el Banco Mundial, especialmente los de Judy Baker y en la OIT,
sobre todo el trabajo de Abdala. En el Per, los trabajos de GRADE, especialmente el de evaluacin de
impacto del programa PROJOVEN constituye una excelente aplicacin del mtodo.
98

asignacin dificulta la conformacin de grupos similares, lo que hace necesario el uso de tcnicas
estadsticas y economtricas para corregir el sesgo de seleccin generado.
Los mtodos no experimentales conforman intencionalmente el grupo de control con personas
que quisieron participar en el proyecto pero que llegaron tarde o al ltimo a la inscripcin y por
tanto no pudieron hacerlo; o bien con individuos que siendo elegibles para el proyecto por
cualquier otro motivo no pudieron participar del mismo.
As mismo, la evaluacin de impacto, al igual que cualquier otra evaluacin, puede realizarse
antes (ex- ante) o despus (ex-post) de la ejecucin del proyecto. En trminos generales, es
conveniente realizar evaluaciones de impacto ex-ante cuando se quiere escoger el proyecto o la
combinacin de los mismos que pueda contribuir de forma ms efectiva a la reduccin de la
pobreza; y evaluaciones ex-post cuando la evaluacin de impacto puede retroalimentar la
efectividad del proyecto en cuestin.

Cuantificacin del impacto


Existen tres estimadores ampliamente usados para evaluacin de impacto de un proyecto
intervencin: el estimador antes y despus, el estimador de diferencia en diferencias y el
estimador de corte transversal.
Estimador: Antes y Despus. En trminos del Grfico N 32, el estimador antes y despus
resulta de comparar la situacin de los beneficiarios del proyecto antes del proyecto (E) con su
situacin despus de haber pasado por el proyecto (A). En este caso se usa como grupo de
control a los mismos beneficiarios en su situacin anterior al proyecto, siendo el estimador de
impacto el equivalente a (A-E). El supuesto detrs de la utilizacin correcta de este estimador es
que (E) logra aproximar bien la situacin de los beneficiarios en caso no hubieran participado en
el proyecto (B), lo cual requerira que no hubieran habido cambios en la situacin econmica en
general durante ese lapso. El problema de este mtodo radica en que tpicamente, la simple
comparacin antes y despus puede llevara a atribuir errneamente al proyecto cambios que se
hubieran dado en ese grupo de beneficiarios independientemente de su participacin en el
proyecto.
Estimador: Diferencia en Diferencias. El estimador de diferencia en diferencias resulta de
comparar las situaciones antes-despus de los beneficiarios con aquella de los controles. As, el
impacto del proyecto se estima mediante la siguiente frmula (A-E) (D-F). El supuesto detrs
de este estimador es que el cambio en la situacin de los controles (D-F) entre el momento
previo al proyecto y el momento posterior al proyecto es una buena aproximacin del cambio
que hubiesen experimentado los beneficiarios durante ese mismo perodo de no haber pasado
por el proyecto (B-E).
Estimador: Corte Transversal. El estimador de corte transversal slo toma en cuenta la
situacin de beneficiarios y controles despus del proyecto. Directamente el impacto se estima a
travs de A-D. Aqu, el supuesto es que D es una buena representacin de B. Esta metodologa se
utiliza en los casos en los que no hay informacin acerca del proyecto al inicio del mismo, (lnea
de base), y slo se puede recoger informacin luego del proyecto. Ntese que si las situaciones de
los beneficiarios y controles son similares en el perodo anterior al proyecto, el estimador de
diferencia en diferencias es equivalente al estimador de corte transversal.

Grfico 8.2 Estados posibles para beneficiarios y controles

99

Antes del proyecto

Beneficiarios

E: Situacin antes
del proyecto

Despus del proyecto


A: Estado de tratamiento
B: Estado de no tratamiento

Controles

F: Situacin antes
del proyecto

C: Estado de tratamiento
D: Estado de no tratamiento

Situaciones observables

7.2

Situaciones no observables

Diseos experimentales26

El diseo experimental es considerado como el enfoque metodolgico ms robusto para la


construccin del escenario contrafactual en evaluacin de impacto. La aplicacin de esta
metodologa requiere que la seleccin de beneficiarios y no beneficiarios del proyecto se realice
aleatoriamente, lo cual garantiza que los grupos sean comparables. Los grupos de tratamiento
se diferencian en los componentes o combinacin de componentes que reciben del proyecto. En
general, en una evaluacin de impacto se pueden conformar mltiples grupos de tratamiento, los
cuales son comparados con el grupo de control que no recibe ninguno de los componentes del
proyecto.
Todos los diseos experimentales deben realizar una medicin de la variable de impacto tanto
del grupo de tratamiento como del grupo de control en la situacin con proyecto, es decir, una
vez los beneficiarios (grupo de tratamiento) han recibido los beneficios del proyecto. Adems,
frecuentemente los diseos experimentales tambin realizan una medicin de la variable de
impacto en la situacin sin proyecto, una vez realizada la aleatorizacin, pero antes de iniciar la
operacin del proyecto. Esta medicin ex-ante se denomina lnea de base de la evaluacin y
permite robustecer las conclusiones de la evaluacin al verificar si la aleatorizacin fue exitosa,
generando adems informacin complementaria acerca de la magnitud y distribucin del
problema a solucionar. Otra alternativa es realizar repetidas mediciones de la variable de
impacto en la situacin con proyecto en diferentes momentos para determinar exactamente
cuando el proyecto genera los efectos en los beneficiarios, su evolucin, y sostenibilidad.
Finalmente, aunque la confiabilidad y validez de las estimaciones realizadas a partir del diseo
experimental es alta, existen serias restricciones que dificultan la aplicacin de este diseo en la
evaluacin de impacto de proyectos sociales. Uno de los problemas ms discutidos es s este tipo
de diseo sera moralmente aceptable. Por ejemplo, restringir la participacin de personas que
cumplen con todas las condiciones de acceso a un programa social podra poner en peligro la
salud de esas personas o incluso su vida podra convertirse en un problema de carcter moral.
En el siguiente recuadro se describen otros inconvenientes y restricciones de los diseos
experimentales
26

La mayor parte del presente seccin y las siguientes han sido tomadas de las publicaciones del ILPES,
especialmente de las siguientes: Manual para la Evaluacin de Impacto de Proyectos y Programas de Lucha
contra la Pobreza (Hugo Navarro, 2005) y Pauta Metodolgica de Evaluacin de Impacto Ex ante y Ex post de
Programas Sociales de Lucha contra la Pobreza (Hugo Navarro y otros, 2006).
100

Limitaciones del diseo experimental


1. Puede ser polticamente difcil proporcionar una intervencin a un grupo y no a otro.
2. Durante el experimento, los individuos en los grupos de tratamiento o control
podran cambiar determinadas caractersticas que los identifican, lo que invalidara
o contaminara los resultados. Si, por ejemplo, las personas entran y salen de un
rea del proyecto, podran tambin entrar y salir del grupo de control o de
tratamiento. De manera alternativa, las personas a las que se les neg el beneficio
de un programa, podran buscarlo a travs de otras fuentes; o bien, aquellos a los
que se les ofrece un programa podran no estar interesados en la intervencin.
3. Quizs sea difcil asegurar que la asignacin se haga realmente al azar. Por
ejemplo, cuando los encargados del proyecto o programa excluyen a los
postulantes de alto riesgo para lograr mejores resultados.
4. Su aplicacin puede ser costosa y tomar bastante tiempo, particularmente en la
recopilacin de informacin.
Fuente: Baker (2000).

7.3

Diseos cuasi-experimentales

La segunda alternativa para construir el escenario contrafactual son los diseos cuasiexperimentales donde no es aleatoria la seleccin de los grupos de beneficiarios y no
beneficiarios. Al proyecto puede ingresar cualquier individuo interesado en participar, que
cumpla con los criterios de elegibilidad y focalizacin del proyecto, y al cual el proyecto este en
capacidad de atender. En el diseo cuasi-experimental una de las alternativas para seleccionar el
grupo de comparacin es el mtodo de pareo. El objetivo de este mtodo es encontrar o
identificar un grupo de individuos que no participaron en el proyecto pero cumplen con los
criterios de seleccin del proyecto y son similares a las personas que conforman el grupo de
tratamiento en aquellas caractersticas observables que podran incidir en la variable de impacto
del proyecto y en la decisin de los individuos de participar o no en el proyecto.
El pareo se puede realizar por individuo o por grupo. Cuando se utiliza el pareo por individuo se
busca que para cada beneficiario del grupo de tratamiento sea comparable con un no
beneficiario en el grupo de comparacin. Por su parte, el pareo por grupo es menos exigente,
requiere que el grupo de tratamiento y comparacin sean en promedio iguales. Segn Freeman,
Rossi, y Wright (1980), el pareo por individuos es ms preciso y arroja resultados ms confiables
que el pareo por grupo. Sin embargo, aunque el pareo por individuo es estadsticamente ms
deseable que el pareo por grupos, en general las evaluaciones de impacto utilizan ms el mtodo
agregado. Debido en parte a la disponibilidad de informacin, es difcil encontrar siempre un
individuo de comparacin para cada beneficiario que se encuentra en el grupo de tratamiento.
Esto conlleva a que un nmero significativo de observaciones en el grupo de tratamiento no
puedan ser utilizadas en las evaluaciones, disminuyendo la representatividad de la muestra.
Adicionalmente, el pareo por individuo es ms costoso en trminos de dinero y tiempo.
El mtodo de pareo es un procedimiento relativamente sencillo de aplicar cuando slo unas
pocas caractersticas de los individuos afectan la variable de impacto y la decisin de participar
en el proyecto. Sin embargo, en general los problemas que buscan resolver los proyectos sociales
estn determinados por ms de dos variables, lo cual dificulta la aplicacin del mtodo de pareo.
Cabe sealar que cuando el pareo no incluye todas las variables que determinan la variable de
impacto y la participacin en el proyecto podra existir sesgo en la estimacin del impacto. Esto
debido a que los grupos (tratamiento y control) no seran estadsticamente comparables.
101

Para facilitar la aplicacin del mtodo de pareo se han desarrollado modelos economtricos que
permiten controlar los efectos de n variables observables e identificar aquellos individuos que
son similares a las personas que conforman el grupo de tratamiento. Estos modelos estiman la
probabilidad de los individuos de participar en el proyecto a travs de modelos probit o logit,
utilizando como variables independientes una serie de caractersticas socioeconmicas de los
individuos relevantes al problema que se evala. Los individuos que no son beneficiarios del
proyecto y que su probabilidad de haber participado en el proyecto es similar a la de los
beneficiarios conforman el grupo de comparacin. Uno de los mtodos ms utilizados con este
propsito es el Propensity Score Mactching Method27.
La utilizacin del mtodo de pareo ofrece al menos dos ventajas En primer lugar, los grupos de
tratamiento y comparacin no tienen necesariamente que conformarse antes de iniciar la
operacin del proyecto. Utilizando estimaciones de la probabilidad de participacin en el
proyecto, estos grupos se pueden conformar a partir de informacin sobre la situacin con
proyecto de los individuos que participaron y no participaron en el proyecto.
La segunda ventaja, es que el mtodo de pareo no exige que se prohba el ingreso al proyecto a
individuos que hacen parte de la poblacin objetivo de la intervencin. Los individuos que
conforman el grupo de pareo generalmente son personas que por restricciones de cobertura o
tecnolgicas no hubieran podido tener acceso al proyecto bajo ninguna circunstancia. Por
ejemplo, usualmente se seleccionan reas geogrficas en donde el proyecto no se ejecut o
ejecutar.
Por su parte, la principal debilidad del mtodo de pareo para cuantificar el impacto de un
proyecto social es la existencia de diferencias no observables entre los grupos de tratamiento y
control, que generan un sesgo de seleccin. Este sesgo se genera por el hecho que el ingreso al
proyecto es una decisin del beneficiario y no de un proceso aleatorio. Esto implica, que las
personas que deciden ingresar al proyecto podran tener caractersticas no observables por el
evaluador que influyen en su decisin de participar y a su vez determinan la variable de impacto
del proyecto.
Un ejemplo clsico, es la motivacin. Generalmente, las personas que deciden ingresar al
proyecto tienen una mayor motivacin de mejorar sus condiciones socioeconmicas y, por lo
tanto, an si no hubieran participado en el proyecto, las condiciones de vida de estos
beneficiarios hubieran mejorado debido a que su motivacin les hubiera permitido encontrar
otras alternativas de solucin. Si al proyecto ingresan todas las personas con motivacin,
implica que en el grupo de comparacin slo hay personas sin motivacin. Esta diferencia hara
que los dos grupos no sean equivalentes y, por lo tanto, se sobre estime el impacto del proyecto.
Finalmente, otra alternativa usada por el diseo cuasi-experimental para seleccionar el grupo de
comparacin es comparar la situacin de los beneficiarios antes y despus de la intervencin.
Como ya se mencion este es el mtodo de comparaciones reflexivas. La lnea base conforma el
escenario contrafactual contra la cual se contrasta la situacin de los beneficiarios despus de
haberse ejecutado el proyecto. El supuesto general de este mtodo es que las condiciones de vida
de los beneficiarios no cambiaran en la ausencia del proyecto lo cual es difcil de suponer en
muchos proyectos sociales. Este diseo es principalmente utilizado en el caso de proyectos de
cobertura total en los que no es posible construir un grupo de control o comparacin. Por
ejemplo, en un proyecto nacional de alfabetizacin que tiene la infraestructura para beneficiar a
todas las personas analfabetas del pas, no es posible encontrar una muestra representativa de
personas analfabetas que no estn siendo capacitadas por el proyecto. En este caso, se evaluara
el impacto del proyecto comparando la tasa promedio de analfabetismo del grupo de
beneficiarios antes y despus del proyecto, controlando los factores externos que pudieran haber
incidido en el resultado.
27

Para una explicacin ms detallada ver Ravallion (1999)

102

7.4

Diseos no experimentales

A diferencia de los diseos experimentales y cuasi-experimentales, el diseo no experimental no


construye un grupo de control o comparacin para contrastar los cambios en el grupo de
tratamiento. En estos diseos el grupo de beneficiarios se compara con un grupo conformado
por no participantes que pueden cumplir o no los criterios de seleccin del proyecto. Es decir, no
necesariamente son beneficiarios potenciales del proyecto o parte de la poblacin objetivo de la
intervencin. As, es muy probable que este grupo de no participantes difiera del grupo de
tratamiento en aquellas caractersticas observables y no observables que determinan la variable
de impacto. Para eliminar las diferencias entre estos dos grupos se utilizan tcnicas
economtricas que usan una o ms variables (instrumentos) pertinentes a la participacin pero
no a los resultados de la participacin (Banco Mundial, 2003b).
En el cuadro adjunto se resumen las principales caractersticas de los tres tipos de diseos
utilizados en el anlisis cuantitativo del impacto generado por los proyectos sociales. Se puede
concluir que existe una relacin inversa entre la aplicabilidad de estos diseos y la confiabilidad
de los resultados que se pueden obtener al aplicar cada uno de los diseos. El diseo
experimental es el ms robusto estadsticamente, pero su aplicacin requiere de determinadas
condiciones que son difciles de encontrar en la prctica, y en especial en la implementacin de
proyectos sociales. Por su parte, los diseos cuasi-experimental generalmente arrojan
estimaciones menos precisas del impacto. Es decir, en estos diseos es ms probable la presencia
de factores diferentes al proyecto que estn subestimado o sobreestimando el verdadero
impacto de las intervencin. Sin embargo, su aplicabilidad es mayor debido a que los controles
que utiliza para construir el escenario contrafactual son ms flexibles y no interfieren con la
implementacin de los proyectos. En el caso de los diseos no experimentales, la construccin
del grupo de beneficiarios y no beneficiario es sencilla, pero se requiere el uso de sofisticadas
tcnicas estadsticas para remover el sesgo en las estimaciones de impacto.
Finalmente, se debe tener en cuenta que en muchas evaluaciones estos diseos ms que
sustitutos son utilizados como alternativas complementarias de evaluacin. Por ejemplo, un
proyecto puede evaluar uno de sus objetivos con un diseo experimental y los dems con
diseos no experimentales. Tambin, una evaluacin podra seleccionar aleatoriamente las reas
geogrficas en donde el proyecto se implementara (diseo experimental) y, luego, utilizar un
diseo cuasi-experimental para conformar los grupos de tratamiento y comparacin dentro de
cada rea.

7.5 Plan de evaluacin de impacto


La evaluacin de impacto de una intervencin se desarrolla, por lo general, de conformidad con
una secuencia que abarca los pasos que se especifican a continuacin.

A. Identificacin de los resultados


El primer paso consiste en identificar los resultados especficamente, los resultados en el nivel
de impactos- que sern evaluados. Lo ideal es que el evaluador identifique tantos efectos o
impactos como sea posible, con el fin de minimizar el riesgo de no considerar en la evaluacin de
impacto algn resultado relevante del proyecto. Para identificar los impactos se deber revisar el
marco lgico. Como ya se ha sealado en captulos anteriores, el marco lgico describe la
relacin causa-efecto a travs de cuatro eslabones que se convierten en los objetivos de la
intervencin: actividades (insumos), componentes (productos), propsito (beneficios de corto y
mediano plazo) y fin (beneficios de largo plazo). Para cada uno de estos objetivos, el marco
lgico define las metas a travs de indicadores inteligentes, las fuentes de informacin
disponibles para evaluar su cumplimento; y las condiciones externas a la intervencin que deben
cumplirse para el logro de la metas a nivel de insumos, productos, propsito y fin.

103

B. Seleccin de variables de impacto


Para ser evaluables, los posibles resultados de un proyecto deben tener un significado claro y ser
operacionalizados a travs de variables e indicadores que permitan su valoracin. Estas
caractersticas tienen especial importancia en los proyectos de reduccin a la pobreza dado su
carcter multidimensional. De Vaus (1986) propone los siguientes pasos para pasar de
conceptos abstractos y confusos a un conjunto de variables e indicadores que permitan evaluar
los efectos de la intervencin: (1) conceptualizar los posibles impactos del proyecto; (2)
identificar los diferentes aspectos o dimensiones que conforman el efecto a evaluar; (3)
seleccionar las variables de impacto para las dimensiones que sern evaluadas. Lo anterior
implica que el evaluador debe definir cada uno de los posibles efectos del proyecto teniendo en
cuenta las definiciones adoptadas por el proyecto. No existe razn para restringir la evaluacin a
un slo significado o definicin del efecto que se busca lograr, podran considerarse diferentes
significados.

C. Recopilacin de informacin
Es una de las actividades ms importantes en una evaluacin, debido a la alta incidencia de su
calidad en los resultados. En las evaluaciones de proyectos contra la pobreza esta actividad es
particularmente compleja debido a las caractersticas de los beneficiarios. Estos pueden ser
personas con bajo nivel de educacin, avanzada edad, con enfermedades crnicas, indigentes,
entre otros. Adems, generalmente existen restricciones de tiempo y presupuesto.

D. Anlisis de la informacin
Para cada indicador es necesario recolectar datos de alguna fuente que permita viabilizar la
evaluacin. En algunos casos, los datos ya estn disponibles, por lo que el trabajo se reduce al anlisis
de los mismos. En otros casos no existe data disponible, por lo que se tiene que disear y conducir un
estudio para obtener esos datos.
Fuentes primarias. Son aquellas fuentes en las que la informacin se encuentra en su origen, y por
lo tanto debe ser elaborada por primera vez y de forma especfica.
Fuentes secundarias. Son aquellas fuentes que ofrecen informacin ya elaborada, o existente, que
es generada anteriormente con otra finalidad y que, generalmente, no tiene por qu coincidir con los
objetivos institucionales.
Aunque los indicadores tienen un carcter eminentemente cuantitativo, en su realizacin se recurre
a mtodos cuantitativos y cualitativos, con la finalidad de optimizar la calidad de los hallazgos.
Tambin cabe precisar que, en primer lugar, es necesaria la revisin de la disponibilidad de
informacin pertinente de fuentes secundarias sobre las variables que queremos analizar. En
muchas ocasiones no es necesario realizar un estudio de campo debido a que la informacin
necesaria para establecer la lnea de base y las subsecuentes lneas de salida puede ser obtenida de
estas fuentes.

104

E. Elaboracin del Informe


El ltimo paso es la elaboracin del informe. En su elaboracin se debe tener en cuenta que este
debe ser considerado como parte de una estrategia de difusin ms amplia sobre los resultados
del proyecto, en la cual se debe incorporar distintos elementos, tales como presentaciones para
diversos pblicos, comunicados de prensa, publicaciones virtuales y folletos de difusin dirigidos
a la propia poblacin beneficiaria y a los informantes que contribuyeron a la elaboracin del
informe.

105

Formato 6. INFORME DE EVALUACIN DE IMPACTO

DATOS GENERALES
Objetivo del proyecto

1.1
Indicar el objetivo general del proyecto
Resultados esperados
1.2
Indicar los productos que se espera obtener con la ejecucin del proyecto.
Duracin del proyecto
1.3
Indicar el periodo de ejecucin y el periodo de evaluacin del proyecto
Poblacin objetivo
1.4

Indicar caractersticas demogrficas ms importantes del la poblacin beneficiaria (nmero,


edad, sexo, ubicacin, etc.).
Breve descripcin del proyecto

1.5
Describir brevemente componentes, fuentes de financiamiento y fases del proyecto.
2

METODOLOGA
Definicin de variables

2.1

Explicitar las variables sobre las cuales se va a explicitar el impacto, as como las variables de
control.
Muestra

2.2

Describir en trminos estadsticos las caractersticas del grupo beneficiario y el grupo de


control, sealando si el muestreo es probabilstico o se utilizaron criterios predeterminados
para la asignacin de los sujetos a los grupos.
Diseo

2.3

Describir brevemente el diseo de evaluacin: experimental, cuasi experimental o no


experimental.
Impacto del proyecto
Lneas de base y de salida

3.1

Muestran los valores que adoptan las variables antes de la puesta en marcha del proyecto,
tanto para el grupo beneficiario como el grupo de control.
Lneas de salida
Muestran los valores de las variables al final del periodo de evaluacin, para el grupo
beneficiario y el grupo de control.
Estimacin del impacto

3.2
Se refiere a las diferencias registradas en los grupos que pueden ser atribuibles al proyecto.
Otros efectos del proyecto
3.3

Sealan los efectos del proyecto sobre variables adicionales, que no constituyen el objetivo
primordial del mismo.

EVALUACION ECONOMICA

4.1

Costos del proyecto

106

Muestra en forma sucinta la estructura de costos del proyecto, tanto los inversin y de
operacin del proyecto.
Beneficios del proyecto
4.2
Se refiere a los beneficios percibidos directamente por los beneficiarios del proyecto.
Factor de actualizacin
4.3

Explicar el factor de actualizacin a utilizar. Para los proyectos sociales es usual emplear
0.11.
Valor Actual Neto

4.4

Compara los costos y beneficios llevados a valor presente segn el factor de actualizacin
especificado. Si el resultado es mayor que cero el proyecto result rentable.
Tasa Interna de Retorno

4.5

Proporciona la tasa de rentabilidad intrnseca del proyecto, que se debe comparar con la tasa
de rentabilidad mnima exigida. Si la TIR es mayor, la evaluacin del proyecto es positiva.
Costo Efectividad

4.6

Para los proyectos cuyos beneficios son difciles o imposibles de medir se hace uso de
indicadores de efectividad. El valor del ndice se obtiene como el cociente del valor actual de
costos sobre el valor que presente el indicador de efectividad.

Conclusiones y recomendaciones
Se hace una valoracin de los resultados cuantitativos obtenidos. Se evala la pertinencia de
la metodologa empleada y se mencionan los factores que actuaron a favor del proyecto y los
que dificultaron el mismo. Finalmente, se presentan sugerencias acerca de futuras lneas de
accin en el campo del proyecto.

107

Captulo 8. Anlisis de Sostenibilidad


Se entiende por sostenibilidad a la capacidad de un proyecto, no para continuar
indefinidamente, sino para generar beneficios duraderos para la poblacin
beneficiaria. Estos beneficios deberan ser vigentes por un amplio periodo de tiempo,
ms all del trmino del proyecto mismo o de la cooperacin tcnica o financiera
obtenida para coadyuvar a su ejecucin. Por ello, es importante que durante el
diseo del proyecto se realice un riguroso anlisis que permita identificar los
mecanismos internos a travs de los cuales el proyecto generara beneficios
sostenibles.

8.1

Definicin de sostenibilidad

En el contexto de los proyectos de inversin pblica y de los proyectos sociales en general, la


sostenibilidad se define como la capacidad para generar beneficios duraderos, que permanezcan
vigentes incluso despus de que la intervencin haya concluido28. Los puntos clave a destacar en
la definicin de sostenibilidad son los siguientes:

La atencin se centra en mantener el flujo de beneficios en lugar del mantenimiento


del proyecto mismo. Los proyectos, por definicin, no son sostenibles, ya que son
acciones de carcter temporal, con fechas de inicio y trmino predeterminadas en los
correspondientes estudios de pre inversin y convenio de donacin.
El concepto de beneficio sostenible, por lo tanto, no necesariamente significa la
continuidad de las actividades financiadas por el Estado o por los organismos de
cooperacin internacional, ms all de un periodo razonable de tiempo.

El anlisis de sostenibilidad es un proceso encaminado a maximizar y dar continuidad al flujo


de beneficios para la poblacin. Debe ser un proceso permanente y debe ser actualizado segn
las cambiantes circunstancias del entorno. La sostenibilidad debe ser una caracterstica esencial
de todos los proyectos, con la excepcin de determinadas formas de ayuda como las acciones de
emergencia y socorro humanitario. Cabe destacar, sin embargo, que no existe una nica manera
de lograr la sostenibilidad, sino que cada proyecto debe definir su propia estrategia de
sostenibilidad, segn las circunstancias especficas internas y externas. El anlisis de
sostenibilidad de un proyecto consiste, pues, en determinar si ms all del logro de sus
objetivos, es posible que los impactos positivos continen despus que la intervencin o el
financiamiento externo hayan finalizado.
Sostenibilidad
Sostenibilidad es la capacidad de un proyecto para generar beneficios duraderos, con
una vigencia por lo menos mayor al periodo de ejecucin del proyecto.

8.2

28

Factores incidentes en la sostenibilidad

Vase, Quality Assurance Group PIA/OPRE, Promoting Practical Sustainability. Australian Agency for International
Development (AusAID), Canberra, September 2000.

108

Los factores clave que afectan la sostenibilidad de los proyectos, segn la experiencia nacional e
internacional, son los siguientes:

El marco de polticas pblicas o marco regulatorio (sostenibilidad poltica).


La participacin de la poblacin y empoderamiento (sostenibilidad social).
La gestin y arreglos institucionales (sostenibilidad institucional).
La gestin financiera (sostenibilidad financiera).
El desarrollo de mercados (sostenibilidad econmica).

Estos factores son aspectos conformantes de la calidad general de los proyectos y son, al mismo
tiempo, factores que especficamente afectan la sostenibilidad de las intervenciones.
Sostenibilidad poltica
Un proyecto no puede ser separado del contexto en el que tendr lugar. Los vnculos entre el
proyecto y los objetivos de desarrollo deben ser establecidos desde el inicio de la intervencin.
Las investigaciones realizadas por organismos calificados, como el BID y el Banco Mundial,
indican que los proyectos funcionan mejor en ambientes con pocas distorsiones que en
ambientes altamente distorsionados. Por ello, las polticas pblicas, o ms especficamente, el
marco regulatorio sectorial, pueden tener un impacto significativo sobre la sostenibilidad del
proyecto.
Dado que los proyectos se ejecutan dentro de un entorno ms amplio de polticas, un marco
compatible con los objetivos del proyecto es un factor clave en la promocin de sostenibilidad. El
marco de poltica, por lo tanto, debe ser analizado cuidadosamente durante el diseo del
proyecto. Si es necesario, podran incluirse reformas o mejoras de las polticas como parte de los
componentes del proyecto. Alternativamente, las entidades de financiacin pueden establecer en
calidad de condiciones previas o condiciones de efectividad de un proyecto, la aprobacin por
parte del pas receptor de la ayuda de un conjunto de polticas compatibles con la naturaleza de
la intervencin.

Sostenibilidad social
Otro factor crtico en la promocin de sostenibilidad es el papel de las partes interesadas o
involucrados, en particular los directamente relacionados con la intervencin, especialmente los
beneficiarios directos. La sostenibilidad no puede lograrse sin su participacin y apoyo. Los
beneficiarios, tanto hombres como mujeres, deben participar activamente en tener la
oportunidad de influir en la direccin y los detalles de diseo y ejecucin. Los beneficiarios
debieran apropiarse del proyecto, a fin de que este tenga garantizada su sostenibilidad.

Sostenibilidad institucional
Cuando las actividades previstas en el proyecto integran y se basan en las estructuras existentes
de gestin local, tienen mejor perspectivas de sostenibilidad de los beneficios que aquellas que
implican el establecimiento de nuevas estructuras o estructuras paralelas. La capacidad de los
organismos locales para gestionar (o absorber) nuevas estructuras o sistemas no suele ser
adecuadamente evaluado. Es frecuente observar un exceso de supuestos optimistas en la etapa
de diseo de la intervencin.
Obtener la estructura de gestin "correcta" requiere un adecuado anlisis institucional del
proyecto, tanto durante la fase de diseo, como en la etapa de evaluacin ex post, como parte del
proceso de extraccin de lecciones que permita mejorar la calidad de las futuras intervenciones.

Sostenibilidad financiera

109

La sostenibilidad financiera est directamente relacionada con la posibilidad de contar con los
recursos necesarios y suficientes para sufragar los costos recurrentes o costos operativos
generados por el proyecto. Los costos operativos son aquellos en que se incurre durante el
proceso de produccin del bien u operacin del servicio correspondiente al objetivo del
proyecto, una vez realizada la inversin.
Debe observarse que los costos operativos relevantes son los costos operativos incrementales,
que resultan de la diferencia entre los costos operativos que se generan con la ejecucin del
proyecto (situacin con proyecto) menos los costos operativos que se proyectan si es que el
proyecto no fuera implementado (situacin sin proyecto). En esta perspectiva, cuando un
proyecto es fruto de un acuerdo de cooperacin de una entidad pblica nacional con un
organismo internacional, se deben considerar, entre otros, los aspectos siguientes:

Proporcionar un nivel adecuado de la financiacin directa de los costos operativos


durante un perodo prolongado de tiempo utilizando una escala descendente de las
contribuciones.
Incorporacin de contratos especficos de mantenimiento y otro tipo de acuerdos en el
mbito del proyecto.
Obtencin del compromiso de los donantes a colaborar dentro de un determinado
sector.

Costos de operacin
Los costos de operacin son generados durante el periodo en el que el proyecto se
encuentra en funcionamiento y constituyen un elemento clave para la sostenibilidad
financiera del proyecto. En efecto, para mantener la operatividad de los servicios es
necesario cubrir los costos de operacin y mantenimiento. De lo contrario, el proyecto en su
conjunto (esto es, la inversin total comprometida en la intervencin) afrontara el riesgo
inminente del fracaso.

Sostenibilidad econmica
La clave de la sostenibilidad econmica consiste en el desarrollo de mercados que permitan una
provisin permanente e independiente del Estado de los servicios que el proyecto gener
inicialmente o que sern demandados en el futuro en el contexto de la operacin y
mantenimiento de las capacidades generadas por una intervencin.
Existen muchos ejemplos de relaciones mutuamente beneficiosas de participacin del sector
privado en el desarrollo. Estos incluyen el papel de las empresas privadas en la construccin de
obras de infraestructura vial, la participacin de las empresas privadas en la atencin de casos
de enfermedades, tales como el VIH/SIDA y, en general, en la provisin de servicios de salud. En
trminos ms generales, puede mencionarse, tambin, el papel de ONG y las iglesias en el
desarrollo de la educacin. La clave est en identificar la complementariedad entre el sector
privado y el Estado. Por ello, todo proyecto debe sensibilizar al beneficiario acerca de la
necesidad y beneficio de contar con el servicio pertinente, de manera particular, en el futuro.
Para esto se deber establecer medidas para potenciar la contribucin del proyecto en el
desarrollo de un mercado privado de provisin de los bienes o servicios pertinentes.

110

8.3

Condiciones de sostenibilidad

La realizacin de un riguroso anlisis de sostenibilidad, implica realizar estudios relacionados a


los aspectos siguientes: 29

Arreglos institucionales
En este acpite del proyecto se debe sealar las consideraciones que se deben tener en cuenta,
desde el punto de vista institucional y de gestin, para lograr el xito del proyecto. Se debe
mencionar los roles y competencias de cada uno de los participantes comprometidos con el
proyecto, as como su compromiso, a fin de garantizar la sostenibilidad del proyecto. Los
participantes del proyecto deben estar claramente identificados, sealando los compromisos de
cada uno de ellos. Los compromisos de los actores involucrados deben demostrarse, por
ejemplo, mediante algn documento: (i) convenios; (ii) disponibilidad de recursos; (iii)
compromisos de compra y venta; (iv) autorizaciones de las administraciones locales; y, (v)
compromisos de la poblacin.

Esquema de financiamiento de la inversin


En este rubro se debe especificar las fuentes y su participacin dentro del financiamiento de las
inversiones tales como el gobierno nacional, gobiernos regionales y locales, organizaciones de
beneficiarios y entidades de cooperacin internacional, entre otros. Asimismo, es necesario que
se establezcan las condiciones del financiamiento, especificando si son recursos propios,
donaciones o prstamos. En este ltimo caso se debe especificar las condiciones financieras de
la misma (plazo, periodo de gracia, inters, comisiones, periodos de repago si son mensuales,
semestrales, anuales u otro).

Participacin de los beneficiarios


Los estudios de este tipo tienen por objeto hacer explcito los momentos y formas de
participacin de los beneficiarios del proyecto, desde la etapa de identificacin hasta la fase de
operacin del mismo. Por ejemplo:

En la fase de pre-inversin: participacin en la formulacin, identificando el problema y


seleccin de alternativas.
En la fase de inversin: mano de obra no calificada, acarreo de materiales, etc.
En la fase de operacin: administracin del servicio y pago de cuotas de mantenimiento,
entre otros.

Una evaluacin de esta participacin puede facilitarse si se hace referencia a las formas de
organizacin tradicionales de la poblacin o si recin, con base al proyecto, se organizar la
poblacin. El aprovechamiento de las capacidades organizativas de la poblacin redundar en el
xito del proyecto.

8.4

Matriz de sostenibilidad

El anlisis de sostenibilidad de un proyecto puede ser realizado de forma relativamente rpida


mediante el uso del instrumento denominado Matriz de Sostenibilidad. Esta matriz comprende
las columnas siguientes:

29

Ministerio de Economa y Finanzas, Direccin General de Programacin Multianual del Sector Pblico, Gua
metodolgica para la identificacin, formulacin y evaluacin de proyectos de saneamiento bsico en el mbito
rural, nivel perfil, Lima, 2007.
111

Factores de sostenibilidad. En esta columna se deben anotar todos los elementos que
podran influir en la sostenibilidad del proyecto bajo evaluacin. Por ejemplo:
sostenibilidad poltica, sostenibilidad social, sostenibilidad institucional, sostenibilidad
financiera, sostenibilidad econmica.

Incidencia sobre la sostenibilidad. En esta columna se anota, para cada factor de


sostenibilidad, los elementos especficos que incidirn en el proyecto. Por ejemplo,
respecto de la sostenibilidad poltica, se indican las normas que podran apoyar la
sostenibilidad del proyecto.

Estrategia recomendada. Esta columna consigna breves resmenes sobre las


estrategias recomendadas en cada uno de los factores de sostenibilidad.

Probabilidad de ocurrencia. En esta columna se debe establecer la probabilidad de que


se ponga en marcha la estrategia recomendada, incluyendo las normas, medidas
administrativas, disposiciones presupuestales y otros aspectos. Se puede utilizar como
medio de calificacin una escala de Lickert: muy probable, probable, indiferente, poco
probable e improbable.

Efectos esperados. En esta columna se debe anotar los efectos que las estrategias
recomendadas tendrn sobre las perspectivas de sostenibilidad del proyecto.

El llenado de la matriz, que es ilustrada mediante la Tabla 23, permite contar con una opinin
slida sobre el grado de sostenibilidad del proyecto, lo que a su vez permitir tomar una
decisin informada sobre la conveniencia de ejecutarlo, aprobarlo o postergar su ejecucin.

Cuadro 9.1. Matriz bsica de la estrategia de la sostenibilidad


Factores de
sostenibilidad

Incidencia sobre la
sostenibilidad

Estrategia
recomendada

Probabilidad de
ocurrencia

Efectos
esperados

Sostenibilidad
poltica
Sostenibilidad
social
Sostenibilidad
institucional

Sostenibilidad
financiera
Sostenibilidad
econmica

8.5

Concepto de empoderamiento

En el contexto de la cooperacin internacional, el concepto de empoderamiento es parte


intrnseca del proceso de diseo de un proyecto teniendo en cuenta sus perspectivas de
sostenibilidad. En general, el empoderamiento se considera un factor medular para la reduccin
de la pobreza. Puede ser un instrumento para elevar el ingreso de los pobres, as como tambin
un medio para incrementar sus activos, humanos o fsicos. En general, el empoderamiento es
una nocin relacionada con la capacidad que tienen las personas para moldear sus vidas. Existen
112

tres tipos de inversin que son de particular importancia para el empoderamiento de los pobres:
inversin en educacin, provisin de seguridad social y promocin de la participacin e
inclusin econmica y social.
La educacin bsica es una condicin crtica para la inclusin social y el incremento de la
productividad. Una fuerza laboral educada incrementar el nivel de crecimiento que se obtiene
con un buen clima de inversin, as como tambin aumentar notablemente la reduccin de la
pobreza que dicho crecimiento puede provocar. La provisin de seguridad social puede ser vista
como una dimensin del empoderamiento, en la medida que permite a las personas adaptarse y
recuperarse de los shocks econmicos. Pero la seguridad social debera ser vista como algo ms
que simplemente un paliativo de corto plazo. Se trata de uno de los cimientos esenciales de una
economa de mercado, el cual le permite funcionar adecuadamente e involucrar a la gente pobre
en las oportunidades que genera. Sin una buena seguridad social, la gente pobre puede no ser
capaz de enfrentar algunos riesgos que forman parte de la participacin en la economa de
mercado, an cuando hayan logrado crecer sostenidamente y proveerse de bienes materiales en
el mediano plazo.
La tercera dimensin del empoderamiento se refiere a la participacin e inclusin en las
organizaciones sociales, desde grupos de crdito de autoayuda y asociaciones de usuarios de
agua, hasta en la provisin de servicios de salud y la toma de decisiones en el gobierno de las
escuelas. Segn seala Nicholas Stern en su libro Una Estrategia para el Desarrollo, estas
dimensiones del empoderamiento educacin, seguridad social e inclusin - son las que
aceleran la conexin entre el crecimiento y la reduccin de la pobreza, y que convierten el simple
crecimiento en un crecimiento con equidad social.

113

Captulo 9. Cuestionario de la Encuesta

El cuestionario es el formulario que contiene las preguntas clave relacionadas a las


variables e indicadores de la lnea de base y cuyas respuestas de los encuestados se
convertirn en datos para el anlisis y ulterior redaccin del informe del ELB. El diseo
del cuestionario incluye su codificacin a los efectos de facilitar su posterior
organizacin en una base de datos con el uso de un software especializado. Si bien
preguntar es relativamente fcil, hacer buenas preguntas es un arte que requiere
creatividad y experiencia. Para el diseo apropiado del cuestionario en el presente
estudio se han tomado en consideracin tres requisitos bsicos: definir correctamente
el problema a investigar, formular de forma precisa las hiptesis (ambos basadas en el
estudio de pre inversin aprobado del proyecto) y especificar adecuadamente las
variables y sus correspondientes escalas de medida.

9.1 Cuestionario del Estudio


En el marco del ELB, el cuestionario es un conjunto articulado y coherente de preguntas redactadas
en un documento para el relevamiento de la informacin necesaria cuya finalidad es medir las
variables de inters y realizar los anlisis correspondientes. El cuestionario desempea las
funciones esenciales siguientes:

Traslada los objetivos del estudio a preguntas concretas que sern respondidas por las
personas encuestadas o, en general, por las unidades muestrales.
Homogeniza la obtencin de informacin, en razn de que todos los encuestados
respondern a los mismos tems, ya que el cuestionario se formula para todos por igual.
Ayuda a que la construccin de la base de datos y su tratamiento se realice con la mayor
celeridad posible, ya que facilita las tareas de codificacin de datos, almacenamiento,
tabulacin y posterior anlisis.

En trminos generales, la elaboracin del cuestionario se realice de conformidad con un


procedimiento estndar en los estudios que requieren recopilar informacin de fuente primaria. Los
pasos, tal como puede observarse en el grfico 6.1, son los siguientes: determinacin de variables
de estudio, seleccin del tipo de cuestionario, formulacin del contenido de las preguntas,
estructuracin del cuestionario, prueba piloto del cuestionario.
Al disear el cuestionario, se ha tomado en consideracin el hecho que una investigacin de campo
es tan buena como las preguntas que se formulan. Adems, se asume que el buen diseo de un
cuestionario requiere mucho ms que una gramtica correcta. Para que un cuestionario cumpla con
los objetivos de la investigacin, las preguntas deben satisfacer los criterios bsicos de pertinencia y
precisin. A tal efecto, se debe recordar que el diseo del cuestionario implica dar respuesta a las
interrogantes siguientes:

Qu se debe preguntar?

114

Cmo se deben redactar las preguntas?


En qu secuencia se deben disponer las preguntas?
Qu esquema de cuestionario servir mejor a los objetivos del estudio?
Como revisar el cuestionario antes de su aplicacin definitiva a las unidades muestrales?

En el contexto del presente estudio, las preguntas del cuestionario son los instrumentos de
recopilacin de datos sobre las variables de inters (y complementariamente variables de control),
en el caso de que se trate de variables que requieran informacin de fuente primaria.

Grafico 6.1 Fases para desarrollar un cuestionario

1
Determinacin de variables
de estudio

2
Seleccin del tipo
de cuestionario

3
Formulacin del contenido
de las preguntas
4
Estructuracin del
cuestionario

5
Prueba piloto
del cuestionario

Relevancia y precisin del cuestionario


Un cuestionario es relevante segn el grado hasta el cual toda la informacin recabada
mediante las preguntas planteadas ayudar al anlisis de la variable de estudio. Un escollo
comn es hacer una pregunta errnea o que no es relevante. El investigador debe ser especfico
acerca de los datos que necesita y tener una razn fundamental para cada rubro del que solicita
informacin
Una vez determinado lo que se debe preguntar, el criterio de precisin se convierte en la
preocupacin central. Precisin significa que la informacin es confiable y vlida. Aun cuando, por

115

lo general, se cree que el cuestionario debe ser sencillo, comprensible, imparcial, sin ambigedades
y sin palabras irritantes, no es posible generalizar un procedimiento paso a paso para asegurar la
precisin en la redaccin de las preguntas. La obtencin de respuestas precisas de los participantes
depende en gran medida de la capacidad del investigador para disear un cuestionario que facilite
la recordacin y motive a los participantes a cooperar. stos tienden a ser ms cooperativos cuando
el tema les interesa. Si las preguntas no son largas, difciles de responder o amenazantes para el
ego, hay ms probabilidad de obtener respuestas imparciales.

116

9.2 Determinacin de variables de estudio


Las preguntas que contiene un cuestionario estn determinadas por los objetivos del estudio, que
pueden ser medir desempeo, actitudes u opiniones, de temas objetivos (cuya existencia es
independiente de las personas, como son los equipos y el software, por ejemplo) o de temas
subjetivos (como son las actitudes, conocimiento y costumbres). En primer lugar, se fijan los
objetivos de investigacin, lo que determina qu informacin debe recogerse y cmo va a resumirse
a travs de determinados indicadores. Paralelamente, debe seleccionarse la tcnica idnea para
tratar la informacin. Cada tipo de datos exige una tcnica de anlisis, y cada estudio necesita
aplicar la tcnica idnea. La informacin que se puede recoger para una investigacin se materializa
en:

Hechos, o desempeo objetiva e inequvocamente contrastables y verificables. Por


ejemplo; cunto tiempo toma una accin de fiscalizacin, quin realiza la fiscalizacin, como
se realiza la fiscalizacin, etc.
Conocimientos. Una investigacin puede ir encaminada a valorar el conocimiento de una
norma, un procedimiento o una determinada funcin.
Opiniones o juicios. Se pueden realizar estudios para conocer opiniones. Por ejemplo, qu
piensan los ciudadanos de la metodologa de verificacin de los documentos sujetos a
control.
Actitudes. Una actitud es una predisposicin favorable o desfavorable hacia una persona,
cosa, organismo o procedimiento de trabajo. La informacin que se busca recopilar con los
estudios de actitudes est relacionada a la percepcin sobre la imagen, valoracin de las
cosas o entes y la razn de las conductas.
Motivos o explicacin de conductas concretas. En los cuestionarios se puede pregunta
el porqu de las conductas; por ejemplo, por qu se ha realizado determinada accin de
fiscalizacin o por qu se prefiere un determinado procedimiento.
Posibles conductas futuras. Se podra preguntar si se incrementara la productividad, o
no, en el caso de que se realicen determinados cambios sobre aspectos tangibles o
intangibles en el mbito laboral.

En el contexto del presente estudio, se busca medir un conjunto de variables relacionadas a los
resultados esperados del proyecto. Estas se encuentran clasificadas de conformidad tres tipos
bsicos: variables de impacto, variables de efecto y variables de producto. A su vez, las variables de
producto se subdividen de acuerdo con los componentes del proyecto: existen seis componentes
sustantivos, directamente vinculados con el logro del propsito del proyecto. Estos son los
siguientes:

Acceso a redes.
Accesos a equipos mviles.
Sistema de control integrado.
Sistema de control mediante video.
Normas y procedimientos.
Entrenamiento del personal.

Estas variables han sido clasificadas en dos categoras genricas: por un lado, aquellas que tratan
de aspectos objetivos (variables objetivas) del desempeo de la fiscalizacin, y por otro, aquellas
que tratan de los aspectos relacionados al comportamiento humano implicado en los actos de
fiscalizacin, tales como observancia de las normas y procedimientos, capacitacin y actitudes.
117

9.3. Seleccin del tipo de cuestionario


Una vez definida la naturaleza de la informacin que debe obtenerse, debe optarse por un diseo
de cuestionario. Existen diversas clases, en funcin del grado de concrecin de las preguntas, el
grado de autonoma para su cumplimentacin y la naturaleza de quien lo cumplimenta.

Grfico 6.2 Tipos de cuestionarios

Clases de
cuestionarios
Por la concrecin de
las preguntas

Por la autonoma de
quien responde

Por la naturaleza de
quien responde

Abiertos

Autoadministrado

Dirigidos a
personas

Cerrados

Con presencia de
encuestador

Dirigidos a
empresas

Semicerrados

Cuestionarios abiertos y cerrados


Una clasificacin muy operativa de cuestionarios se deriva del grado de concrecin de las
preguntas. En este sentido se puede hablar de dos tipos de cuestionarios:

Cuestionarios estructurados o cerrados cuando todas las preguntas estn cerradas.


Los cuestionarios son semiestructurados cuando se combinan preguntas cerradas y
abiertas.
Los cuestionarios se llaman no estructurados o abiertos cuando todas las preguntas estn
abiertas.

Lo ms frecuente es que los cuestionarios sean estructurados o semiestructurados. Los


cuestionarios los pueden cumplimentar las mismas personas que proporcionan la informacin.
Otras veces se leen las preguntas y los encuestadores o entrevistadores marcan las respuestas. Al
primer tipo de cuestionarios se les llama autoadministrados. Se emplean en encuestas postales y en
paneles. Se entregan personalmente o se envan por correo a quienes deban responderlos. Las
personas leen las preguntas y los cumplimentan. Tienen el atractivo de que no hace falta una red de
entrevistadores para recoger la informacin. La mayor desventaja de este mtodo radica en el
118

hecho que no es sencillo obtener la informacin puntualmente. Estos cuestionarios tienen que estar
perfectamente diseados; correcta y claramente redactados. Tambin deben ser muy fciles de
cumplimentar. Las normas que deben seguirse para su diseo son las siguientes:

Debe enviarse una carta que explique lo que se espera del encuestado. Se explicar la
finalidad de la investigacin. Es conveniente que la carta est personalizada.
Conviene explicar los criterios de seleccin de las personas.
Debe explicarse que el cuestionario es annimo.
Deben proporcionarse instrucciones claras para su cumplimentacin.
En lo posible deben utilizarse preguntas cerradas.
Las preguntas ms convenientes son las dicotmicas.
El diseo y presentacin debe ser atractivo, pues as aumenta la tasa de respuesta.

Otro mtodo, opuesto al cuestionario autoadministrado, lo constituyen los cuestionarios para


entrevistas telefnicas. Estos deben ser cortos, pues resulta difcil mantener a una persona al
telfono durante largo rato. Lo ideal es que sean respondidos en menos de diez minutos. La
introduccin de la entrevista debe hacerse rpida y eficazmente, para conseguir la colaboracin. El
tono de la voz de encuestador es muy importante. Las frases no deben ser largas para facilitar la
comprensin. Es muy importante seguir un orden en la formulacin de las preguntas, para no
confundir al encuestado.
En funcin de la naturaleza de la investigacin debe optarse por un tipo de cuestionario u otro. A
continuacin se expone la utilidad de los mismos.

Cuestionarios no estructurados. Se emplean cuando se desarrollan investigaciones


exploratorias. Los investigadores tienen conocimientos vagos sobre lo que van estudiar y no
son capaces de dar contenido a los cuestionarios. Son tiles para recoger informacin que
se emplear para disear cuestionarios con preguntas cerradas, o para que los
investigadores se familiaricen con el tema que deben investigar. Se utilizan en entrevistas a
domicilio, dinmicas de grupos y entrevistas en profundidad. Los cuestionarios no
estructurados se administran a muestras pequeas, poco representativas y no son
susceptibles de ser tratados estadsticamente, ya que la informacin que proporcionan es
bsicamente cualitativa.

Cuestionarios semiestructurados. Se aplican cuando se desea una mayor variedad de


respuestas o cuando stas no puedan preverse. A veces los investigadores no conocen la
totalidad de respuestas que pueden proporcionar las personas, porque es muy difcil
acotarlas todas, o porque no se tiene conocimiento suficiente. En estos casos se cierran las
preguntas que se pueda, y se deja la posibilidad de que las personas aadan alguna
respuesta. Se emplean en entrevistas personales y, ocasionalmente, en entrevistas por
telfono.

Cuestionarios estructurados. Se utilizan en investigaciones concluyentes; descriptivas y


causales. Por ejemplo, para medir la imagen de empresas, detectar un posicionamiento de
productos o segmentar un mercado con variables demogrficas. Estos cuestionarios
emplean escalas y se analizan con tcnicas cuantitativas multivariadas. Generalmente, las
personas que los cumplimentan han sido seleccionadas aplicando alguna tcnica de
muestreo. Se emplean cuando se requiere obtener informacin proporcionada por ms de

119

50 personas, dada las exigencias de cumplimiento de algunas hiptesis estadsticas, que


requieren unos tamaos de muestra mnimos. Para utilizar cuestionarios estructurados es
necesario que se puedan prever las respuestas con bastante exactitud. Se emplea en
encuestas en la calle, en casa, en establecimientos, por telfono o cuando deba ser
cumplimentado por el propio encuestado.
El cuestionario estructurado es fcil de responder. Es el tipo ideal de cuestionario autoadministrado.
Debe estar probado y depurado tras una serie de ensayos piloto. Se debe procurar que su
redaccin sea sencilla, inequvoca y que las escalas y categoras se adapten al nivel cultural y de
inteligencia de las personas que proporcionarn la informacin. Por ejemplo, las escalas multi-item
con ms de cinco categoras son muy complicadas para las personas mayores o muy jvenes.
Ocurre lo mismo con las mtricas o continas.

Cuadro 6.1 Clases de cuestionario segn el grado de concrecin de la preguntas

Cuestionarios abiertos

Cuestionarios semicerrados

Cuestionarios cerrados

Fin: obtener informacin


cualitativa.

Fin: medir hechos, actitudes,


conductas, preferencias, etc.

Fin: es medir hechos, actitudes,


conductas, preferencias, etc.

Se emplean en investigaciones
exploratorias.

Se emplean en investigaciones
exploratorias y concluyentes.

Se emplean en investigaciones
descriptivas y causales.

No contienen escalas.

Contienen escalas.

Contienen escalas.

No se emplean tcnicas de
muestreo.

Se emplean tcnicas de
muestreo.

Se aplican tcnicas de muestreo.

Se administran con presencia


fsica de un investigador.

Pueden administrarse con


presencia fsica de investigador o
ser autoadministrados.

Pueden administrarse con


presencia fsica de investigador o
ser autoadministrados.

Se emplean en entrevistas y en

Se emplean con fuentes

Se emplean con fuentes

dinmicas de grupos.

primarias estticas: encuestas


personales, telefnicas y
postales.

primarias: encuestas personales,


telefnicas, postales u otras.

La informacin se analiza
cualitativamente.

La informacin se analiza
cuantitativamente.

La informacin se analiza
cuantitativamente.

No tiene sentido inferir

Se pueden generalizar los

Se pueden generalizar los

resultados.

resultados.

resultados.

120

9.4

Formulacin del contenido a las preguntas

Para realizar una adecuada recopilacin de datos, es necesario que el cuestionario sea
cuidadosamente elaborado en contenido y forma para recoger la informacin relevante y necesaria.
Adems, debe estar redactado de forma que facilite su cumplimentacin y permita obtener una tasa
elevada de respuesta. Para ello, en su diseo debe definirse la codificacin ms adecuada de las
preguntas para su tratamiento posterior.
Clases de preguntas

Los tipos de preguntas que pueden incorporarse en el cuestionario se agrupan en diversas


categoras, en funcin de diversos criterios de clasificacin, tal como se muestra en el cuadro 6.2,
que se ofrece a continuacin.

121

Cuadro 6.2 Clases de preguntas

Criterio de Clasificacin

Clases de Preguntas

Libertad de eleccin de respuestas

Abiertas.
Cerradas.
Semicerradas.

Cantidad de respuestas y su relacin

Dicotmicas.
Respuesta mltiple.
Bateras de preguntas.

Fines de las preguntas

Filtro.
Control.
Obtener informacin.

Forma de realizarse

Directas.
Indirectas.

Por la libertad de eleccin


Preguntas abiertas. En ellas el encuestado responde libremente. Este tipo de preguntas se emplea
en las fases previas a la elaboracin de un cuestionario cerrado. Sirve para encontrar posibles
actitudes, motivaciones, opiniones, conductas, etc. Tambin se emplean en entrevistas en las que
las personas por sus caractersticas puedan dar una informacin muy rica en matices. Las
preguntas abiertas suelen utilizarse para preparar cuestionarios cerrados y elegir las modalidades
de respuesta. Sin embargo, las preguntas abiertas no son recomendables cuando se aplican a
personas de nivel cultural o intelectual bajo.
Preguntas cerradas. En ellas las alternativas de respuesta estn limita- das. El encuestado marca
una, o varias, de las alternativas que se le ofrecen. Las preguntas cerradas son tiles en
cuestionarios que han de responderse con rapidez, o por telfono. No hacen pensar mucho y
resultan interesantes cuando no es necesario profundizar demasiado, o slo se trata de recoger
hechos, aunque tambin sirven para medir actitudes o motivaciones. Son las ms adecuadas para
personas con nivel cultural bajo, escasa memoria o con dificultades de comprensin. Por ser menos
fatigosas de responder que las preguntas abiertas pueden formar parte de cuestionarios ms largos.
Preguntas semicerradas. A travs de ellas se proporcionan alternativas de respuesta cerradas y
tambin se deja la posibilidad de que el encuestado responda libremente a alguna de las preguntas.
Constituyen un hbrido entre las preguntas abiertas y cerradas, con sus ventajas e inconvenientes.
Se utilizan cuando se sabe que existen pocas modalidades que contienen la mayor parte de las
respuestas, pero se desea una informacin exhaustiva.
Por la cantidad de respuestas y su relacin
Preguntas dicotmicas. En ellas slo existen dos alternativas de respuestas, mutuamente
excluyentes. Por ejemplo; se compra un producto o no se compra, se posee coche o no, etc. Las
preguntas dicotmicas son fciles de responder. El encuestado proporciona la informacin
rpidamente y con pocas posibilidades de sesgo, siempre que estn correctamente formulados.

122

Una pregunta dicotmica no debera sustituir a otras preguntas ms complejas o encadenadas. Por
ejemplo, no debera preguntarse Conteste s o no, ayer estuvo su televisor conectado ms cinco
horas y vio una pelcula de accin en TV1 y un programa cultural en TV2? Esta pregunta debera
desglosarse en tres, una por cada idea; si se vio la TV ms de cinco horas; si se vio una pelcula de
accin en TV1 y si se vio un programa cultural en TV2.
Preguntas con mltiples respuestas. Ante una pregunta o afirmacin se proporcionan varias
alternativas de respuesta. La pregunta con mltiples respuestas est cerrada, es inequvoca, fcil
de responder y fcil de codificar. Sin embargo, no es adecuada para estudiar motivaciones. Es
adecuada para conocer hechos, preferencias y opiniones.
Puede suceder que el nmero de alternativas de respuesta sea demasiado corto o elevado. En el
primer caso tal vez no se recoja toda la informacin que pudiera tener inters. Si fueran muchas las
alternativas los respondientes podran aburrirse. Adems es posible que esta pregunta pueda tener
mltiples respuestas, porque una persona puede practicar varios deportes. En estos casos la
codificacin es complicada. En tal caso, cada alternativa puede convertirse en dicotmica para
poder tabularla correctamente.
Preguntas en batera. Se llama as a una serie de preguntas relacionadas con un mismo tema, que
se integran y complementan.
Por los fines de las respuestas
Preguntas filtro. Son preguntas dispuestas de forma que se subordinen unas a otras. Una
respuesta afirmativa o negativa a una pregunta excluye o requiere la siguiente.
Preguntas de control. Su misin es verificar la coherencia entre las respuestas proporcionadas por
el encuestado. Las preguntas de control son muy tiles para eliminar cuestionarios por
incoherentes.
Por la forma de realizarse
Preguntas directas. Las preguntas directas se formulan para obtener respuestas directas, sin
rodeos. En una pregunta directa -y dicotmica- slo cabe s o no. Las respuestas a las preguntas
directas pueden cerrarse en los cuestionarios.
Preguntas indirectas. Las preguntas indirectas se formulan as porque de lo contrario sera ms
difcil obtener una respuesta. Se aplican principios de tcnicas proyectivas. Una pregunta directa
posiblemente dara lugar a una respuesta cuya credibilidad sera discutible, pues es demasiado
ntima para ser contestada a un extrao.
Cerrar las preguntas indirectas es difcil o incmodo, aunque es posible. Las preguntas indirectas
generan respuestas muy ricas en matices, que deberan recogerse en preguntas abiertas. Las
preguntas indirectas, por lo general, no se emplean en cuestionarios, sino en la aplicacin de
tcnicas cualitativas proyectivas. El cuadro 6.3 muestra caractersticas de algunos de los tipos de
preguntas que se han expuesto.

Cuadro 6.3 Caractersticas de las preguntas


123

Clase de pregunta

Caractersticas

Pregunta abierta

Recoge informacin con un mnimo de indicadores el encuestado.


Es til cuando la gama de respuestas es muy amplia.
Es ms costosa de codificar, tabular y analizar.
Los encuestadores deben registrar las respuestas de forma textual.
Los resultados dependen mucho de la calidad de las entrevistas.
Es fcil introducir sesgos al escribir las respuestas.

Pregunta dicotmica

Es muy fcil de preguntar y de responder.


Debe asegurarse que solo existan dos alternativas. No cabe el no sabe/no
contesta.
Muchos tipos de informacin solo admiten preguntar dicotmicas:
hombre/mujer; rural/urbano; compra/no compra.
Es ms difcil introducir sesgos que con otros tipos de preguntas

Preguntas cerradas

Son fciles de preguntar y tabular.


Suelen ser ms sencillas de preguntar que las preguntas abiertas.
Hay que estar seguro de incluir todas las alterativas posibles.

9.5

Estructuracin del cuestionario

Un cuestionario consta de tres partes: introduccin, cuerpo e identificadores.


Introduccin. En esta parte se explica lo siguiente.
1.
2.
3.
4.

Se identificar a quien haya encargado la investigacin, salvo que ste no lo desee.


Se explicar el objetivo de la investigacin.
Se explicar el mtodo de seleccin de las personas respondentes.
Si el cuestionario se cumplimentara cara a cara, el encuestador har un valoracin de la
idoneidad de la persona seleccionada para ser encuestada si sospechara que su deseo
colaboracin fuera dudoso.

Cuerpo. Es el conjunto de preguntas que se van a formular. Este conjunto de preguntas se puede
subdividir a su vez en tres tipos de preguntas:
1. De aproximacin, que suelen ser muy sencillas, poco comprometidas y que generan inters
en colaborar. A medida que se avanza en el cuestionario se puede aumentar el grado de
complejidad de su formulacin o contenido. Si las preguntas delicadas se colocan al principio
la posibilidad de una negativa a colaborar es mayor.
2. De transicin. Se formulan antes de las preguntas complejas. Se colocan entre las preguntas
de aproximacin y las complejas.
3. Complejas. Requieren mucha atencin, inters y juicio por parte de quien responde.

124

Identificacin. Los identificadores del encuestado son variables generalmente nominales que
permiten reconocer las caractersticas demogrficas o sociodemogrficas de quienes proporcionan
la informacin, y que son fundamentales para formar grupos o identificar segmentos homogneos.
Deben ir al final del cuestionario. Una vez que se ha respondido al cuestionario, la persona que lo
haya hecho comprende los objetivos de la investigacin, y entender mejor por qu se le piden
datos que la caractericen. Tras finalizar la recogida de informacin es ms fcil que se proporcionen
los identificadores, especialmente los relativos a edad, renta, estudios y actividad laboral.
Adems de lo expuesto conviene tener en cuenta dos aspectos ms: el orden de las preguntas y el
orden del cuestionario.
El orden de las preguntas no debe afectar a las respuestas. Esta es posiblemente la norma de
redaccin de cuestionarios ms difcil de aplicar. Lo deseable es que las respuestas que den los
encuestados no dependan para nada del orden en que se formulan. Cada pregunta debera ser
independiente de las anteriores.
El orden del cuestionario deber ser lgico. Las preguntas deben formularse por temas afines y
en orden de dificultad creciente. Cada pregunta debe conducir a la siguiente.

9.6

Evaluacin del cuestionario: prueba piloto

Una vez que se ha elaborado el cuestionario conviene hacer una valoracin del mismo. Para ello
debe darse respuesta a las siguientes preguntas de esta lista de comprobacin.

Responde el cuestionario a los objetivos de la investigacin?


Son necesarias todas las preguntas?
Podr el encuestado contestar a todas las preguntas?
Querrn los encuestados contestar a todas las preguntas?
Es fluido?
Es de una extensin razonable?
La secuencia de preguntas es correcta?
Se han incluido transiciones e introducciones?

Un cuestionario puede estar muy bien diseado y el encuestador ser excelente. No obstante,
siempre existe la duda sobre la veracidad de la informacin que se obtiene. Tres son las fuentes de
incertidumbre.

Quien responde tiene dificultad para expresarse o para comprender el cuestionario. Puede
ser por razones culturales o intelectuales. En general, los cuestionarios con preguntas
cerradas son los ms aconsejables para personas que tengan estas caractersticas en
grado medio o bajo. Cuando se trata de preguntas abiertas es ms difcil obtener
respuestas, porque obligan a un ejercicio mental. A veces el nmero de tems o de
categoras en cada uno de ellos pueden resultar excesivos, especialmente con personas
mayores o muy jvenes.
Quien responde tiene mala memoria. Este problema aparece con frecuencia cuando se trata
de personas de edad, pero tambin puede aparecer aisladamente en cualquier otra. Para
conseguir informacin fiable se puede acudir a listas u otros elementos visuales (fotos,
125

catlogos, etc.) que ayuden a recordar.


Quien responde puede ser reacio a contestar. Las razones pueden ser de diversa
naturaleza. Pueden ser inconscientes o irracionales pues tal vez el encuestado no pueda
dar argumentos sobre su negativa a responder. Otras veces pueden surgir barreras sociales
o de inadmisibilidad. Otras veces las personas tienden a dar respuestas socialmente
aceptadas, aunque internamente piensen lo contrario.

Una vez que se haya diseado el cuestionario este debe ser sometido a un grupo de personas para
efectuar una prueba. En una primera confeccin, es posible que no se acierte con aspectos
semnticos en las preguntas. Es decir, la redaccin del cuestionario puede no ser del todo correcta
o que no se comprenda bien. Es posible, tambin, que algunas preguntas importantes no se hayan
incluido, o no estn bien matizadas, o que haya un exceso de preguntas y algunas no sean
significativas.
Los defectos de contenido y/o forma que pudieran aparecer en el cuestionario se detectan mediante
pruebas piloto, dirigidas a pequeos grupos. Una vez subsanados los errores o perfeccionado el
cuestionario se podr dirigir a la totalidad de las personas que se considere oportuno que deben
responderlo. De esta manera se evita tener que repetir la investigacin por haber difundido un
cuestionario confuso o errneo.
En resumen, la prueba piloto del cuestionario persigue,

Eliminar ambigedades.
Eliminar preguntas superfluas.
Aadir al cuestionario preguntas relevantes.
Simplificar preguntas difciles.
Cambiar el orden de las preguntas para agilizar el flujo de respuestas.
Corregir la redaccin.
Eliminar faltas de ortografa.
Comprobar que los cdigos para grabar los datos ms adelante sean correctos.

En la prueba piloto se mide la consistencia interna del cuestionario, a travs de distintos


instrumentos metodolgicos de carcter estadstico. Las pruebas piloto se repiten las veces
necesarias hasta conseguir la mayor validez del cuestionario. Cuando sta se haya conseguido se
reproduce y se distribuye.

Finalmente, cabe sealar que como parte de la prueba piloto del cuestionario, ste ser aplicado en
dos puestos de control, uno relacionado a la fiscalizacin de tributos internos y otro relacionado a
tributos externos. El cuadro 6.5 ofrece un resumen del cuestionario, clasificando las preguntas en
funcin de las variables de estudio y stas, a su vez, relacionadas a los resultados esperados del
proyecto. Asimismo, se ofrece el detalle de las unidades de anlisis, unidades y escalas de medida
y categoras de respuesta que se prev para cada una de las preguntas.

126

Cuadro 6.4 Pautas para el desarrollo de cuestionarios

1. Evitar la
complejidad

Las palabras empleadas en los cuestionarios deben ser fcilmente


comprensibles para todos los encuestados. El investigador tiene la difcil tarea de
adoptar el lenguaje conversacional de las personas en los niveles educacionales
ms bajos. Se debe evitar la jerga de los altos directivos corporativos cuando se
entrevistas a minoristas o usuarios industriales.

2. Evitar las
preguntas que
sirven de gua y las
preguntas cargadas

Las preguntas que sirven de gua y las cargadas son una fuente importante de
prejuicio en su redaccin. Una pregunta que sirve de gua sugiere o lleva ciertas
respuestas que amenazan la validez del estudio. Una pregunta cargada sugiere
una respuesta socialmente deseable o emocionalmente cargada.

3. Evitar la
ambigedad

Los tems en un cuestionario a menudo son ambiguos debido a que son


demasiado generales, por lo que se debe ser tan especfico como sea posible.
Debe tenerse en cuenta que el significado de una pregunta puede no ser claro
porque el marco de referencia es inadecuado para interpretar el contexto de la
misma.

4. Evitar los
renglones de doble
efecto

Se hace referencia a una pregunta que cubre varios aspectos a la vez como una
pregunta de doble efecto y siempre se debe evitar. Es fcil cometer el error de
hacer dos preguntas en vez de una, es por eso que si se van a explorar dos
ideas, se merecen al menos dos preguntas, para no generar la innecesaria
confusin que resulta de la pregunta de doble efecto.

5. Evitar hacer
suposiciones

Los investigadores no deben colocar al entrevistado o encuestado en un


situacin que incluya una suposicin implcita en la pregunta. Otro error comn
es suponer que el participante haba pensado previamente en un aspecto del
tema a tratar.

6. Evitar las
preguntas
opresivas que
pueden poner a
prueba la memoria
del participante

Un simple hecho de la vida humana es que las personas olvidan. Los


investigadores que escriben las preguntas acerca de la conducta o los
acontecimientos pasados deben reconocer que ciertas preguntas le pueden
imponer ciertas exigencias a la memoria del participante. La redaccin de las
preguntas acerca de los acontecimientos pretritos requiere un es fuerzo serio
para minimizar los problemas asociados con el olvido.

Fuente: Barry J. Babin William G. Zikmund, Investigacin de Mercados (2009).


Elaboracin Propia.

127

ANEXO 4. GLOSARIO DE TRMINOS

Glosario de trminos
1. Accin. Unidad bsica de intervencin pblica en el desarrollo. En el contexto de las funciones
de Estado, las entidades pblicas ejecutan acciones que, por una parte, generan determinados
beneficios para la sociedad, denominados objetivos o resultados en el lenguaje administrativo,
que toman la forma de productos; y, por otra, demandan un costo fiscal. Las acciones
constituyen la unidad bsica de programacin fsica y financiera, y pueden ser de carcter
permanente o temporal, dando lugar a dos categoras de intervencin: actividades y proyectos.

2. Actividad (servicio). Accin de carcter permanente, organizada como un conjunto de


componentes y actividades interrelacionadas, destinada a mantener la operatividad de los
servicios pblicos existentes. Representa la produccin de los bienes y servicios que una entidad
pblica lleva a cabo de acuerdo con sus competencias, dentro de los procesos y tecnologas
vigentes.
3. Actividad (tarea). Son las acciones consideradas en el marco de los componentes de un
proyecto que implican la inversin de recursos con el fin de generar determinados productos o
resultados, en un tiempo determinado. Las actividades son las unidades bsicas de
programacin fsica y costeo de un proyecto.
4. Afijacin. Forma de distribuir las observaciones muestra les entre las diferentes partes o
estratos de la poblacin. Puede ser proporcional o no proporcional. Si es proporcional, cada
estrato debe estar representado en la muestra en la misma proporcin que en la poblacin de la
que ha sido extrada.
5. Aleatorio. Acontecimiento o suceso producido al azar. Su ocurrencia puede ser de- terminada
mediante clculo de probabilidades.

6. Alternativas. Diferentes formas de dar solucin a un problema; o lo que es igual, medios o


combinaciones de medios para alcanzar un objetivo. Los medios se expresan en los
componentes del marco lgico.
7. Anlisis beneficio - costo. Mtodo de evaluacin que consiste en comparar un indicador
monetario de los resultados del proyecto con el costo del conjunto de las actividades o
presupuesto de la intervencin. Puede realizarse en forma previa o posterior a la ejecucin del
proyecto.
8. Anlisis causal. Anlisis de relaciones causales mltiples entre variables observables y no
observables, utilizando modelos de ecuaciones estructurales, que se representan grficamente

128

mediante el anlisis de sendas (path analysis) y que tratan de estimar la magnitud de las
relaciones entre las variables. LlSREL y AMOS son programas estadsticos de anlisis causal.
9. Anlisis costo - efectividad. Mtodo de evaluacin que relaciona el costo del proyecto (o de
alguno de sus componentes) con indicadores no monetarios de los resultados obtenidos. Puede
realizarse en forma previa o posterior a la ejecucin del proyecto.
10.Anlisis de alternativas. Apreciacin crtica de los distintos medios para alcanzar el propsito
del proyecto desde los puntos de vista tcnico y econmico. La alternativa seleccionada se
cristaliza en el casillero de componentes del marco lgico. Grficamente, este anlisis se realiza
con el rbol de Objetivos.
11.Anlisis estadstico bivariable. Conjunto de tcnicas que estudian la relacin o asociacin
entre dos variables. Pueden considerarse, en algunos supuestos, como casos especiales o
simplificados de las tcnicas de anlisis multivariable. Son ejemplo de ellas las tablas y
coeficientes de contingencia, la correlacin entre rangos, la correlacin lineal, el anlisis de la
varianza y covarianza y el anlisis de regresin simple.
12. Anlisis estadstico multivariable. Conjunto de tcnicas estadsticas que estudian la
relacin entre ms de dos variables. El anlisis multivariable permite un mejor acercamiento a la
realidad en la que los fenmenos suelen ser multidimensionales. Las tcnicas que incluyen
suelen clasificarse en dos grandes grupos, segn analicen relaciones de dependencia o de
interdependencia entre variables.
13.Anlisis estadstico univariable. Conjunto de tcnicas de anlisis de una sola variable, como,
por ejemplo, la distribucin de frecuencias (tabulaciones simples), los promedios (media,
mediana y moda), las medidas de dispersin [varianza y desviacin estndar), medidas de
asimetra y de curtosis, tests estadsticos no paramtricos (test ji cuadrado, Mann- Whitney,
Wilconxon) y paramtricos (test t, test z).

14.Anlisis de involucrados. Identificacin de todos los grupos susceptibles de ser afectados


positiva o negativamente por la intervencin, sealando sus caractersticas ms importantes:
problemas, intereses, potencialidades, etc. Grficamente, este anlisis se realiza con la Matriz de
Involucrados.

15.Anlisis de problemas. Investigacin de la problemtica de la poblacin, con la intencin de


establecer el problema central, as como sus causas y efectos. Grficamente, este anlisis se
realiza con el rbol de Problemas.
16.Anlisis factorial. Conjunto de tcnicas estadsticas multivariables, como el anlisis de
componentes principales y el anlisis de factores principales, que sirven para revelar las
dimensiones o factores subyacentes en la asociacin existente entre variables. El anlisis de
componentes principales y el anlisis de factores principales producen resultados similares,
aunque se basan en modelos matemticos distintos.

129

17. Anlisis de riesgos. Anlisis o evaluacin de factores externos que podran afectar el logro de
los objetivos de un proyecto. El anlisis de riesgos se expresa en la columna de supuestos del
marco lgico.
18. Anlisis de sensibilidad. Anlisis de las relaciones existentes entre los resultados esperados
de un proyecto y las variables de las que dependen tales resultados. En el contexto del marco
lgico, el anlisis de sensibilidad implica establecer la relacin entre la columna de objetivos y la
de supuestos.

19. rbol de objetivos. Representacin en forma de diagrama de relaciones medio-fin del anlisis
de las alternativas de un proyecto. El rbol de objetivos se elabora a partir del rbol de
problemas, invirtiendo el sentido de las proposiciones.
20. rbol de problemas. Representacin en forma de diagrama de relaciones causa-efecto del
problema central que ser abordado por un proyecto. El rbol de problemas es una
representacin metafrica del anlisis del problema central, y supone contar con dos elementos
clave: marco terico apropiado y participacin de los involucrados clave.
21. Asociacin. Relacin entre variables. Puede reflejar una correlacin casual o, por el contrario,
una relacin causal, en la que una o varias variables dependen o son explicadas por una o varias
variables independientes o explicativas.
22. Atribucin. Imputacin de un vnculo causal entre los resultados esperados (u observados) y
una intervencin especfica. La atribucin est conceptualmente relacionada a la evaluacin de
impacto de un proyecto. En el contexto del marco lgico, el logro del propsito es atribuible a los
componentes (y sus correspondientes actividades), bajo ciertas condiciones del entorno.
23. Atributo. Caracterstica que describe a un sujeto, organizacin u objeto. En las personas los
atributos son las caractersticas demogrficas, socioeconmicas o psicogrficas que lo
distinguen. En un grupo u organizacin los atributos vienen dados por el tamao, naturaleza
jurdica, estructura organizativa, valor econmico, cifra de ventas, etc. Los atributos de un objeto
pueden ser muy variados: tamao, color, sabor, duracin, coste, etc.

24. Beneficiarios. Poblacin que recibir los productos, tangibles e intangibles, considerados en un
proyecto. Tambin denominado poblacin beneficiaria, grupo beneficiario, grupo objetivo o grupo
meta. En proyectos de investigacin y en los diseos de evaluaciones de impacto suele
denominrsele grupo de tratamiento o poblacin testigo.

25. Beneficiarios directos. Grupo especfico de la poblacin para beneficio del cual se emprende el
proyecto. El nmero de beneficiarios directos podra ser uno de los indicadores de efecto.

26. Beneficiarios indirectos. Grupo de personas que estn localizadas alrededor o en un rea muy
cercana de ejecucin de un proyecto, cuyos beneficios generados por el mismo son marginales
a los resultados esperados del proyecto.

130

27. Beneficio. En trminos financieros, es la ganancia neta que se obtiene de una inversin. En
trminos amplios, es el conjunto de mejoras logradas en las condiciones de vida de la poblacin
beneficiaria de un proyecto. En el contexto del marco lgico, los beneficios de un proyecto se
expresan en los indicadores de efecto e impacto.

28. Cadena de resultados. Conjunto jerarquizado de logros esperados de una intervencin. Los
resultados pueden ser expresados tanto en forma cualitativa como cuantitativa. Cualitativamente,
los resultados son: fin, propsito, productos y actividades. Cuantitativamente, los resultados se
expresan en indicadores de impacto, efecto, producto y proceso.
29. Causa. Problema social que determina y explica otro problema, hacia cuya solucin se orienta
un proyecto. El anlisis de problemas consiste, esencialmente, en un anlisis de las causas del
problema central abordado por un proyecto. Es una variable que produce un cambio en el
comportamiento de otra u otras variables.
30. Causalidad. Relacin entre dos variables en la que un cambio en una de ellas (variable
independiente o explicativa) produce un cambio en la otra (variable dependiente o a explicar).
Para probar la existencia de relacin causa-efecto entre dos variables, y no simple asociacin, es
necesario que se cumplan al menos tres condiciones: variacin concomitante (supone
asociacin o variacin conjunta entre las variables causa y efecto). Orden temporal de la
ocurrencia de las variaciones (la causa de un acontecimiento debe preceder a su ocurrencia) y
control sobre otros posibles factores causales.

31. Ciclo del proyecto. Conjunto de etapas que recorre un proyecto. Las principales etapas del ciclo
de proyecto son: pre-inversin, inversin y operacin. El ciclo de un proyecto se enmarca en el
ciclo ms amplio de gestin de una entidad pblica: planificacin, ejecucin y evaluacin.

32. Cierre del proyecto. Es el acto por el cual se da por finalizada la ejecucin del proyecto, en
concordancia con lo establecido en el estudio definitivo del proyecto. Puede elaborarse un marco
lgico ex post, que muestre la intervencin con los procesos ejecutados y los resultados reales.
33. Coherencia. En el contexto del marco lgico, se refiere a la existencia de una correcta relacin
de causa a efecto entre los distintos niveles de la cadena de resultados. Es la lgica vertical del
proyecto.

34. Componente. Divisin de una actividad o proyecto que permite identificar un conjunto de
actividades concretas. En el marco de un PIP, un componente es un producto especfico,
tangible o intangible, que el Estado entrega a la sociedad, y que emerge como resultado de la
ejecucin de una o varias actividades.
35. Condicin previa. Condicin que debe cumplirse previamente al otorgamiento de
financiamiento para la ejecucin de un proyecto. Tambin se le conoce como condicin de
efectividad. Aun cuando no forma parte del marco lgico, suele ser ubicado en la parte anterior a
las actividades.

131

36. Confiabilidad. Es el grado en que la medida de una variable est libre de error aleatorio y, por
tanto, proporciona resultados consistentes. Una medida o un mtodo de investigacin es
confiable si proporciona resultados prcticamente idnticos en todos los casos en que se repita
la investigacin. Un mtodo para medir la confiabilidad es la determinacin de consistencia
interna a travs del coeficiente alfa de Cronbach.
37. Constante. Propiedad de un objeto que toma un solo valor.
38. Constructo. Es un concepto o construccin terica especfica mente diseado para un propsito
cientfico determinado, generalmente para organizar el conocimiento y dirigir la investigacin, con
el fin de describir y explicar algn aspecto del fenmeno a estudiar. El trmino validez del
constructo se refiere a la correspondencia entre una construccin, que est a un nivel
conceptual e inobservable, y una medida propuesta de la misma a nivel operativo. Una medida
es vlida en tanto y cuanto evale correctamente el concepto que se propone medir.
39. Contraste de hiptesis. Tambin se denomina ensayo de hiptesis. Comprende un conjunto de
procedimientos estadsticos para decidir si una hiptesis se debe aceptar o rechazar.
40. Correlacin. Asociacin entre las variaciones de los valores de dos variables. Esta asociacin
puede ser positiva o directa (del mismo sentido) o negativa o inversa (en sentido contrario). Se
mide, por lo general, con el coeficiente de correlacin de Pearson, que puede tomar valores
comprendidos entre -1 y 1.
41. Correlacin espuria. Asociacin entre dos variables de carcter accidental o por efecto de una
tercera variable, sin que se d ninguna relacin causal entre ellas.
42. Costos. Recursos que se sacrifican para la ejecucin de las actividades de un proyecto. Los
costos pueden ser directos e indirectos, y en conjunto forman el presupuesto del proyecto. Al
mtodo de costeo en base a las actividades necesarias para el logro de los productos y,
finalmente, del propsito, se conoce como enfoque de presupuesto por resultados.
43. Covarianza. Es una medida de la relacin o asociacin entre dos variables. Puede tomar valores
positivos o negativos. Si son positivos, expresa que las dos variables varan en igual sentido. Un
valor negativo expresa lo contrario.

44. Cualitativo. Referencia al carcter no numrico de una variable o investigacin.

45. Cuantitativo. Referencia al carcter numrico o estadstico de una variable o investigacin.

46. Cuestionario. Formulario que contiene las preguntas de una encuesta y en el que se registran
las respuestas. El diseo del cuestionario debe partir de una correcta definicin del problema a
investigar, una formulacin precisa de las hiptesis y una especificacin adecuada de las
variables y escalas de medida. En el cuestionario pueden formularse preguntas abiertas, sin
indicacin de posibles respuestas, o preguntas cerradas, con una relacin exhaustiva de las
respuestas posibles.

132

47. Dato. Valor de una variable o de una constante. Informacin sobre una situacin, que se utiliza
de base para el anlisis y el clculo.

48. Dato primario. Es aquel que se obtiene de modo especfico para la investigacin a efectuar. El
propsito, y no la naturaleza de los datos, es lo que los define como primarios o secundarios.
Los datos primarios, al ser obtenidos expresamente para la investigacin a realizar, son los ms
idneos porque se pueden adaptar a los propsitos de la investigacin. Sin embargo, tienen un
coste elevado, superior al de los secundarios. Existen dos maneras bsicas de conseguirlos:
por observacin o mediante comunicacin.
49. Dato secundario. Dato que ya est disponible, que se ha obtenido en estudios anteriores
y que sirve para el propsito de la investigacin a realizar. Las fuentes de informacin
secundaria pueden ser internas o externas a la organizacin. En este segundo caso, pueden ser
pblicas o privadas. Los datos secundarios tienen como ventaja su menor coste y tiempo
necesario para obtenerlos.
50. Diseo de proyectos. Accin central de la etapa de pre inversin. Abarca los procesos de
identificacin, formulacin y evaluacin ex ante. Estos procesos, segn el nivel de profundidad
de los estudios, pueden tomar la forma de documentos diversos, siendo los ms importantes el
perfil, estudio de pre-factibilidad y estudio de factibilidad.

51. Efecto. Cambio real buscado por un proyecto en la situacin de la poblacin beneficiaria.
Frecuentemente, los efectos son localizados a nivel del propsito y fin del marco lgico.

52. Efecto directo. Resultado obtenido a nivel de propsito en la cadena de resultados o jerarqua
de objetivos.

53. Efecto indirecto. Resultado obtenido a nivel de fin en la cadena de resultados o jerarqua de
objetivos.
54. Eficacia. Grado en el que un proyecto logra sus resultados y metas planeadas, de conformidad
con lo establecido en la columna de indicadores del marco lgico.
55. Eficiencia. Relacin entre los recursos utilizados o costos y los productos de un proyecto. Una
gerencia eficiente de proyectos implica la obtencin del mximo producto con el mnimo costo.
56. Encuestado. Persona a la que se le efecta una encuesta y contesta las preguntas de un
cuestionario.
57. Encuestador. Persona que realiza una en- cuesta y formula las preguntas del cuestionario.
58. Enfoque de marco lgico. Enfoque metodolgico que abarca todos los pasos para la
identificacin de un proyecto: determinacin del problema central, anlisis de involucrados,
anlisis de problemas, anlisis de objetivos (y alternativas) y marco lgico propiamente dicho.
Tambin conocido como ZOPP o planificacin de proyectos orientada a objetivos.

133

59. Entorno. Conjunto de circunstancias polticas, sociales, econmicas, ambientales e


institucionales en el que se inserta un proyecto. Los elementos relevantes del entorno se expresa
en los factores externos que se recogen en la columna de supuestos del marco lgico.
60. Entrevista. Forma de comunicacin personal entre dos o ms personas mediante el
sostenimiento de una conversacin. Se utiliza para obtener informacin en una encuesta.
61. Entrevista en profundidad. Es un tipo de entrevista personal, directa y no estructurada, en la
que un entrevistador experimentado trata de descubrir las motivaciones subyacentes, creencias,
actitudes y sentimientos del entrevistado sobre una cuestin en particular.
62. Error de entrevista. Es el error cometido por el entrevistador al preguntar o anotar las
respuestas del encuestado. El entrevistador puede inducir consciente o in- conscientemente a
que el encuestado d una determinada respuesta, saltarse preguntas del cuestionario, formular
la pregunta alterando la redaccin literal de la misma, anotar malla respuesta dada por el
encuestado o falsificar todas o algunas de las respuestas al cuestionario.

63. Error de la encuesta. La confiabilidad de una encuesta est en funcin de su error total,
que se compone del error de muestreo y del error ajeno al muestreo. El error de muestreo
se produce como con- secuencia de que la muestra no es una representacin perfecta de
la poblacin. Se puede controlar con una adecuada seleccin y aumentando el tamao de
la muestra. El error ajeno al muestreo puede ser debido a la falta de respuesta (poblacin
no alcanzada, no en casa, rehsa contestar, etc.), y al error de la respuesta (engao,
ocultamiento, alteracin a propsito, recuerdo impreciso o equivocado, cansancio,
influencia del entrevistador, redaccin de las preguntas, posicin de las mismas en el
cuestionario, posicin de las alternativas de respuesta dentro del cuestionario, etc.). Estos
errores pueden ser subsanados, en parte, mediante encuestas de prueba y supervisin
posterior a la realizacin de la encuesta.
64. Error de muestreo. Es el error que se comete en la medida de las variables estudiadas al
tomar una muestra en lugar de la totalidad de la poblacin. Puede ser cuantificado cuando
el muestreo es probabilstico. El error de muestreo se determina a partir del error estndar
de la media.
65. Error en la redaccin de preguntas. Es el que se comete por una inadecuada redaccin
de las preguntas del cuestiona- rio. Puede ser de cinco tipos: preguntas cargadas (inducen
a dar una respuesta determinada), preguntas o respuestas dobles, preguntas ambiguas,
vocabulario inadecuado o excesivamente tcnico, y alternativas no contempladas.
66. Escala. Instrumento utilizado para medir variables. Las escalas pueden ser de cuatro tipos:
1) escalas nominales, que indican slo la pertenencia a una clase o categora; 2) escalas
ordinales, que expresan la existencia de una ordenacin de algn tipo en las categoras; 3)
escalas intervlicas, que suponen, adems de ordenacin, la existencia de distancias
iguales entre las categoras, y 4) escalas proporcionales o de razn, que suponen, adems
de ordenacin e igual distancia, la existencia de proporcionalidad entre los intervalos y el
valor 0 es absoluto. El anlisis estadstico de las variables est condicionado por la escala
de medida utilizada.
67. Estandarizacin de una variable. Resultado de dividir la diferencia entre el valor de
una variable y su media aritmtica por la desviacin estndar de la variable.

134

68. Estudio experimental. Tambin denominado experimento, investigacin o estudio


causal. Es el idneo para contrastar hiptesis y establecer relaciones de causa-efecto, por
el control que proporciona al investigador. Los experimentos se dividen en naturales y
controlados. En ambos casos, pueden incluir o no grupo de control. En los primeros -los
naturales- la asignacin de los individuos al grupo de estudio y al de control, si lo hay, no es
aleatoria. En los segundos -los controlados- la asignacin de los sujetos s que es aleatoria.
69. Estudio exploratorio. Es un estudio preliminar, muy flexible y poco formal, que se basa en
el estudio de datos ya existentes, en entrevistas con personas expertas y en el examen de
situaciones anlogas, mediante casos de estudio y simulaciones. La finalidad principal del
estudio exploratorio es el descubrimiento de ideas y conocimientos.
70. Estudio longitudinal. Estudio de tipo descriptivo cuyo fin es, mediante mediciones
repetidas de un mismo fenmeno, mostrar la evolucin del comportamiento de las variables
investigadas. Pueden basarse, aunque no necesariamente, en datos de paneles, o bien
utilizar, en cada ocasin que se repita el estudio, los datos de muestras distintas en cuanto
a su composicin, pero siempre representativas de la poblacin a investigar.
71. Estudio transversal. Tambin denominado de seccin cruzada (cross-section). Es un
estudio de tipo descriptivo, muy corriente en investigacin social, que proporciona una
instantnea de las variables de inters en un momento dado, en contraste con el estudio
longitudinal, que ofrece una serie de imgenes del fenmeno. Los estudios transversales se
dividen en estudios en profundidad y encuestas.

72. Estrategia del proyecto. Alternativa seleccionada para el logro de los objetivos del proyecto. En
el contexto del marco lgico, existe una estrategia general y una estrategia operativa. La primera
esta expresada en el campo de los componentes y la segunda en el campo de las actividades.

73. Evaluabilidad. Nivel de confiabilidad con que puede evaluarse un proyecto. Grado en el cual el
diseo ha sido definido, en trminos de indicadores objetivamente verificables, de tal manera que
sea posible realizar acciones de monitoreo y evaluacin vlidas y confiables.
74. Evaluacin de impacto. Tipo de evaluacin ex post que se realiza con el objetivo de
determinar si un proyecto ha producido los efectos necesarios en el bienestar de la poblacin y
en qu magnitud stos pueden ser atribuidos a la intervencin.

75. Evaluacin de procesos. Tipo de evaluacin ex post, tambin conocida con el nombre de
monitoreo o seguimiento, que centra su atencin en la verificacin de las actividades, los
indicadores de proceso y las correspondientes metas fsicas y financieras.

76. Evaluacin de resultados. Tipo de evaluacin ex post que se interesa, principalmente, por la
verificacin del logro de los productos y el propsito del proyecto. Usualmente, se realiza a medio
trmino y al final de la ejecucin del proyecto.

135

77. Evaluacin ex - ante. Evaluacin del proyecto realizada antes de que sea ejecutado, tanto para
determinar su viabilidad, como para contribuir a mejorar el diseo del mismo. Existen dos
enfoques: evaluacin privada y evaluacin social; y dos mtodos: anlisis costo-beneficio y
anlisis costo-efectividad.

78. Evaluacin ex - post. Evaluacin realizada despus de finalizada la ejecucin del proyecto.
Tiene por objetivo analizar el logro de los objetivos del proyecto y extraer lecciones para mejorar
el diseo de las intervenciones futuras. Existen tres tipos de evaluacin ex post: evaluacin de
procesos, evaluacin de resultados y evaluacin de impacto.
79. Escenario contrafactual. Representacin de lo que ocurrira con la poblacin afectada en el
caso de que el proyecto no se ejecute. Estadsticamente est representado por el grupo de
control o poblacin testigo.
80. Factores controlables. Acciones que estn bajo el control de la entidad ejecutora del proyecto.
Son expresadas en la columna de objetivos del marco lgico, especficamente en los campos de
componentes y actividades.

81. Factores de calidad. Se refiere a los factores determinantes de la calidad del diseo de un
proyecto. Existen tres factores fundamentales: coherencia, viabilidad y evaluabilidad.

82. Factores externos. Condiciones o eventos externos sobre los cuales se tiene poco o ningn
control y que pueden afectar los procesos y resultados de un proyecto. Son considerados en los
supuestos en el marco lgico.
83. Fiabilidad. Confiabilidad de un instrumento de medida.
84. Ficha tcnica. Documento que informa sobre las condiciones en las que se ha realizado una
encuesta. Indica el tipo de encuesta (personal, por correo o por telfono), la fecha de realizacin,
el mtodo de muestreo, los puntos de muestreo seleccionados, el tamao de la muestra y el
error de muestreo cometido.
85. Fichero. La Ley Orgnica de Proteccin de Datos de Carcter Personal, de 13 de diciembre de
1999, define un fichero como todo conjunto organizado de datos de carcter personal,
cualquiera que fuere la forma o modalidad de su creacin, almacenamiento, organizacin y
acceso (artculo 3, apartado b).
86. Fichero de datos. Conjunto de datos organizados de acuerdo con algn criterio (alfabtico,
numrico, etc.), que se crea y mantiene para que sus registros puedan ser consultados y
analizados, as como relacionados con otros. El fichero de datos puede estar contenido en un
soporte magntico para su utilizacin mediante un ordenador.

87. Fin. Objetivo global hacia el cual se prev que contribuya un proyecto. Por lo general, el fin de un
proyecto es un objetivo estratgico de la entidad ejecutora.

136

88. Fuentes de verificacin. Fuentes de informacin que permiten verificar el logro de los procesos
y resultados de un proyecto, tal como stos se encuentran precisados en los indicadores del
marco lgico.
89. Fuentes primarias. Informacin alfabtica y numrica, cualitativa o cuantitativa- que proviene
del trabajo de investigacin realizado por la propia entidad ejecutora de un proyecto.
90. Fuentes secundarias. Informacin alfabtica y numrica, cualitativa o cuantitativa- que
proviene del trabajo de investigacin realizado por entidades distintas de la ejecutora de un
proyecto.
91. Goal. Trmino del idioma ingls que, si bien literalmente se traduce como meta, en el contexto
del marco lgico equivale a fin.
92. Grupo de control. Grupo de personas que, deliberadamente, no reciben los productos del
proyecto, como si ocurre con el grupo beneficiario. Ello permite medir y evaluar las diferencias
entre ambos y, de este modo, obtener una cuantificacin del impacto del proyecto.

93. Hiptesis. Presunciones respecto a las condiciones necesarias y suficientes para el logro de un
determinado resultado. Las condiciones necesarias se expresan en la columna de objetivos
(campos de los componentes y actividades) y las condiciones suficientes en la columna de
supuestos.

94. Impacto. Cambio logrado en la situacin de la poblacin como resultado de la ejecucin de un


proyecto. En general, los impactos representan cambios en el nivel de bienestar de la poblacin
que pueden ser considerado de carcter duradero o de largo plazo.

95. Indicador de desempeo. Magnitud que permite verificar los cambios resultantes de una
intervencin. En el contexto del marco lgico, se denominan indicadores objetivamente
verificables.

96. Indicador de efecto. Indicador de desempeo a nivel del propsito del marco lgico, que, por lo
general, refleja el logro del objetivo principal del proyecto.

97. Indicador de impacto. Indicador de desempeo a nivel del fin del marco lgico. Mide el logro de
los objetivos estratgicos de una entidad, aunque no son de carcter vinculante, sino nicamente
referencial.

98. Indicador de producto. Indicador de desempeo a nivel de los componentes de un proyecto.


Mide el quantum de bienes y servicios entregados a la poblacin beneficiaria

99. Indicador de proceso. Indicador a nivel de actividades. Son la base para el establecimiento de
las metas fsicas y financieras del proyecto.

137

100. Informacin cualitativa. Informacin del proyecto que no se expresa en forma numrica, tales
como actas de reunin o anotaciones generales procedentes de las observaciones. Los datos
cualitativos suelen describir los conocimientos, actitudes y comportamientos de las personas.

101. Informacin cuantitativa. Informacin que se mide en trminos de cantidad y se expresa en


nmeros. La informacin cuantitativa puede ser de fuente primaria y secundaria.
102. Insumo. Todo factor de produccin utilizado para la realizacin de las actividades del proyecto.
En trminos ms amplios, equivale al concepto de recursos.
103. Intervalo de confianza. Es el intervalo para el que se establece una probabilidad de que el
verdadero valor de un parmetro muestral est contenido entre los lmites del mismo.

104. Leccin aprendida. Aprendizaje basado en la experiencia obtenida en el marco de la ejecucin


de un proyecto. Las lecciones aprendidas consisten, por lo general, en mtodos innovadores de
promocin del desarrollo en los distintos campos y sectores.

105. Lnea de base. Datos principalmente numricos que describen la situacin anterior a la
ejecucin del proyecto, y que se elaboran, principalmente, sobre la base de los indicadores de
impacto y efecto.
106. Lgica horizontal. Relacin entre los factores internos y externos del marco lgico; es decir,
entre los objetivos y los supuestos. Permite verificar la viabilidad del proyecto en el contexto
global del mbito pertinente del mismo.

107. Lgica de intervencin. Es el conjunto de elementos que forman parte de la estrategia del
proyecto. Por lo general, resulta de una combinacin de factores internos (actividades y
componentes) y factores externos (condiciones econmicas, sociales y polticas).

108. Lgica vertical. Cadena de relaciones de causa a efecto entre los distintos niveles de la
columna de objetivos del marco lgico que permite garantizar la coherencia interna del proyecto.

109. Marco lgico. Instrumento de gestin que consiste en una matriz de cuatro filas y cuatro
columnas en el cual se resume las caractersticas bsicas de un proyecto. Las columnas se
denominan: objetivos, indicadores, medios de verificacin y supuestos. Las filas se denominan:
fin, propsito, componentes y actividades.
110. Matriz de seguimiento y evaluacin. Cuadro en el que se detallan los indicadores de
desempeo necesarios para el monitoreo y evaluacin de los resultados del proyecto.
111. Medios. Cursos de accin que permiten alcanzar el objetivo del proyecto. En el contexto del
marco lgico, se reconocen dos tipos de medios: medios de primer nivel y medios de segundo
nivel o fundamentales.
138

112. Medios de primer nivel. Son los medios relacionados al proceso subyacente en el logro del
propsito.
113. Medios fundamentales. Son medios que se derivan de los medios de primer orden y que
representan los bienes pblicos necesarios para lograr los medios de primer nivel.

114. Medios de verificacin. Fuentes de informacin a partir de las cuales se puede determinar la
situacin de cada uno de los indicadores en la matriz del marco lgico.
115. Medio de neutralizacin. Componentes y/o actividades establecidas con la finalidad de
contrarrestar el efecto de un factor externo no controlable que podra poner en riesgo el logro del
propsito del proyecto.

116. Meta financiera. Gastos previstos en la realizacin de las actividades, calculados teniendo en
cuenta los costos unitarios y las metas fsicas.

117. Meta fsica. Logros previstos en la realizacin de actividades, teniendo en cuenta los
indicadores de proceso y las unidades de medida correspondientes.

118. Monitoreo. Procedimiento empleado para comprobar la eficacia y eficiencia del proceso de
ejecucin de un proyecto, que culmina generalmente recomendando medidas correctivas para
optimizar los resultados de un proyecto.
119. Muestra. Conjunto de elementos de una poblacin o universo del que se quiere obtener
informacin. Para que sea vlida, la muestra debe ser representativa de la poblacin, es decir,
que en su estructura se reproduzcan exactamente las caractersticas y comportamientos de la
poblacin de la que ha sido obtenida. La muestra permite obtener datos de una poblacin de
forma rpida y econmica.
120. Muestreo. Procedimiento de seleccin de una muestra, para la realizacin de una encuesta.
Implica llevar a cabo las siguientes actividades: definir la poblacin objeto de estudio, seleccionar
la estructura de la muestra, especificar la unidad muestral, seleccionar el mtodo de muestreo,
determinar el tamao de la muestra, disear el plan de muestreo y seleccionar la muestra.

121. Objetivo. Enunciado de un estado deseado hacia el cual un proyecto est dirigido. Un objetivo
se debe formular en trminos de cambio en la situacin de la poblacin y lingsticamente
empleando un verbo en modo infinitivo. Trmino tambin conocido como resultado.
122. Objetivo principal. Es el propsito del proyecto.
123. Objetivo especfico. Trmino que refiere a los componentes del proyecto, expresados como
resultados esperados.

139

124. Objetivo estratgico. Objetivo que orienta la labor general de una entidad pblica. Por lo
general, los proyectos de inversin pblica son acciones diseadas en la perspectiva de lograr
un determinado objetivo estratgico.

125. Operacin. Etapa del ciclo del proyecto durante la cual se perciben los beneficios derivados de
la inversin realizada durante la ejecucin. Por lo general, el Fin del marco lgico tiene relacin
con la situacin de la poblacin beneficiaria en la etapa de operacin.
126. Output. Trmino del idioma ingls que equivale a producto.
127. Outcome. Trmino del idioma ingls que equivale a efecto.
128. Panel. Muestra permanente de individuos o de establecimientos de los que se obtienen datos de
forma continuada a intervalos de tiempo regulares. A cambio de alguna compensacin
econmica o de regalos, sus miembros facilitan informacin sobre las mismas o distintas
variables a lo largo del tiempo.
129. Parmetro. Caracterstica definida de una poblacin. Valor que forma parte de una expresin o
ecuacin y que se presenta como constante. Coeficiente de una ecuacin.

130. Pertinencia. Grado en el que los objetivos de un proyecto son vlidos, a la luz de las prioridades
de desarrollo del pas o de la poblacin beneficiaria. En lo que se refiere al fin del marco lgico, la
pertinencia debe ser evaluada en trminos de su coincidencia con las prioridades nacionales,
sectoriales y/o regionales. Trmino tambin conocido como relevancia.
131. Plan estratgico. Documento maestro de gestin de una entidad pblica. Contiene una
descripcin del rol institucional, macro problemas centrales, objetivos estratgicos y especficos,
as como las acciones estratgicas, sean estas actividades o proyectos.
132. Plan operativo. Documento que detalla el contenido de las actividades y proyectos de una
entidad pblica para un ao calendario. El plan operativo anual contiene la porcin anual de las
metas fsicas y financieras de un proyecto.
133. Poblacin. Conjunto de elementos (individuos, organizaciones, objetos o acontecimientos) del
que se toma una muestra para su estudio. Se denomina tambin universo. Una poblacin puede
ser finita o infinita. La poblacin consistente en todos los productos fabricados por una empresa
en un perodo determinado es finita, mientras que la poblacin formada por los precios posibles
de un producto es infinita. El error de muestreo se estima de forma distinta segn se trate de
poblaciones finitas o infinitas.
134. Pregunta. Cuestin planteada en un cuestionario, de la que se solicita una respuesta por parte
del encuestado. Puede ser abierta, sin indicacin de respuestas posibles, o cerrada, con una
relacin exhaustiva de respuestas, para que el encuestado elija una o varias de ellas.
135. Pregunta abierta. Es aquel tipo de pregunta en un cuestionario que no contiene indicacin de
posibles respuestas. Las preguntas abiertas permiten dar una respuesta totalmente libre al
encuestado y utilizar su propio lenguaje. Sin embargo, para poder ser tratadas estadsticamente,
140

deben ser agrupadas y codificadas, lo que puede entraar cierta dificultad. Son especialmente
adecuadas en investigaciones exploratorias o cuando no se tiene mucho conocimiento sobre las
respuestas posibles.
136. Pregunta ambigua. Pregunta de un cuestionario que tiene dos o ms interpretaciones posibles.
Se incurre en este defecto de formulacin de la pregunta cuando se utilizan trminos vagos e
imprecisos como antes, despus, mucho, poco, normal, frecuente, etc., y no se
ha definido previamente cul es su alcance o contenido.
137. Pregunta cargada. Pregunta de un cuestionario que por su forma de estar redacta- da induce a
una respuesta determinada. Por ejemplo, la pregunta Considera que los bancos deben bajar
los altos intereses que cobran por sus prstarnos? est sesgada hacia una respuesta
afirmativa, porque se presupone que los intereses son elevados.
138. Pregunta cerrada. Pregunta en un cuestionario que contiene una relacin exhaustiva de las
respuestas posibles. Puede ser dicotmica, si tiene slo dos respuestas posibles, de eleccin
mltiple, si tiene ms de dos, o bien tratarse de una escala de medida. Las preguntas cerradas
son adecuadas cuando se conocen las respuestas posibles. Son ms fciles de contestar que
las preguntas abiertas, dado que el encuestado slo tiene que elegir una o varias alternativas, y
su tratamiento estadstico es sencillo. Este tipo de preguntas suelen ser las ms utiliza- das en
las encuestas.
139. Pregunta condicionada. Es aquella cuya respuesta est indicada por una pregunta filtro
anterior, y slo debe ser contesta- da si se cumplen las condiciones establecidas por la pregunta
filtro o condicionante.
140. Pregunta de clasificacin. Pregunta de un cuestionario que se formula al encuestado sobre sus
atributos personales (edad, sexo, estudios, hbitat, clase social, etc.) o las caractersticas de la
entidad a la que representa (nmero de empleados, cifra de ventas, etc.], que sirven para su
clasificacin.
141. Pregunta de control. Pregunta que se formula para comprobar la consistencia de las
respuestas y, en general, contrastar la calidad de la informacin facilitada por el encuestado.
142. Pregunta de eleccin mltiple. Pregunta de un cuestionario en la que se proponen varias
alternativas de respuesta.
143. Pregunta de respuesta nica. Pregunta cuyas alternativas de respuesta son mutuamente
excluyentes, de modo que el encuestado slo puede dar una respuesta.
144. Pregunta de respuesta mltiple o multirrespuesta. Pregunta en la que el encuestado puede
dar ms de una respuesta.
145. Pregunta dicotmica. Es aquella que tiene slo dos respuestas alternativas: s o no, acuerdo o
desacuerdo, etc.

141

146. Pregunta de relleno. Pregunta sencilla, neutral y cuya informacin no es necesaria para la
investigacin, pero que se utiliza para iniciar la encuesta, cambiar de tema o relajar el ambiente,
cuando el tema del cuestionario es sensible o controvertido.
147. Pregunta doble. Cuestin en la que se formulan dos o ms preguntas a las que se solicita una
sola respuesta.
148. Pregunta filtro. Pregunta cerrada, generalmente con pocas opciones, que tiene por objeto
seleccionar submuestras concretas de encuestados, para continuar la administracin del
cuestionario por vas total o parcialmente distintas.
149. Pregunta introductoria. Pregunta para establecer contacto con el encuestado, que se coloca al
principio del cuestionario, y J que pretende interesar al entrevistado y ganar su confianza.
150. Pregunta semiabierta. Modalidad de pregunta cerrada en la que se aade una pregunta
abierta, generalmente bajo la denominacin de otras respuestas, que permite aadir al
encuestado otras opiniones no contempladas en las alternativas de respuesta sugeridas en la
parte cerrada de la pregunta.
151. Problema. En el contexto del SNIP, se refiere a una necesidad bsica insatisfecha o una
oportunidad de mercado desaprovechada, en razn de la deficiencia del Estado en la provisin
de determinados bienes y servicios.

152. Producto. Resultado que el proyecto debe alcanzar. Constituye el primer nivel de resultados
dentro del ciclo de un proyecto. Los productos pueden ser bienes, servicios, cambios de calidad,
cambios de eficiencia en produccin, etc.
153. Proyecto de inversin pblica. Accin de carcter temporal, organizada como un conjunto de
componentes y actividades interrelacionados, que utiliza total o parcialmente recursos pblicos
con la finalidad de mejorar la dotacin de bienes y servicios esenciales para la satisfaccin de las
necesidades bsicas de la poblacin y la promocin del desarrollo del pas.
154. Programa de inversin pblica. Conjunto de proyectos de inversin pblica orientados a un
propsito comn, ejecutados por una o varias unidades ejecutoras. Visto el programa en su
conjunto, los proyectos son sus componentes; visto cada proyecto en forma individual, cada
componente del programa se constituye en el propsito de los proyectos correspondientes.
155. Proposicin. Frase de la que se puede decir que es, o bien verdadera o bien falsa. El marco
lgico est compuesto de 16 proposiciones, ubicadas en 16 celdas.

156. Propsito. Resultado situado entre los productos y el fin en la jerarqua de objetivos establecida
en el marco lgico. Refleja los resultados a mediano plazos que razonablemente cabe esperar
del proyecto siempre que se generen los productos previstos y sigan siendo vlidas las hiptesis
adoptadas en los supuestos.

142

157. Proyecto. Conjunto de actividades con objetivos establecidos, diseados para producir un
resultado de un plazo limitado y con recursos presupuestados. Su objetivo es contribuir a
resolver un determinado problema y producir un impacto neto positivo en el bienestar del pas.

158. Riesgo. Posibilidad de que los resultados reales sean menores a los resultados esperados,
debido a factores no controlables. Las principales fuentes de riesgo son la inestabilidad
econmica, la vulnerabilidad de los arreglos institucionales y los modelos mentales inadecuados
de la poblacin.
159. Situacin con proyecto. Corresponde a la proyeccin de lo que ocurrir si se lleva a cabo el
proyecto, en las condiciones de vida de la poblacin y el desarrollo del pas.

160. Situacin sin proyecto. Denominada tambin situacin base, corresponde a la proyeccin de
lo que ocurrir a futuro si no se lleva a cabo el proyecto, en las condiciones de vida de la
poblacin y el desarrollo del pas.
161. Sostenibilidad. Durabilidad de los resultados del proyecto despus de concluida la intervencin.
Continuacin de los beneficios de una intervencin por un periodo razonable de tiempo.
162. Supuestos. Hiptesis sobre los factores externos o riesgos que pueden afectar el avance o xito
de una intervencin para el desarrollo.
163. Tratamiento de datos. Fase del proceso de investigacin comercial, posterior a la obtencin de
los datos. Tiene como finalidad convertir los datos en informacin til para la toma de decisiones.
Incluye las actividades de edicin, codificacin y grabacin de los datos, tabulacin de los
resultados y aplicacin de tcnicas de anlisis estadstico.
164. Unidad muestra. Es el elemento de la poblacin objeto de estudio en una en- cuesta del cual se
obtienen los datos. Pueden ser individuos, hogares, empresas, entidades u objetos (productos,
marcas, modelos, etc.).
165. Validez externa. Es la que determina si la relacin causa-efecto encontrada en un experimento
puede ser generalizada.
166. Validez interna. Es una medida de la precisin de un experimento. Determina si la manipulacin
de la variable independiente o tratamiento causa realmente los efectos sobre la variable
dependiente.
167. Variable. Atributo de un objeto de anlisis, que puede expresarse en trminos alfabticos o
numricos. En este ltimo caso, se denominan indicadores. Es una magnitud cuyos valores son
objeto de estudio. Puede referirse a un individuo, grupo de personas, organizacin u objeto. Una
variable puede tomar un valor cualquiera dentro de un conjunto determinado de ellos, llamado
dominio de la variable. La definicin de las variables permite hacer operativos y susceptibles de
medida los problemas bsicos a investigar. La medida de las variables viene determinada por la
escala utilizada.

143

168. Variable binaria. Es una variable dicotmica cuyos valores posibles son O y 1. Una variable
ficticia es una variable binaria.
169. Variable categrica. Denominacin utilizada para identificar a las variables medidas con escalas
no mtricas (nominales y ordinales).
170. Variable continua. Es aquella variable que puede tomar cualquier valor numrico. Para
cualquier par de valores es posible determinar otro entre medio de ellos. Por ejemplo, los
ingresos, expresados en unidades monetarias.
171. Variable criterio. Variable dependiente o a explicar por una o varias variables independientes o
explicativas.
172. Variable cualitativa. Variable que est medida con una escala no mtrica, como la nominal y la
ordinal, Por ejemplo, el sexo (hombre, mujer), la ocupacin (obrero, empleado, profesional, etc.)
y la clase social (alta, media, baja).
173. Variable cuantitativa. Variable que est medida con una escala mtrica, como la intervlica o la
proporcional. Por ejemplo, la edad (medida en aos), el gasto familiar anual en alimentacin
(medido en euros), y la actitud hacia el consumo de bebidas alcohlicas (medido con una escala
tipo Likert de cinco puntos, de mayor a menor grado de acuerdo).
174. Variable dependiente. Variable cuyo comportamiento es explicado por otra u otras
independientes. Se la denomina tambin variable a explicar o criterio y suele representarse por
la letra Y del eje de ordenadas.
175. Variable dicotmica. Aquella que slo puede tomar dos valores, por ejemplo, el sexo
(hombre/mujer), la superacin de un test (pasa/falla) o una creencia (verdadera o falsa). Cuando
los valores posibles son O y 1, suele denominarse variable binaria. Variables dicotmicas son
tambin las variables ficticias.
176. Variable discreta. Variable que slo puede tomar un nmero finito de valores distintos. Es decir,
entre dos valores consecutivos una variable discreta no puede tomar ninguno ms. Por ejemplo,
el nmero de hijos.
177. Variable explicativa. Variable independiente o predictora.
178. Variable ficticia. Variable dicotmica que se obtiene convirtiendo un nivel dado de una variable
cualitativa en una variable binaria, en la que el valor 1 indica la presencia de la caracterstica y el
valor 0 la ausencia de la misma. En general, con una variable cualitativa de n categoras, se
precisan n - 1 variables ficticias, para representar la totalidad de las categoras de la variable
original.
179. Variable independiente. Variable que se su- pone que explica el comportamiento de otra
dependiente. Se la denomina tambin variable explicativa o predictora y se representa por la
letra X del eje de abscisas.

144

180. Variable moderadora. Es aquella que modifica sistemticamente bien la forma o la fuerza de la
relacin entre una variable predictora o explicativa y una variable criterio o dependiente.
181. Variable mixta. Denominacin utilizada para identificar a las variables que comparten
caractersticas de las variables categricas y numricas. Las variables mixtas se miden con
escalas de intervalos iguales, y se les puede aplicar cualquier tcnica estadstica.
182. Variable numrica. Denominacin utilizada para identificar a las variables medidas con escalas
mtricas (intervlica y numrica).
183. Variable predictora. Variable independiente o explicativa que puede explicar o predecir el
comportamiento de otra u otras variables.

Variable tipificada. Si a cada uno de los valores de una variable se le resta su media aritmtica
y se divide el resultado por la desviacin tpica, se obtiene una nueva variable tipificada o
normalizada o estandarizada. Los valores de una variable tipificada son adimensionales, es
decir, independientes de la unidad de medida empleada. Una variable tipificada tiene media
igual a O y desviacin estndar igual a 1.

184. Viabilidad. Compatibilidad de la estrategia de un proyecto con su entorno, que torna probable su
implementacin satisfactoria.

145

BIBLIOGRAFA
AGENCIA NORUEGA DE DESARROLLO, El Enfoque del Marco Lgico. 1990
AGENCIA NORUEGA DE DESARROLLO, Evaluacin de Proyectos de Ayuda al
Desarrollo, 1998.
BID, Evaluacin: Una Herramienta de Gestin para Mejorar el Desempeo de los
Proyectos, marzo 1997.
CEPAL ILPES. Metodologa General de Identificacin, Preparacin y Evaluacin de
Proyectos de Inversin Pblica. rea de Proyectos y Programacin de Inversiones,
Santiago de Chile, 2005.
COHEN, E. y FRANCO R. Evaluacin de Proyectos. ILPES/ONU, Washington, 2003.
DGPM MEF. Gua General de Identificacin, Formulacin y Evaluacin Social de
Proyectos de Inversin Pblica a Nivel de Perfil. Ministerio de Economa y Finanzas,
Lima, 2003.
DEPARTAMENTO NACIONAL DE PLANEACIN. Manual Metodolgico General para la
Identificacin, Preparacin y Evaluacin de Proyectos. Banco de Programas y Proyectos
de Inversin Nacional, Colombia, 2003.
GMEZ, Manuel CMARA, Luis. Orientaciones para la Aplicacin del Enfoque del
Marco Lgico. CIDEAL, Madrid, 2003.
GTZ, Gestin del Ciclo del Proyecto y Planificacin de Proyectos Orientada a
Objetivos, 1990.
JUDY BAKER, Evaluacin del Impacto de los Proyectos en la Pobreza, Banco Mundial,
2000.
Ley N 27293. Lima, 2000. Ley del Sistema Nacional de Inversin Pblica. Ministerio de
Economa y Finanzas
MARTINEZ, E. y ESCUDEY, M. Evaluacin y Decisin Multicriterio, Reflexiones y
Experiencias. Editorial Universidad de Santiago, 1998.
MEDIANERO, David. El Enfoque del Marco Lgico en la Gestin de Proyectos. CINDEH,
Lima, 2002.
MITROFF, Ian. Convierta Problemas en Soluciones Inteligentes. Amat Editorial,
Barcelona, 2000.
NAVARRO, Hugo. Manual para la Evaluacin de Impacto de Proyectos y Programas de
Lucha Contra la Pobreza, ILPES, Santiago de Chile, 2005.
NORAD. The Logical Framework Approach (LFA). NORAD, Oslo, s/f.
OPS, Formatos de Presentacin de Proyectos, 1996.
ORTEGN, Edgar PACHECO, Juan Francisco ROURA, Horacio. Metodologa General
de Identificacin, Preparacin y Evaluacin de Proyectos de Inversin Pblica. ILPES,
Santiago de Chile, 2005.

146

OTEGN, Edgar PACHECO, Juan Francisco PRIETO, Adriana. Metodologa del Marco
Lgico para la planificacin, el seguimiento y evaluacin de proyectos y programas.
ILPES, Santiago de Chile, 2005.
PRACTICAL CONCEPTS INC, Marco Lgico: Una Gua de Gerentes para Disear y
Evaluar Proyectos en Forma Cientfica. Reproducido por el Ministerio de Agricultura,
1986.
PRACTICAL CONCEPTS INC., Sistema de Manejo de Proyectos. Reproducido por el
Ministerio de Agricultura, 1986.
R. HERNNDEZ y otros Metodologa de la Investigacin, Mxico, 1998.
SANN, H. Gua Metodolgica General para la Preparacin y Evaluacin de Proyectos
de Inversin Social. Direccin de Proyectos y Programacin de Inversiones, ILPES, 1995.
UNFPA, Elaboracin de Planes de Trabajo y Cronograma de Actividades, 1999.

147

You might also like