Professional Documents
Culture Documents
1.1
El marco lgico es la base conceptual del sistema de gestin por resultados. Este es un conjunto de
procedimientos para la gestin en tiempo real de los resultados de una intervencin pblica o de una
intervencin en el desarrollo en general. La gestin por resultados es un enfoque de gerencia basado en la
nocin de que el empeo en alcanzar los resultados debe guiar la asignacin de recursos, la realizacin de las
actividades y la gestin en su conjunto de una organizacin. El sistema de gestin por resultados es un
conjunto de procedimientos relativos a la administracin de una entidad pblica durante todas las fases del
ciclo de gestin: planificacin, organizacin, direccin y evaluacin. El sistema permite configurar la gestin
de modo que ella se oriente al logro de tres niveles de resultados1:
Las filas de la matriz presentan informacin acerca de los resultados, indicadores, medios de verificacin y
supuestos en cuatro momentos diferentes de la vida prevista del proyecto:
1
El sistema de gestin por resultados es el enfoque principal de gestin de las intervenciones para el desarrollo
promovida por el Comit de Asistencia al Desarrollo de la Organizacin de Cooperacin y Desarrollo Econmico
(OCDE).
Existen diferentes manuales y textos sobre marco lgico. Se recomiendan los manuales de la
Agencia Noruega de Desarrollo, Enfoque del marco lgico; y BID, Evaluacin: Una herramienta de
gestin para mejorar el desempeo de los proyectos.
2
La primera fila contiene el fin u objetivo estratgico al cual el proyecto contribuir de manera
significativa, luego de que haya estado en funcionamiento por un perodo razonable.
La segunda contiene el propsito u objetivo especfico de desarrollo, logrado cuando la
ejecucin del proyecto haya concluido.
La tercera contiene los productos o componentes generados y entregados a la poblacin
beneficiaria en el transcurso de la ejecucin del proyecto.
La ltima fila contiene las actividades requeridas para generar los productos o resultados.
El marco lgico logra, sin mayor necesidad de sofisticados mtodos matemticos, introducir rigor cientfico en
el diseo, ejecucin y evaluacin de las polticas de Estado, siendo sta la razn por la que el pas incorpor el
enfoque del marco lgico en la metodologa del Sistema Nacional de Inversin Pblica (SNIP) y la razn por
la cual muchas entidades pblicas lo vienen utilizando en los distintos procesos de planificacin, ejecucin y
evaluacin de sus operaciones en general3.
Grfico 2.1 Marco lgico: presentacin estilizada
Cadena de
resultados
Indicadores
de desempeo
Medios de
verificacin
Factores
externos
Fin (resultado
intermedio y final)
Indicadores de
impacto
Fuentes
secundarias
Supuestos para la
sostenibilidad
Propsito
(resultado inmediato)
Indicadores de
efecto
Fuentes
secundarias
Supuestos para
logro del fin
Componentes
(productos)
Indicadores de
producto
Fuentes secundarias
y primarias
Supuestos para
logro del propsito
Subcomponentes/
Actividades
Indicadores de
proceso
Fuentes primarias
Costos
Condiciones previas
El marco lgico (Iogical framework, en ingls) fue concebido en 1969 por Practical Concepts Inc. (PCI),
una empresa consultora norteamericana, para la Agencia de Desarrollo Internacional de los Estados
Unidos. Fue puesto en prctica desde 1970 por AID en la gestin de proyectos de cooperacin
internacional en diversos pases del mundo.
4
USAID, Agencia de los Estados Unidos para el Desarrollo, organismos de cooperacin internacional del
gobierno norteamericano.
3
metodologa. Tal fue el caso de la Agencia Alemana de Cooperacin Tcnica, que en los aos setenta, puso a
prueba el enfoque del marco lgico en una determinada cartera de proyectos.
En 1981, sobre la base del xito alcanzado durante sus primeras experiencias y bajo la direccin de Moses
Thompsom, lder de la consultora Team Technologies, GTZ llev a cabo una fase piloto, desarrollando el
mtodo ZOPP, que en espaol significa planificacin de proyectos orientada a objetivos, utilizando como base
la matriz del marco lgico. Formalmente, el ZOPP fue introducido primero de manera provisional en 1983,
mediante una directiva administrativa, y en 1987 como norma obligatoria y parte integral del ciclo del
proyecto, conforme a lo establecido en captulo 4211 del Manual de Organizacin. Hasta fines de 1988 todos
los directivos de GTZ, colaboradores involucrados en la ejecucin de proyectos y contratistas haban recibido
entrenamiento en el mtodo ZOPP y la forma de aplicarlo. El dominio del ZOPP pas a ser una condicin
indispensable para cualquier promocin jerrquica o carrera en la empresa. Hasta hoy se elige ofreciendo un
amplio programa de entrenamiento en ZOPP; a todos los niveles, en Alemania y en el exterior5.
El ZOPP incorpor nuevos elementos, como los anlisis de participantes, anlisis de problemas, anlisis de
objetivos y anlisis de alternativas. El trabajo realizado bajo la dinmica de talleres con participacin de
equipos multidisciplinarios donde tomaban parte GTZ, las organizaciones contrapartes y los grupos
beneficiarios, fue incorporado en lo que constituy una metodologa participativa de diseo de proyectos.
Luego de la adopcin del marco lgico, en su versin mejorada llamada ZOPP, por parte de GTZ, este
enfoque se difundi en forma amplia por todo el mundo, siendo adoptado prcticamente por la mayora de
agencias del sistema de las Naciones Unidas (OIT, PNUD, OPS, OMS, FAO, etc.) y la Unin Europea.
Sin embargo, hacia la segunda mitad de los aos 90, an existan importantes instituciones internacionales,
como el Banco Interamericano de Desarrollo, que no se adheran al enfoque del marco lgico. El ao 1996,
ante una evaluacin institucional a raz de una necesaria reposicin de su capital social, esta institucin debi
admitir la necesidad de incorporar el enfoque del marco lgico dentro de los instrumentos de gestin del ciclo
de proyectos. Desde entonces, todos los proyectos financiados por el BID son formulados y evaluados en base
a la metodologa que, veinte y siete aos atrs, en 1969, concibiera un genial Leon Rossenberg.
Desde agosto de 1977, tambin el Banco Mundial, el ms grande financiador de proyectos sociales del mundo,
incorpor el enfoque del marco lgico en los procesos de preparacin, monitoreo y evaluacin de los
proyectos, a cuyo efecto cont tambin con la asistencia tcnica de la consultora de Moses Thompsom.
Qu es el ZOPP?
En los aos setenta, la Agencia Alemana de Cooperacin Tcnica (GTZ) puso a prueba en algunos proyectos
el enfoque de marco lgico que aos atrs haba sido adoptado por la USAID. En 1981, tras la ejecucin de las
primeras experiencias positivas, la GTZ llev a cabo una fase piloto y tomando como base al enfoque del
marco lgico desarroll el mtodo ZOPP, que en espaol significa planificacin de proyectos orientada a
objetivos.
El ZOPP inclua algunos elementos nuevos, como el anlisis de participantes, anlisis de problemas,
anlisis de objetivos y el anlisis de alternativas. El trabajo en equipos multidisciplinarios mediante talleres
en los que formaban parte la GTZ, las organizaciones contrapartes y los grupos beneficiarios tambin fueron
5
Gestin del Ciclo del Proyecto (PCM) y Planificacin de Proyectos Orientada a Objetivos (ZOPP).
Desutche Gesellschaft fur Technische Zusammenarbeit (GTZ).
4
ZOPP 1 o PRE-ZOPP, cuyo objetivo es realizar el anlisis de problemas y de objetivos tan completo como
sea necesario; pero no demasiado detallado.
ZOPP 2 o ZOPP de Examen, en el cual se revisa el ZOPP 1, analizando los vacos y sealando en dnde
es necesario contar con mayor informacin.
ZOPP 3 o ZOPP de la Contraparte, que responde a temas pendientes, evala la relevancia de los
problemas y objetivos, haciendo un anlisis intenso de los participantes en el proyecto.
ZOPP 4 o ZOPP de Arranque, en el cual se revisa el anlisis de participantes y se prepara el proyecto en
forma detallada.
ZOPP 5 o ZOOP de Replanteo, cuya funcin es revisar el ZOPP 4, y se adapta la estrategia del proyecto
de acuerdo a los nuevos problemas encontrados y/o modificaciones planteadas.
Gran parte de la metodologa ZOPP hoy se encuentra plenamente incorporada en el cuerpo central del enfoque
del marco lgico. De hecho el anlisis de problemas, objetivos y alternativas mediante sucesivas lluvia de
ideas es parte conformante del enfoque del marco lgico, tal cual es utilizado por las principales agencias de
promocin del desarrollo.
1.2
Al estudiar el marco lgico, debe establecerse claramente la diferencia entre el marco lgico como
matriz (una tabla de cuatro columnas y cuatro filas) y el marco lgico como enfoque para la gestin del ciclo
de proyectos, en particular para el diseo de un proyecto, proceso que abarca fases diversas de anlisis, tales
como la identificacin de problemas, anlisis de involucrados, anlisis de problemas, anlisis de alternativas y,
finalmente, la propia matriz del marco lgico6.
Enfoque del marco lgico. Como enfoque, el concepto de marco lgico est
ntimamente vinculado al ciclo de proyecto, razn por la cual se habla, con absoluta
propiedad, del enfoque del marco lgico en la gestin del ciclo del proyecto.
El enfoque del marco lgico debe considerarse como una importante herramienta gerencial de las entidades
pblicas, ya sean stas de ejecucin o de financiacin de proyectos. En palabras de sus autores, Leon
Rossenberg y Lawrence Posner, el marco lgico no es difcil de usar, no requiere el uso de matemticas ni de
un software especializado. Tampoco ofrece respuestas a las cuestiones crticas del desarrollo, pero organiza la
informacin de tal manera que puedan formularse las preguntas apropiadas. Su uso no se restringe slo a
proyectos. Puede ser aplicado a una variedad de situaciones: diseo de planes estratgicos y programas de
desarrollo, diseo de estructuras organizacionales, articulacin de los distintos niveles de planificacin dentro
6
La visin del marco lgico como un proceso es conocida, tambin, como planificacin de proyectos
basada en objetivos (ZOPP). Vase al respecto los documentos publicados por la GTZ, especialmente
Gestin del Ciclo del Proyecto y Planificacin de Proyectos Orientada a Objetivos, 1990.
5
Las relaciones de causa y efecto entre los distintos niveles de objetivos (relaciones entre
actividades-resultados, resultados-propsito, y propsito-fin) describen las condiciones necesarias
para que un proyecto sea exitoso.
Las relaciones de causa y efecto entre los objetivos y los supuestos aclaran la probabilidad de que
el proyecto tenga xito, bajo un contexto social y general dados.
En el contexto del enfoque del marco lgico, para la obtencin de un determinado objetivo existen dos tipos de
condiciones:
1.3
Lgica vertical
El marco lgico permite examinar los vnculos causales entre los distintos niveles de la cadena de
resultados del proyecto. Esta es su lgica vertical. Si el proyecto est bien diseado, debe obtenerse como
vlido que:
Las Actividades especificadas para cada Componente son las necesarias para producir el
Componente;
Todos y cada uno de los Componentes son necesarios para lograr el Propsito del proyecto;
Se cuenta con todos los Componentes necesarios para lograr el Propsito del proyecto;
Si se logra el Propsito, el proyecto contribuir al logro del Fin;
El Fin es una respuesta a un problema importante en el mbito del proyecto.
Un buen proyecto exige que la lgica vertical sea perfecta. Se llega a la perfeccin cuando las condiciones
establecidas en cada nivel son aquellas estrictamente necesarias para alcanzar el nivel siguiente. As, las
actividades deben ser aquellas que son necesarias para alcanzar los Productos; los Productos deben ser los
necesarios para alcanzar el Propsito del proyecto; el Propsito se encuadra dentro del Fin.
La lgica vertical, sin embargo, no implica necesariamente que un slo proyecto contenga todos los
componentes necesarios para generar determinados propsitos. Eventualmente la obtencin de un objetivo
requiere de muchos componentes, los cuales no pueden ser incluidos totalmente en un solo proyecto, debido a
que rebasaran el mandato legal de la institucin ejecutora. En tal caso, los componentes no incluidos en el
proyecto, se asumiran como supuestos, en el entendido de que fueran incorporados en los proyectos de otras
entidades.
As por ejemplo, en un proyecto destinado al incremento de la produccin agrcola (Propsito), una entidad
podra considerar como componentes los de capacitacin, asistencia tcnica y micro crdito. Sin embargo, tal
vez, no pueda incluir el componente relacionado al mejoramiento de las vas de comunicacin. ste, por lo
tanto, sera incorporado en la columna de supuestos, asumiendo que sern considerados en un proyecto del
Sector Transportes.
Grfico 2.2 Lgica vertical
Fin
Propsito
1.4
Componente 1
Componente 2
Componente 3
Actividad 1.1
Actividad 1.2
Actividad 1.3
Actividad 2.1
Actividad 2.2
Actividad 2.3
Actividad 3.1
Actividad 3.2
Actividad 3.3
Actividad 1.N
Actividad 2.N
Actividad 3.N
Lgica horizontal
El marco lgico, por otra parte, permite establecer las relaciones causales entre los objetivos del
proyecto y los factores del entorno siendo stos, por definicin, de carcter no controlable, de modo que se
garantice una adecuada evaluacin de la viabilidad del proyecto. sta es su lgica horizontal. Mientras la
lgica vertical garantiza la coherencia interna del proyecto, la lgica horizontal asegura su viabilidad en el
contexto global del mbito pertinente del proyecto. La conjuncin de la lgica vertical y horizontal configura,
si nos atenemos a su carcter lgico-formal, un silogismo tpicamente aristotlico:
Los supuestos son proposiciones en las que se establecen los factores externos que deben existir para lograr el
prximo nivel de la jerarqua de objetivos. Cuanto menor sea la incertidumbre de que ciertos supuestos sean
vlidos, mayor ser la probabilidad de xito. Sin embargo, dado que slo despus de ejecutado el proyecto
quedarn despejadas todas las dudas respecto a la validez del mecanismo de solucin al problema social
implcito en el proyecto, a dicho silogismo se le llama con propiedad argumento o hiptesis de desarrollo.
Adicionalmente, por debajo de las actividades, suelen considerarse a las condiciones previas (previas al
desembolso de fondos por parte de la entidad financiadora del proyecto), que junto con los insumos deben
permitir la realizacin de las actividades del proyecto.
Grfico 2.3 Lgica horizontal
Fin
Supuestos
Propsito
Supuestos
Resultados
Supuestos
Actividades
Supuestos
La lgica es, como se sabe, la disciplina que ensea a evaluar argumentos. En lgica un argumento es un
conjunto de proposiciones, una de las cuales (la conclusin) se deriva de otra u otras (las premisas). Las
premisas proporcionan evidencias, en tanto que la conclusin es la proposicin que surge de estas evidencias.
1.5
El marco lgico es la base conceptual del sistema de gestin por resultados. Este es un conjunto de
procedimientos para la gestin en tiempo real de los resultados de una intervencin pblica o de una
intervencin en el desarrollo en general. La gestin por resultados es un enfoque de gerencia basado en la
nocin de que el empeo en alcanzar los resultados debe guiar la asignacin de recursos, la realizacin de las
actividades y la gestin en su conjunto de una organizacin. El sistema de gestin por resultados es un
conjunto de procedimientos relativos a la administracin de una entidad pblica durante todas las fases del
ciclo de gestin: planificacin, organizacin, direccin y evaluacin. El sistema permite configurar la gestin
de modo que ella se oriente al logro de tres niveles de resultados8:
Primero: Procesos o resultados de primer nivel.
8
El sistema de gestin por resultados es el enfoque principal de gestin de las intervenciones para el
desarrollo promovida por el Comit de Asistencia al Desarrollo de la Organizacin de Cooperacin y
Desarrollo Econmico (OCDE).
9
10
Procesos
Productos
Resultados
Actividades
Inmediatos o
Especficos
Recursos
Final
Un proceso implica el uso de los recursos de una organizacin para obtener un determinado valor 9 .
Ningn producto puede fabricarse y ningn servicio puede suministrarse sin un proceso, y ningn proceso
debe existir si no aporta a la generacin de un producto o servicio. En general, los principios de la gestin
de procesos son bsicamente los siguientes:
1. Los procesos sostienen todas las actividades de trabajo y se presentan en todas las organizaciones
y en todas las funciones de una organizacin.
2. Los procesos se encuentran anidados dentro de otros procesos a lo largo de la cadena de valor de
una organizacin. La cadena de valor, conocida tambin como cadena de suministro, es un
9
Al respecto, vase: Richard Chang, Mejora Continua de Procesos. Ediciones Granica, Buenos Aires, 2011.
11
conjunto de eslabones, conectados unos con otros, que se establecen entre proveedores de
materiales y servicios, y abarca los procesos de transformacin mediante los cuales las ideas y las
materias primas se convierten en bienes y servicios entregables a los beneficiarios de un proyecto
o de una entidad.
Una tarea esencial consiste en coordinar los enlaces entre los procesos. Ya sea que los procesos sean
internos o externos, la gerencia debe prestar especial atencin a las interfaces entre ellos. La necesidad de
lidiar con esas interfaces pone de manifiesto la necesidad de contar con una coordinacin interfuncional.
La administracin de procesos es la seleccin de los insumos, los flujos de trabajo y los mtodos que
transforman los insumos en productos. Por lo general, la seleccin de insumos empieza con la decisin de
qu procesos se habrn de realizar internamente y cules sern contratados a proveedores externos.
En virtud de una costumbre bastante arraigada entre planificadores y gestores pblicos, en la gestin de
los productos, ms que en cualquier otro nivel del marco lgico, deben utilizarse frases que expresen las
acciones como si ya hubieran sido realizadas o como productos terminados.
Ejemplos de productos
Resultado
Productos
12
Los resultados pueden ser de dos tipos bsicos: resultados inmediatos y finales. Los resultados inmediatos
se refieren a los efectos directos de un proyecto. Corresponden a qu pasa despus a las familias,
personas, grupos, comunidades o instituciones, luego de la ejecucin de las actividades del proyecto y la
entrega de los productos. Medir los efectos significa analizar los cambios en el comportamiento de las
familias y las personas, as como los cambios en el desempeo de grupos e instituciones. Estos cambios
son muy especficos de cada contexto y dependen de las caractersticas y los objetivos del proyecto. Se
puede recurrir a diversos mtodos para medir estos cambios: estudios, encuestas basadas en cuestionarios,
debates temticos en grupo, etc.
Por su parte, el resultado final corresponde al nivel superior de una intervencin, guarda estrecha relacin
con los objetivos de mayor jerarqua de un proyecto y se refieren a los impactos esperados en el mediano
y largo plazo. Por ejemplo, segn el FIDA11, en los proyectos de mejoramiento de la productividad de los
cultivos, el resultado final podra relacionarse al aumento de los activos disponibles y una mejor nutricin
de las familias campesinas.
Cadena de resultados
En el contexto de la gestin de proyectos de desarrollo, el concepto de cadena de resultados es un
elemento fundamental de la gestin basada en resultados. La cadena de resultados muestra la relacin
causal entre insumos, procesos, productos y resultados a lo largo del tiempo. La razn en que se sustenta
la gestin basada en resultados es que la estrategia de gestin se centra en primera instancia en los
resultados, tanto mediatos como inmediatos; en segunda instancia en los productos previstos; y,
finalmente, se determinan los recursos o insumos y los procesos o actividades necesarios para generar los
productos y alcanzar los resultados previstos2. Se debe utilizar la informacin sobre la ejecucin del
proyecto en relacin a los productos, los efectos e impactos previstos, a fin de proponer ajustes y mejoras
de los insumos y las actividades.
10
En determinados organismos, como el FIDA, los resultados son conocidos como resultados de tercer
nivel.
11
FIDA, Fondo Internacional de Desarrollo Agrcola, organismo multilateral de financiacin de proyectos
agropecuarios en los pases en desarrollo.
13
Recursos
Como se muestra en el grfico 2.2, la jerarqua de los resultados est alineada con la cadena de resultados
del proyecto, lo cual facilita el trabajo ulterior de diseo del sistema de monitoreo y evaluacin de un
proyecto y su contribucin a la gestin por resultados de la organizacin correspondiente.
15
Cadena de
resultados
Indicadores de
desempeo
Medios de
verificacin
Factores
externos
Resultado final
Indicadores
de Impacto
Fuentes
secundarias
Supuestos para
la sostenibilidad
Resultado
especifico
Indicadores
de efecto
Fuentes
secundarias
Supuestos para
logro del fin
Productos
Indicadores
de producto
Fuentes
secundarias y
primarias
Supuestos para
logro del
propsito
Fuentes
primarias
Supuestos para
logro de
componentes
Actividades
Indicadores
de proceso
Condiciones
previas
Condiciones de efectividad.
Principios: viabilidad y
sostenibilidad.
16
2.1
2.2
Tomando como punto de partida el marco lgico de un proyecto, el propsito y dems elementos de
un proyecto pueden ser visualizados y conceptualizados en forma interrelacionada. As tenemos
que:
Los resultados se encuentran localizados en las filas del propsito y fin del marco lgico;
Los resultados tambin se encuentran, en parte, localizados en la fila correspondiente a
los componentes del marco lgico. Se refieren a los productos entregados por el proyecto
a la poblacin beneficiaria.
Finalmente, los procesos estn localizados en las actividades del marco lgico, pues, se
refieren al uso de insumos para la realizacin de actividades generadoras de los
productos.
17
Indicadores
Fin
Indicadores
de impacto
Propsito
Indicadores
de efecto
Productos
Indicadores
de producto
Actividades
Costos
(Insumos)
Resultados
Procesos
Medios de
Verificacin
Supuestos
Las actividades, sin embargo, estn asociadas a los componentes y pueden conformar el referente
para la evaluacin en la etapa de ejecucin de un proyecto.
2.3
Evaluacin ex -post
Despus de culminada la ejecucin del proyecto, debe realizarse el anlisis de los resultados del
proyecto. En esta etapa se puede determinar la coherencia, pertinencia, eficacia, eficiencia, impacto
y sostenibilidad del proyecto. En todos los casos, se espera que la evaluacin proporcione a la
institucin ejecutora y al conjunto de involucrados del proyecto informacin confiable que permita
extraer lecciones sobre determinados aspectos clave de la promocin del desarrollo y que, por lo
tanto, permitan elevar la calidad de las intervenciones en el futuro.
En el contexto del enfoque del marco lgico y como ya ha sido sealado se pueden establecer hasta
tres tipos de evaluacin: evaluacin de procesos (monitoreo), evaluacin de resultados (o
simplemente evaluacin) y evaluacin de impacto. Cabe destacar que estos tres tipos de evaluacin
tienen su razn de ser en el hecho que, por lo general, cuando se evala un proyecto se busca
responder a tres preguntas fundamentales:
Este tipo de evaluacin est destinada a responder preguntas como las siguientes:
18
Pertinencia. Grado en el cual el objetivo del proyecto es consistente con las prioridades de
desarrollo de la poblacin objetivo y las polticas de la entidad ejecutora y el organismo
donante o financiador.
Eficacia. Grado en el cual se logran los objetivos especficos y el propsito del proyecto.
Eficiencia. Anlisis de los resultados con relacin al costo; es decir un anlisis de la
transformacin de los insumos en producto mediante la realizacin de determinadas
actividades.
Impacto. Valoracin socioeconmica global, incluyendo los efectos positivos y negativos,
tanto aquellos que son deseados y estaban previstos, como los no previstos y no deseados.
Sostenibilidad. Apreciacin de la capacidad para mantener los impactos positivos del
proyecto por un largo periodo de tiempo. Anlisis sobre si el efecto global en trminos, por
ejemplo, de empleo e ingresos es positivo tambin en el largo plazo.
Estos aspectos estn estrechamente relacionados al enfoque del marco lgico. As, la pertinencia
alude a la relacin del propsito con las prioridades de desarrollo; la eficacia a la relacin entre los
productos y el propsito; la eficiencia es una comparacin de los insumos con los productos; el
impacto establece relaciones entre las variables controlables por el proyecto y el fin; y, por ltimo,
la sostenibilidad analiza la interaccin entre el fin y los supuestos al mismo nivel.
Evaluacin de impacto. Las evaluaciones de impacto permiten determinar con mayor certeza la
relacin causa-efecto de un proyecto dado y sus resultados en la poblacin beneficiaria. Por lo
general, la metodologa de evaluacin consiste en la construccin de un escenario contrafactual, a
travs del cual se compara la situacin con proyecto versus la situacin sin proyecto y, de este
modo, se estima tanto la magnitud de los cambios como la proporcin de dichos cambios atribuible
al proyecto. El escenario contrafactual se puede construir usando diversas metodologas que se
clasifican en dos categoras generales: diseos experimentales y no experimentales. Tambin se
pueden usar mtodos cualitativos y participativos para evaluar el impacto. Estas tcnicas con
frecuencia proporcionan informacin decisiva sobre las perspectivas de los beneficiarios, el valor
que los proyectos tienen para ellos, los procesos que pueden haber afectado los resultados y una
interpretacin ms profunda de los resultados observados en el anlisis cuantitativo.
2.4
Evaluacin de resultados
Anlisis de coherencia
El anlisis de coherencia consiste en determinar en qu grado el proyecto no contradice a otras
intervenciones de desarrollo con objetivos similares. En este aspecto se distinguen tres niveles:
Anlisis de coherencia
Anlisis de eficiencia
Por eficiencia se entiende el grado en el que las actividades y resultados del proyecto se han
logrado en relacin a las metas programadas. Asimismo, el anlisis de eficiencia comprende la
evaluacin del grado de ejecucin del presupuesto asignado al proyecto. En otras palabras, el
anlisis de eficiencia consiste en determinar el grado en el que los diversos insumos se convierten
en productos de manera econmica. De all que una forma universal de operativizar el anlisis de
eficiencia sea a travs del clculo de la ratio costo-efectividad.
La eficiencia es la medida de la productividad del proceso de implementacin, esto es, en qu
grado los productos logrados derivan de un uso eficiente de los recursos financieros, humanos y
materiales. En principio, implica comparar insumos contra productos. La mayor dificultad para
medir la eficiencia radica en determinar el estndar de comparacin o lnea de corte. Esto
depender del tipo de proyecto, de las circunstancias locales y de otros factores. El estndar
difcilmente est predeterminado, por lo tanto en la prctica depende del equipo de evaluacin
especificar contra qu estndar se va a medir. Por ejemplo: contra proyectos comparables, sobre la
base de la experiencia con otros proyectos y sobre la base de criterios especficos de razonabilidad.
La evaluacin de la eficiencia queda implcita durante la planificacin del proyecto, cuando se
decide sobre los presupuestos e insumos. Asimismo representa una parte considerable de las
posteriores actividades de monitoreo y evaluacin. A lo largo de un proyecto slo se puede hacer
evaluaciones parciales de la eficiencia. Una valoracin completa y global solamente es posible
cuando el proyecto ha sido concluido. Para ello, se recopila informacin necesaria para medir la
eficiencia durante la preparacin de la evaluacin. El anlisis de eficiencia implicar realizar las
acciones siguientes:
20
Anlisis de eficiencia
Anlisis de eficacia
La eficacia de un proyecto es una medicin del grado de avance sobre el logro del propsito del
proyecto, o bien de la probabilidad de que se logre al trmino del periodo previsto de ejecucin. La
eficacia implica el grado en que se logra el propsito o se espera alcanzarlo. Establecer la eficacia es
parte del monitoreo, de manera que podemos suponer que la informacin necesaria ser provista
por la gerencia del proyecto en el momento en que se realiza la evaluacin.
La determinacin de la eficacia presupone que el propsito del proyecto ha sido definido
operacionalmente y de manera no ambigua, de forma tal que sea posible una verificacin
razonablemente valida. Sin embargo, con frecuencia no se da esto: los objetivos pueden estar
formulados de manera poco clara y ser demasiado generales. En tales casos se debe resaltar esa
debilidad y el equipo de evaluacin tiene que operacionalizar los objetivos sobre la base de la
documentacin existente del proyecto, de manera de determinar qu se ha logrado realmente.
Usualmente, un proyecto de desarrollo es slo uno de los muchos factores que pueden contribuir al
logro de los objetivos de desarrollo de un pas. Por lo tanto, el equipo de evaluacin fijar su
atencin sobre las causas de la eficacia (o de la falta de sta), especialmente en qu grado se han
alcanzado los productos esperados, y si estos son suficientes o si se deben hacer cambios en el
diseo del proyecto para asegurar la eficacia en un tiempo determinado. Sin embargo, es
igualmente importante determinar minuciosamente los factores externos (supuestos) que tambin
influyen sobre las probabilidades de xito del proyecto. El anlisis de eficacia implicar realizar las
acciones siguientes:
Anlisis de eficacia
Anlisis de impacto
El impacto del proyecto son las consecuencias para la sociedad, tanto las previstas como las no
esperadas, sean stas positivas y negativas. Aqu se debe tomar como punto de partida el fin y el
propsito del proyecto, pero va mucho ms all de simplemente establecer si se han cumplido. Este
tipo de evaluacin con frecuencia requiere de investigaciones que abarcan un mayor campo de
estudio. La eficacia es un criterio de evaluacin estrecho, ya que el propsito del proyecto indica
21
solamente los efectos positivos esperados por las partes involucradas. A diferencia de esto, el
concepto de impacto es mucho ms amplio porque incluye las consecuencias positivas y negativas,
tanto las previstas como las no esperadas. Una determinacin amplia de los impactos de un
proyecto es central en la evaluacin. Con frecuencia se trata de la parte ms difcil y exigente del
trabajo de evaluacin. En la determinacin de impactos el punto de partida debe ser el propsito
del proyecto en la forma en que ha sido definido, as como el grado de eficacia alcanzado, y luego se
debe analizar que otros efectos (positivos o negativos, previstos o no esperados) se han producido
como resultado de la ejecucin del proyecto.
El impacto total es el resultado de condiciones causales complejas que pueden ser difciles de
analizar. Puede ser especialmente problemtico probar que los cambios observables son
producidos por un determinado proyecto o accin de desarrollo. A fin de comprender las
conexiones causales, el evaluador puede necesitar emplear mtodos orientados al proceso, como la
observacin de los participantes. En distintos momentos pueden aparecer diferentes impactos. En
el trabajo de evaluacin se debe poner atencin tanto a los impactos de corto plazo como a los de
largo plazo. Las evaluaciones de proyectos en implementacin igual pueden producir conclusiones
valiosas aplicables en el futuro a proyectos de desarrollo similares. El anlisis de impacto implicar
realizar las acciones siguientes:
Anlisis de impacto
Determinacin de los efectos del proyecto sobre las poblaciones ms pobres del
pas.
Determinacin de los efectos del proyecto sobre las poblaciones de mayor
vulnerabilidad actual.
Anlisis de sostenibilidad
La sostenibilidad es una estimacin global sobre el grado en que los cambios positivos producidos
por el proyecto continuarn an despus que ste haya concluido y que en particular el apoyo de la
cooperacin haya concluido. Segn la OCDE12, la sostenibilidad es la prueba final del xito de un
proyecto de desarrollo. As, la determinacin de la sostenibilidad de un proyecto de desarrollo
implica mucho ms que la respuesta a la pregunta sobre el logro de los objetivos fijados: indica la
probabilidad que los impactos positivos continen una vez que hayan concluido las actividades del
proyecto. En el contexto de los proyectos de desarrollo, la sostenibilidad se define como la
capacidad para generar beneficios duraderos, que permanezcan vigentes incluso despus de que el
proyecto haya concluido13. Los puntos clave a destacar en la definicin de sostenibilidad son los
siguientes:
La atencin se centra en mantener el flujo de beneficios en lugar del mantenimiento del
proyecto mismo. Los proyectos, por definicin, no son sostenibles, ya que son acciones de
carcter temporal, con fechas de inicio y trmino predeterminadas en los correspondientes
estudios de pre inversin y convenio de donacin.
El concepto de beneficios sostenibles, por lo tanto, no necesariamente significa la continuidad de
las actividades del proyecto, ms all de un periodo razonable de tiempo.
12
22
El anlisis de sostenibilidad es, pues, un proceso encaminado a maximizar y dar continuidad al flujo
de beneficios para la poblacin. Debe ser un proceso permanente y debe ser actualizado segn las
cambiantes circunstancias del entorno. Cabe destacar, sin embargo, que no existe una nica manera
de lograr la sostenibilidad, sino que cada proyecto debe definir su propia estrategia de
sostenibilidad, segn las circunstancias especficas internas y externas. El anlisis de sostenibilidad
de un proyecto consiste, pues, en determinar si ms all del logro de sus objetivos, es posible que
los impactos positivos continen despus que el proyecto haya concluido. El anlisis de
sostenibilidad implicar realizar las acciones siguientes:
Anlisis de sostenibilidad
En general, se debe recopilar informacin cualitativa y cuantitativa sobre la ejecucin del proyecto.
A partir de esto se realizan diversos anlisis, con la finalidad de transformar la masa de datos
obtenida en informacin real para la toma de decisiones.
Anlisis de pertinencia
Por pertinencia se entiende la apreciacin global sobre si el proyecto se condice con los objetivos
de desarrollo del pas, as como las necesidades y prioridades locales. En otras palabras, se refiere a
clarificar si el proyecto debe ser continuado, reformulado o finalizado. As, la pertinencia es un
tema relevante dentro de la evaluacin y debe estar presente desde las etapas inciales de
planificacin y a lo largo de todo el ciclo del proyecto.
El anlisis de pertinencia es una cuestin de direccin del proyecto en relacin con su propsito.
Por otro lado, implica observar los cambios sociales e institucionales que puedan haber ocurrido
durante la ejecucin del proyecto y evaluar hasta qu punto esto puede alterar la lgica del
proyecto. Cabe indicar que determinados cambios en las condiciones externas podra disminuir el
grado de prioridad del proyecto o erosionar su fundamento lgico. Por ello, el anlisis de
pertinencia implica decisiones del ms alto nivel sobre la conclusin o continuacin del proyecto y,
en este ltimo caso, sobre posibles cambios en la estrategia y metodologas de ejecucin del
proyecto. El anlisis de pertinencia implicar realizar las acciones siguientes:
Anlisis de pertinencia
2.5
En el diseo experimental los participantes son asignados aleatoriamente antes del inicio
del proyecto. Ello permite conformar grupos que son en promedio similares en todas sus
caractersticas excepto por su participacin en el proyecto.
En el diseo cuasi-experimental la asignacin es no aleatoria, de modo que el grupo de
control puede conformarse una vez que el proyecto ha empezado. En este diseo el mtodo
de asignacin dificulta la conformacin de grupos similares, lo que hace necesario el uso de
tcnicas estadsticas y economtricas para corregir el sesgo de seleccin generado.
En el mtodo no experimental, a diferencia de los diseos experimentales y cuasiexperimentales, no se construye un grupo de control o comparacin para contrastar los
cambios en el grupo de tratamiento.
Esta seccin est basada principalmente en los trabajos del ILPES sobre evaluacin de impacto. Sin embargo, pueden
encontrarse magnficos trabajos en el Banco Mundial, especialmente los de Judy Baker y en la OIT, sobre todo el trabajo
de Abdala. En el Per, los trabajos de GRADE, especialmente el de evaluacin de impacto del programa PROJOVEN
constituye una excelente aplicacin del mtodo.
24
impacto. Para eliminar las diferencias entre estos dos grupos se utilizan tcnicas economtricas que
usan una o ms variables pertinentes a la participacin pero no a los resultados de la participacin.
Beneficiarios
E: Situacin antes
del proyecto
Controles
F: Situacin antes
del proyecto
C: Estado de tratamiento
D: Estado de no tratamiento
Situaciones observables
Situaciones no observables
Estimador Corte Transversal. El estimador de corte transversal slo toma en cuenta la situacin
de beneficiarios y controles despus del proyecto. Directamente el impacto se estima a travs de AD. Aqu, el supuesto es que D es una buena representacin de B. Esta metodologa se utiliza en los
casos en los que no hay informacin acerca del proyecto al inicio del mismo, (lnea de base), y slo
25
se puede recoger informacin luego del proyecto. Ntese que si las situaciones de los beneficiarios y
controles son similares en el perodo anterior al proyecto, el estimador de diferencia en diferencias
es equivalente al estimador de corte transversal.
Despus del
proyecto
Comparacin
antes / despus
Con proyecto
100
150
50
Sin proyecto
100
120
20
30
30
Lnea
de base
Lnea
de salida
Beneficios
incrementales
Rubro
Comparacin
con/sin proyecto
Finalmente, se debe tener en cuenta que en muchas evaluaciones estos diseos, ms que
sustitutorios, son utilizados como alternativas complementarias de evaluacin. Por ejemplo, un
proyecto puede evaluar uno de sus objetivos con un diseo experimental y los dems con diseos
no experimentales. Tambin, una evaluacin podra seleccionar aleatoriamente las reas
geogrficas en donde el proyecto se implementara (diseo experimental) y, luego, utilizar un
diseo cuasi-experimental para conformar los grupos de tratamiento y comparacin dentro de cada
rea. La evaluacin de impacto es la base para dar respuesta a la pregunta: Qu hubiera ocurrido si
no se hubiera ejecutado el proyecto?
26
Despus del
proyecto
43,597,200
83,895,000
40,297,800
Total
43,597,200
83,895,000
40,297,800
Nmero de personas
141,000
309
141,000
595
141,000
286
43,597,200
73,207,200
29,610,000
Total
43,597,200
73,207,200
29,610,000
141,000
141,000
141,000
309
519
210
10,687,800
10,687,800
141,000
141,000
Nmero de personas
Ingreso anual percapita
Ingresos incrementales
Mtodo con y sin proyecto
92%
68%
Total
Nmero de personas
Ingresos incrementales (S/.)
Ingresos incrementales (%)
Lnea
de base
76
76
24.5%
24.5%
Lnea
de salida
Beneficios
incrementales
En una evaluacin de impacto, los resultados de un proyecto deben ser aislados o separados de
factores o sucesos correlacionados pero cuyo origen sea distinto a las acciones o productos
considerados en la intervencin.15 Como seala Baker, para asegurar rigor metodolgico, una
evaluacin de impacto debe estimar el escenario contrafactual o simulado alternativo, que equivale
a lo que habra ocurrido si el proyecto nunca se hubiera realizado o lo que habra ocurrido
normalmente.
2.6
15
La presente seccin y otras con referencias conceptuales a la evaluacin de impacto estn basadas en el trabajo de Judy Baker,
Evaluacin del Impacto de los Proyectos de Desarrollo en la Pobreza. Banco Mundial, Washington DC, 2000.
27
la evaluacin debiera conformar o recusar, segn sean los resultados reales que se hayan producido
con el logro de los objetivos determinados en el plan estratgico.
Paso 2: Determinar el tipo de evaluacin y metodologa pertinentes. Las evaluaciones pueden
ser de tres tipos: evaluacin de procesos, evaluacin de resultados y evaluacin de impacto.
Frecuentemente, la evaluacin incluye los dos primeros tipos, y solo en pocos casos en aquellas
intervenciones consideradas de carcter estratgico en la lucha contra la pobreza- se realizan
evaluaciones de impacto. Los factores que determinan la seleccin de una evaluacin de impacto
estn vinculados a las siguientes interrogantes:
Paso 3: Identificar los indicadores adecuados. En esta etapa se identifican los indicadores
necesarios para evaluar el desempeo de las actividades (evaluacin de proceso) y de los
resultados obtenidos (evaluacin de resultados y de impacto), tomando en consideracin, tanto los
criterios genricos de seleccin de indicadores como la data existente que podra ser obtenida a
costo razonable.
Cabe sealar que las evaluaciones de procesos pueden tener aspectos cuantitativos y cualitativos.
Los indicadores cuantitativos miden nmero, porcentaje, promedio, ndices u otras magnitudes
estadsticas, pero no siempre logran capturar la esencia de los aspectos cualitativos que queremos
evaluar. Por ejemplo, para evaluar el grado de satisfaccin de un taller, se puede aplicar un
cuestionario estructurado para determinar el porcentaje de participantes que opinaron que las
presentaciones fueron claras, que fueron interesantes, que proporcionaron informacin suficiente,
etc. (datos cuantitativos). Alternativamente, se pueden reunir a participantes en un grupo focal
para conocer sus actitudes hacia diferentes aspectos del taller (datos cualitativos). Ambos enfoques
tienen ventajas y desventajas. Lo esencial es que los resultados de ambos procesos puedan servir
para obtener retroalimentacin sobre la dinmica de la actividad que se est evaluando.
Paso 4: Recopilar la informacin. Para cada indicador es necesario recolectar datos de alguna
fuente que permita viabilizar la evaluacin. En algunos casos, los datos ya estn disponibles, por lo
que el trabajo se reduce al anlisis de los mismos. En otros casos, no existe data disponible, por lo
que se tiene que disear y conducir un estudio para obtener esos datos. Cabe anotar que la mayora
de evaluaciones utilizan mtodos cuantitativos y cualitativos. Si la fuente de informacin utilizada
es de carcter primario, las fuentes de datos cuantitativos ms importantes son:
Entrevistas estructuradas.
Estadsticas de servicio (datos administrativos).
Sin embargo, los datos cuantitativos requieren, por lo general, ser complementados con datos
cualitativos, por su mayor contenido de informacin en cuanto a actitudes, opiniones y valores. Las
tcnicas cualitativas ms importantes son:
Entrevistas en profundidad.
Grupos focales.
Observacin directa.
Paso 5: Anlisis de informacin y elaboracin del informe. Al igual que los pasos anteriores, el
anlisis de los datos requiere un trabajo de equipo para aclarar preguntas y garantizar resultados
oportunos y de calidad. Un primer problema que debe ser abordado se refiere a la depuracin de
28
los datos proveniente de fuentes primarias y secundarias. Existen diversas tcnicas de anlisis
cuantitativo basadas en mtodos estadstico, as como tambin existen muchas tcnicas para
analizar datos cualitativos. Particularmente en las evaluaciones de impacto, dos tcnicas son de uso
frecuente: anlisis de contenido y anlisis de casos.
El anlisis de contenido se usa para analizar datos obtenidos a travs de entrevistas, observaciones
y documentos. Sobre la base de un sistema de clasificacin de datos, la informacin debe ser
organizada de acuerdo con lo siguiente:
Una vez establecido el sistema de clasificacin, se inicia la fase de anlisis. Esta consiste en buscar
patrones en los datos e ir ms all de la descripcin hacia la comprensin de los procesos,
resultados e impactos. Adems del trabajo de equipo, el anlisis de la informacin puede ser
reforzada con el uso de programas computacionales.
De otro lado, el anlisis de casos se basa en estudios de detalle de un determinado grupo o
individuo relacionado con el contexto bajo evaluacin. El alto nivel de detalle obtenido puede
proporcionar informacin valiosa para evaluar la calidad de los procesos, resultados e impactos del
proyecto. Los procesos de recopilacin y anlisis de los datos se llevan a cabo en forma simultnea,
puesto que los evaluadores realizan observaciones mientras recopilan la informacin.
Finalmente, cabe indicar que los informes de evaluacin se deben planificar como parte de una
estrategia de difusin, que puede incluir, adems del informe tcnico propiamente dicho, la
realizacin de presentaciones ante diversos pblicos y la difusin en los medios de comunicacin
de los resmenes ejecutivos sobre los hallazgos de la evaluacin.
29
3.1
16
Una amplia revisin de los procedimientos de investigacin cientfica, en gran medida aplicables al diseo y
ejecucin de evaluaciones, puede encontrarse en Metodologa de la Investigacin Cientfica de Roberto
Hernndez, Carlos Fernndez y Pilar Baptista. Mc Graw-Hill, Mxico, 1999.
30
Cadena de
resultados
3.2
Indicadores
de desempeo
Fin
Indicadores
de Impacto
Propsito
Indicadores
de efecto
Componentes
Indicadores
de producto
Actividades
Indicadores
de proceso
Medios de
verificacin
Factores
externos
Cabe indicar que, en el contexto de las acciones de monitoreo y evaluacin de un proyecto, los
indicadores juegan un rol clave. Los indicadores resumen la informacin necesaria para efectuar la
comparacin entre lo planeado y lo ejecutado, y hacen que esta comparacin sea objetiva. Luego de haber
fijado los objetivos, el siguiente paso consiste en identificar los indicadores relevantes y establecer las metas
correspondientes. En otras palabras, para fijar metas previamente debe haberse identificado los indicadores, los
cuales, a su vez, corresponden a determinados objetivos. Dado que rara vez un objetivo puede ser medido
cabalmente a travs de un slo indicador, por lo general se requieren varios indicadores, tanto intermedios
como finales, para medir el alcance en el logro de un objetivo. A este respecto, cabe clarificar la relacin
conceptual entre los objetivos, los indicadores y las metas17:
Los objetivos, como ya ha sido sealado, son formulados en trminos cualitativos con
expresiones tales como: eliminar la pobreza extrema, mejorar el nivel de habilidades
empresariales, generar nuevos puestos de trabajo, elevar el nivel de ingresos, etc.
Los indicadores son el resumen de las variables que se utilizan para medir las caractersticas o
atributos que denotan el progreso hacia el logro de los objetivos. Por ejemplo, el avance en la
erradicacin de la pobreza extrema podra medirse a travs del nmero de personas con
necesidades bsicas insatisfechas o del nmero de personas con un ingreso menor a 1 dlar
diario.
Las metas son los niveles cuantificables de los indicadores que una organizacin o un pas desea
alcanzar en un momento dado. Son los valores a alcanzar con la intervencin: representan en
trminos cuantitativos la situacin con proyecto. Por ejemplo: reducir la tasa de analfabetismo al
3% en el 2005.
17
El rol de los indicadores en el diseo de sistemas de monitoreo y evaluacin es descrito ampliamente por G.
Rubio, G. Prenushi y K. Subbarao, Monitoring and Evaluation. Banco Mundial, 2000.
31
Finalmente, debe recordarse que la fijacin de objetivos claros es el primer requisito para alcanzarlos. Y
fijarlos en forma participativa es la nica manera de generar compromisos fuertes en torno a ellos. Objetivos
claros y compromisos fuertes son los dos grandes principios en la ciencia y el arte de la planificacin.
Nombre
Definicin
conceptual
Definicin
operativa
Forma
Forma de
clculo
Valor
Lnea de
base
Variables
especficas
Metas
Global
Hitos
Proceso de verificacin
Nombre o denominacin.
Definicin operativa.
Categoras o niveles de los valores de la variable.
Procedimiento para recopilar los datos desde las unidades de anlisis.
Indicadores o medidas de resumen de los datos recopilados.
Veamos, a modo de ejemplo, los elementos de la variable estado civil, que es una variable
cualitativa.
Nombre
Estado civil.
Definicin
Categoras
(01) Soltero (a)
Obtencin de datos
(03) Conviviente
Indicadores
Distribucin porcentual.
Tasa de nupcialidad.
Veamos el caso de una variable cuantitativa, como por ejemplo la variable ingreso.
Nombre
Ingreso
Definicin
Categoras
ingreso
Por intervalos
(03) 401-600;
(04) 601-800;
(05) 801-1000;
(06) 1001-1400;
(07) 14pl-1800;
(08) 1801-2200;
(09) 2201-2600;
(10) 2601-3000;
Indicadores
Ingreso promedio.
Ingreso mediano.
Coeficiente de Gini.
Analfabetismo
Definicin
Categoras
Obtencin de datos
Indicadores
Bajo
Medio
De 10 a 20%
Alto
De 21 a 30%
Muy Alto
Ms de 30%
Tasa de analfabetismo.
Proporcin de analfabetos hombres.
Proporcin de analfabetos mujeres.
33
Las variables claves de un sistema de monitoreo y evaluacin estn relacionadas con los objetivos
de la intervencin. Para ello, los objetivos deben ser claros, especficos y mensurables. Cuantificar
un objetivo consiste en asociarle patrones que permitan hacerlos verificables. Segn la relacin
causa-efecto analizada, las variables pueden dividirse, de acuerdo con el papel que desempeen en
la relacin causal, en dependientes e independientes:
a) Variable dependiente. Es aquella cuyo comportamiento es explicado por otra u otras
independientes. Se la denomina tambin variable a explicar o criterio y suele representarse
por la letra Y del eje de ordenadas. Por ejemplo, el consumo de helados (variable
dependiente) puede ser explicado por la edad del individuo.
b) Variable independiente. Es una variable que se utiliza para explicar el comportamiento de
otra dependiente. Se la denomina tambin variable explicativa o predictora y se representa
por la letra X del eje de abscisas. En el ejemplo anterior, la edad es la variable
independiente.
Cualitativa
Marca de computadora.
Estado civil
Color de cabello.
Cuantitativa
Discreta
Continua
Hijos en una
familia
Goles en un
partido de futbol.
Aparatos electricos
que se poseen.
Monto del
impuesto a la renta
Peso de un
estudiante
Precipitacin anual
en el distrito X.
Cuando la variable que se estudia aparece en forma numrica, la variable se denomina variable
cuantitativa. Variables cuantitativas bastante conocidas son, por ejemplo, la tasa de crecimiento del
PBI, el ingreso per cpita y el valor de las exportaciones. Estas variables pueden ser discretas o
continuas. Las variables discretas adoptan slo ciertos valores y existen vacos entre ellos. Ejemplos
de variables discretas son el nmero de camas en un hospital (1, 2, 3, 4, etc.); el nmero de
automviles que cruzan una determinada interseccin de la ciudad y el nmero de estudiantes en
una escuela. Por consiguiente, existe un vaco entre los valores posibles. Las variables discretas son
el resultado de una relacin numrica. Las observaciones de una variable continua toman cualquier
valor dentro de un intervalo especfico. Ejemplos de variables continuas son: presin del aire en
una llanta, peso de un cargamento de tomates, valor de la produccin agrcola, etc. Se acostumbra
redondear a 3 lugares decimales (3.258, por ejemplo) todas las variables continuas, aunque esto es
opcional.
18
Basado en: Douglas A. Lind: Estadstica aplicada a los negocios y la Economa. Mc Graw Hill. Mxico DF, 2008.
34
Escalas de medida
La precisin con la que un indicador (variable operacionalizada) representa las caractersticas o
atributos del individuo u objeto que es materia de medicin, depende de la escala de medicin. Se
entiende por escala a los valores numricos asignados a cada variable segn ciertas reglas. Este es
el significado bsico del concepto de escala; concepto que, por otra parte, puede adoptar diversos
significados, entre ellos el de instrumento de medida compuesto por una serie de tems que se
utiliza para cuantificar caractersticas de los individuos a partir de sus respuestas a los tems.
La tipologa de escalas de medida ms difundida es la propuesta por Stevens (1946), que distingue
cuatro tipos19: nominal, ordinal, de intervalo y de razn; cada una de ellas ms precisa que la
anterior. Las dos primeras escalas son no mtricas o cualitativas, ya que reconocen en cada objeto
una determinada cualidad o atributo; mientras que las dos ltimas son escalas mtricas o
cuantitativas, capaces de reflejar diferencias de grado o cantidad.
La medida de las variables viene determinada por la escala utilizada. El tipo de escala, a su vez,
condiciona la eleccin de la tcnica estadstica de anlisis de los datos. La escala es un instrumento
utilizado para medir las variables. Pueden distinguirse cuatro tipos de escalas (Stevens, 1946):
a) Escala nominal. Indica slo la pertenencia a una clase o categora, dentro de una variable;
por ejemplo, hombre o mujer, en la variable sexo; soltero, casado, divorciado o
viudo, en la variable estado civil, etc. Si se asocian cdigos numricos a las categoras, su
finalidad es nicamente la de identificarlas y facilitar el tratamiento de los datos. No hay
jerarqua entre las categoras, ni igual diferencia entre ellas, ni, por supuesto,
proporcionalidad.
b) Escala ordinal. Es una variante de la escala nominal que presenta una ordenacin de algn
tipo (de ms a menos o de menos a ms) en las categoras o clases. Por ejemplo, en la
variable nivel de estudios existe una jerarqua (de conocimientos) entre sus clases o
categoras (<<sin estudios, estudios primarios, estudios medios y estudios
superiores); pero, al igual que en la escala nominal, los intervalos no son iguales ni existe
proporcionalidad entre ellos (la diferencia, por ejemplo, entre estudios primarios y
estudios medios no es la misma que entre esta ltima categora y la representada por
estudios superiores, ni puede decirse que los estudios superiores implican el doble o el
triple de conocimientos que los estudios primarios).
c) Escala intervlica. Supone que, adems de existir ordenacin, las distancias entre los
valores o intervalos de la escala son iguales, aunque no existe proporcionalidad entre ellos
ni el valor O de la escala es absoluto. Por ejemplo, los grados de temperatura (Celsius,
Fahrenheit, Rankine o Kelvin), o la valoracin de un servicio (-2 = muy negativo; -1 =
negativo; O = neutral; 1 = positivo; 2 = muy positivo). En esta ltima escala se podran
utilizar, alternativamente, valores comprendidos entre 1 y 5 para expresar la apreciacin
del servicio.
d) Escala proporcional o de razn. Supone que, adems de ordenacin e igual distancia,
como en la escala intervlica, existe proporcionalidad entre los valores de la escala y el
valor O es absoluto. Por ejemplo, los aos de edad, ingresos anuales, nmero de kilmetros
recorridos anualmente en automvil, saldo de la cuenta corriente, etc.
19
Basado en: Jean-Pierre LvyMangin: Anlisis multivariable para las ciencias sociales (2008). Prentice Hall.
Madrid.
35
Existe una jerarqua entre las escalas, de modo que las proporcionales ocupan la posicin ms alta.
Cualquiera de las escalas de orden superior cumple los requisitos de las de orden inferior y puede
transformarse en ellas, pero no a la inversa.
Las escalas nominales y ordinales constituyen escalas no mtricas, que carecen de significado
cuantitativo, mientras que las escalas intervlica y proporcionales son escalas mtricas, que s
tienen un significado cuantitativo. Por tal motivo, las variables medidas con escalas no mtricas son
variables cualitativas, mientras que las medidas con escalas mtricas se denominan variables
cuantitativas. En DYANE las variables identificadas como categricas son las que se miden con
escalas no mtricas, es decir, variables cualitativas, y las variables denominadas numricas, las que
se miden con escalas mtricas, identificadas tambin como variables cuantitativas.
Concepto de categora
Una categora o clase es un conjunto de personas, entidades u objetos que presentan los mismos
atributos o caractersticas. Por ejemplo, mujeres, empresas multinacionales, automviles
deportivos, etc. La categora es una medida de una variable en la que la escala utilizada es de tipo
nominal u ordinal. Por ejemplo, la variable edad suele medirse en aos, en cuyo caso se trata de una
escala de medida de tipo proporcional, con intervalos iguales y O absoluto, y a la que puede
aplicarse una gran variedad de tcnicas estadsticas. Pero la edad puede medirse tambin
utilizando una escala no mtrica, asignando los individuos a categoras o clases tales como nio,
adolescente, joven, adulto, etc., en las que, si bien existe una jerarqua u ordenacin, los
intervalos son desiguales y, por tanto, no hay proporcionalidad entre los mismos.
Una categora puede ser identificada por un nmero (1, 2, 3...), pero este nmero utilizado slo es
un cdigo distintivo de la categora, y no puede entenderse como un valor cuantitativo de la
variable al que, juntamente con otros, se le pueda calcular la media o la desviacin tpica, por
ejemplo. Las categoras pueden ser contadas o agrupadas, y se puede presentar su distribucin de
frecuencias de forma individualizada, mediante una tabulacin simple, o de forma conjunta y
simultnea con otra u otras variables, mediante tabulaciones cruzadas, pero no se les puede aplicar
estadsticas propias de las variables cuantitativas. La variable sexo, por ejemplo, puede ser
representada por dos categoras identificadas con dos cdigos: 1 = Hombre y 2 = Mujer. Si la
muestra estudiada es de 200 personas y la mitad son hombres y la otra mitad, mujeres, se puede
decir que en el total de la muestra hay 100 hombres y 100 mujeres, o que el 50 por 100 son
hombres y el otro 50 por 100 son mujeres. Tambin se puede calcular la distribucin absoluta y
relativa del sexo en cada una de las categoras de otra variable, por ejemplo, estado civil, y
presentar los resultados en forma de tabla cruzada.
Pero sera absurdo decir que la media de la variable es 1,5 o que la desviacin tpica es 0,5 (valores
que se obtendran al calcular estos estadsticos sobre los cdigos de la variable sexo), porque estas
medidas de resumen no tendran ningn sentido en este caso.
Los valores de una variable numrica, medida originalmente con una escala mtrica, pueden
agruparse en intervalos, no necesariamente iguales, y convertirse en una variable categrica. Un
intervalo es un conjunto de valores de una variable, comprendidos entre otros dos, uno superior y
otro inferior, que determinan sus lmites. Un intervalo sirve para reducir la presentacin de datos.
Por ejemplo, si las edades de una muestra de 100 personas estn comprendidas entre 18 Y 70 aos,
la distribucin de frecuencias de esta variable puede presentarse agrupada por intervalos, del
siguiente modo:
1.
Menos de 25 aos
10
2.
De 25 a 34 aos
16
36
3.
De 35 a 34 aos
24
4.
De 45 a 54 aos
18
5.
De 55 a 64 aos
23
6.
65 aos o ms
Total.
100
Los intervalos deben ser mutuamente excluyentes y colectivamente exhaustivos. Es decir, ningn
valor de la variable puede estar en ms de un intervalo, y el conjunto de intervalos ha de abarcar la
totalidad de casos posibles. Por ejemplo, los intervalos 5-7 y 7-9 no son mutuamente
excluyente s, porque ambos pueden contener el valor 7; y los intervalos siguientes: 3-6, 7-10, y
11-13, no son colectivamente exhaustivos, porque no abarcan los valores inferiores a 3 o
superiores a 13.
Una variable categrica puede convertirse en numrica utilizando variables ficticias. Como se ha
indicado anteriormente, una variable ficticia es una variable dicotmica que se obtiene
convirtiendo un nivel dado de una variable cualitativa en una variable binaria, en la que el valor 1
indica la presencia de la caracterstica y el valor O la ausencia de la misma. Si la variable categrica
tiene slo dos categoras o clases (como el sexo, en el ejemplo expuesto anteriormente), se necesita
una sola variable ficticia para expresar los dos estados posibles (l = Hombre, O = No hombre o
mujer). Pero una variable que originalmente se hubiera medido con tres categoras, como por
ejemplo la ocupacin (1 = Trabaja, 2 = Jubilado, 3 = En paro), necesitara dos variables ficticias para
representar las tres situaciones posibles. Si a la primera variable ficticia (X1) se la denomina
Trabaja (1 = S; O = No), y a la segunda (X2), Jubilado (1 = S; 0 = No), las tres categoras
originales de la variable ocupacin quedaran representadas por las dos nuevas variables ficticias
del siguiente modo:
Valores de las variables ficticias
Categoras de la variable original
X1
Trabaja
X2
Jubilado
1.
Trabaja
2.
Jubilado
3.
En paro
En general, con una variable cualitativa de n categoras, se precisan n - 1 variables ficticias para
representar la totalidad de las categoras de la variable original.
Anatoma de un indicador
Tal como se puede apreciar en el grfico 3.5, un indicador tiene una estructura compuesta por tres
partes claramente diferenciadas: definicin conceptual, definicin operativa y valores o datos.
37
Variables
Nombre
Definicin
conceptual
Definicin
operativa
Forma
Forma de
clculo
Variables
especficas
Valor
Lnea de
base
Metas
Global
Hitos
Proceso de verificacin
Caractersticas
Referencia conceptual
Definicin operativa
Valores
Veamos, a modo de ejemplo, el indicador denominado tasa de analfabetismo. Sus elementos son los
siguientes:
Variable
Indicador
ndice de la
variable
Esperanza de vida
al nacer
ndice de esperanza
de vida
Educacin
Tasa de
alfabetizacin de
adultos
Tasa bruta de
matriculacin
ndice de
alfabetizacin de
adultos
ndice de la TBM
ndice de educacin
Nivel de vida
digno
ndice de PBI
Las unidades de anlisis, referidas, por lo general, a la poblacin beneficiaria que constituye el
objeto de anlisis. Toda poblacin tiene "N" elementos o unidades de anlisis, y una muestra de
"n" elementos, donde n<N.
Las variables son las dimensiones o caractersticas que se desea conocer en relacin a las
unidades de anlisis, tales como nivel de ingresos, productividad, nivel educativo, etc. Las
variables se definen e identifican en funcin de los objetivos del estudio y stos, a su vez,
estn relacionados con los objetivos del proyecto mismo.
Los datos o valores que alcanzan las unidades en las variables estudiadas, son las respuestas
o resultados que se obtienen cuando las unidades de anlisis son encuestadas o interrogadas,
o alternativamente, son observadas. Habr tantos datos como elementos tiene la poblacin
en estudio.
la encuesta, dicha base de datos ayudar a definir las categoras de las variables y luego facilitar la
construccin de las tablas de frecuencia con una o ms variables, en el marco de anlisis univariado
o multivariado de la informacin recopilada.
Variables de estudio
Pregunta
Pregunta
Pregunta
Unidades de anlisis
Registro 1
Registro 2
Registro 3
Datos
Variables e indicadores
Variables e indicadores son conceptos relacionados. El concepto de indicador es un concepto derivado de
otro concepto ms amplio: variable. Una variable es una magnitud cuyos valores son objeto de estudio en
una accin de monitoreo y evaluacin. Puede referirse a individuos, grupos de personas, organizaciones u
otra unidad de anlisis. La definicin de las variables torna susceptibles de medicin los temas de evaluacin
que, por lo general, estn relacionados a los objetivos de una intervencin. La identificacin y definicin de
variables es la tarea ms importante en el proceso de diseo de un sistema de monitoreo y evaluacin. Por lo
general, una variable presenta cinco elementos bsicos:
f)
g)
h)
i)
j)
Nombre o denominacin.
Definicin operativa.
Categoras o niveles de los valores de la variable.
Procedimiento para recopilar los datos desde las unidades de anlisis.
Indicadores o medidas de resumen de los datos recopilados.
Veamos, a modo de ejemplo, los elementos de la variable Satisfaccin del usuario interno, que es una
variable cualitativa.
40
Nombre
Definicin
Indica la percepcin del grado de satisfaccin de los trabajadores de la
operativa y unidad SUNAT en relacin a las acciones de verificacin de documentos sujetos a
de medida
control.
Categoras y
Se establecen cinco categoras.
escala de medida
(01)
Muy
(04) Insatisfactorio.
satisfactorio.
(02) Satisfactorio.
(05) Muy insatisfactorio.
(03) Indiferente.
Obtencin
Considera que la verificacin se realiza en forma adecuada?
de datos
Indicadores
Porcentaje de aprobacin.
Veamos el caso de una variable cuantitativa, como por ejemplo la variable Ingreso.
Nombre
Ingreso.
Definicin
Son los recursos monetarios netos, incluyendo todas las bonificaciones que
percibe una persona por su ocupacin principal y secundaria durante el
perodo de referencia de la encuesta.
Puede proponerse en forma de niveles o simplemente intervalos.
Por
niveles
de Alto, Medio, Bajo.
ingreso
Por intervalos
Por ejemplo 11 intervalos (dlares)
(01) Menos de 200;
(02) 201- 400;
(03) 401-600;
(04) 601-800;
(05) 801-1000;
(06) 1001-1400;
(07) 14pl-1800;
(08) 1801-2200;
(09) 2201-2600;
(10) 2601-3000;
(11) Ms de 3000 dlares.
Cul fue su ingreso total en el ltimo mes?
Ingreso promedio.
Coeficiente de Gini.
Categoras
Obtencin de datos
Indicadores
El nombre de una variable debe ser breve y de fcil recordacin. Debe ser inequvoco, evitando que se le
confunda con otras variables. Una variable es un atributo o caracterstica susceptible de medicin, pero que
sin una adecuada definicin operativa no podra ser medida. La definicin operativa es su forma de clculo,
que en unos casos puede ser una frmula, pero en otras simplemente una especificacin de los elementos que
debern considerarse. Para obtener los datos (cuando se trata de variables de fuente primaria) se elabora una
encuesta, cuyo ncleo est constituido por las preguntas del cuestionario y sus respuestas, las cuales para su
procesamiento sistemtico son agrupadas en categoras y a las cuales se aplican distintas escalas de medida.
Finalmente, obtenidos los datos, hay que resumirlos, a cuyo efecto se crean indicadores. Por ejemplo, luego
de recopilar datos sobre el nivel de ingresos de la poblacin del pas, stos son resumidos en dos indicadores:
Ingreso promedio e ndice de Gini. Estos indicadores son los que se anotan en la lnea de base, pues, resumen
la situacin de las unidades de anlisis, que en este caso estn constituidos por toda la poblacin del pas.
41
3.3
Tipos de indicadores
En su clasificacin ms amplia, los indicadores pueden ser simples y compuestos. Los indicadores
simples son cifras absolutas o relativas, con carcter de observaciones primarias, en cuyo proceso de
construccin se han realizado operaciones de adicin o sustraccin. A su vez, stos se clasifican en
indicadores simples elementales (por ejemplo, poblacin total) e indicadores agregativos simples (por
ejemplo, PBI agrcola).
Los indicadores compuestos son cifras absolutas o relativas en cuya construccin se han realizado
operaciones matemticas que han permitido establecer relaciones entre determinados indicadores simples. A
su vez, se clasifican en: relaciones en cifras absolutas (productividad del trabajo, por ejemplo), relaciones en
cifras relativas (tasa de subempleo, por ejemplo) y agregaciones ponderadas (ndice de pobreza, por
ejemplo).
Ejemplos de indicadores
Los indicadores, por otra parte, se pueden clasificar en dos grupos genricos: indicadores intermedios e
indicadores finales. Cuando un indicador mide un objetivo final o el efecto de una intervencin sobre el
bienestar de la gente, lo llamamos indicador de impacto o indicador de resultado. Por ejemplo, la
alfabetizacin se puede considerar como un objetivo final, por lo tanto, un indicador que los mida- como la
proporcin de personas de cierta edad que saben leer, escribir y realizar las cuatro operaciones
aritmticas- sera un indicador final.
Cuando un indicador mide un factor que determina un resultado o contribuye al proceso de lograr un resultado,
lo llamamos un indicador de insumo o de producto, dependiendo de la etapa del proceso. Por ejemplo, se
pueden necesitar muchas cosas para subir el nivel de alfabetizacin: ms escuelas y maestros, ms alumnos
atendiendo clases, etc. El gasto pblico para aulas y personal docente sera un indicador de insumo, mientras
que las aulas construidas y del personal docente capacitado seran indicadores de producto. Lo obvio es
que los insumos y los productos no son en s mismos objetivos de desarrollo, sino ms bien ayudan a alcanzar
los objetivos. En este caso se habla genricamente de indicadores intermedios.
Indicadores estructurados
En concordancia con lo anterior, en el contexto del enfoque del marco lgico, los indicadores se
clasifican en los cuatro grupos que se especifican a continuacin.
Indicadores de impacto. Son las medidas de desempeo para los objetivos del nivel ms alto a los cuales
apunta un proyecto. Miden los efectos de largo plazo, vinculados por lo general a los cambios duraderos y
perdurables en la situacin de los beneficiarios. Por este motivo, los indicadores de este nivel pueden ir ms
all de la responsabilidad de la institucin ejecutora.
42
Nmero de comunidades campesinas que aplican y cumplen los trminos de los estatus y
reglamentos.
Nmero de comunidades campesinas que logran ejecutar eficientemente sus planes anuales.
Nmero de comunidades campesinas que cumplieron satisfactoriamente con el convenio y
43
contratos suscritos.
Nmero de mujeres campesinas que ejercen o han ejercido cargos directivos.
Nmero de comunidades campesinas que desarrollan eficientemente los concursos de
manejo de recursos naturales.
Indicadores de proceso. Son los indicadores a nivel de actividades que, generalmente, se asocian a los
recursos asignados al proyecto. Lo recomendable es que solo exista uno y solo un indicador de proceso por
cada actividad. La prueba cida para comprobar que una actividad haya sido correctamente formulada es que
slo admita un indicador como lo suficiente para la medicin del avance en su realizacin.
En proyectos complejos, ningn indicador es por s solo suficiente. En ocasiones, tambin se hace alusin a
dos tipos adicionales de indicadores vinculados al marco lgico: indicadores de insumos e indicadores de
entorno. Los primeros se refieren a los recursos fsicos y/o monetarios requeridos para llevar a cabo las
actividades; en tanto que los segundos variables del entorno, necesarias para efectuar el seguimiento de los
supuestos claves del proyecto.
Grfico 6.4 Indicadores estructurados
44
Impacto
Efecto
3.4
Qu cambios se
observan en la poblacin
beneficiaria?
Producto
Cuntas unidades de
productos o servicios se
estn entregando a la
poblacin?
Proceso
En general, existen tres principios que guan el proceso de seleccin de indicadores: primero, validez
y confiabilidad; segundo, factibilidad tcnica; y tercero factibilidad financiera.
Primero :
Segundo :
Por otra parte, existen un conjunto de criterios que debieran tomarse en consideracin en el proceso de
seleccin de indicadores de desempeo20.
Validez
Un indicador debe medir tan estrechamente como sea posible el objetivo para el cual ha sido establecido. No
debe estar situado a un nivel ni ms bajo ni ms alto que el objetivo o resultado a ser medido. En ocasiones no
existe posibilidad de contar con indicadores directos en la frecuencia requerida por los evaluadores de la
intervencin. En tales casos se podran usar indicadores proxy, medidas indirectas relacionadas al objetivo que
20
Los criterios planteados estn basados en diversas publicaciones de los organismos internacionales de desarrollo,
pero especialmente del USAID Center for Development Information and Evaluation.
45
se desea medir. Por ejemplo, en las reas rurales remotas es frecuentemente muy difcil medir los niveles de
ingreso en forma directa. Medidas tales como porcentaje de hogares sin techo (u otras parecidas) pueden ser
tiles, aunque sean unas medidas rudimentarias y aproximadas. El supuesto es que cuando los pobladores
tienen ingresos ms altos ellos tienden a comprar ciertos bienes. Si existe evidencia convincente de que el
supuesto es vlido (por ejemplo, est basado en estudios o experiencias anteriores), entonces el proxy puede
ser un indicador adecuado, actuando como un segundo ptimo respecto a las medidas directas.
Objetividad
Un indicador objetivo no tiene ambigedad respecto a lo que est midiendo. Es decir, existe un consenso
general respecto a la interpretacin de sus resultados. Es al mismo tiempo unidimensional y operacionalmente
preciso. Ser unidimensional significa que mide solo un fenmeno a la vez. La precisin operacional significa
que no tiene ambigedad sobre el tipo de datos que deberan ser recopilados para un indicador. As por
ejemplo, mientras el indicador nmero de firmas exportadoras exitosas es ambiguo, algunos otros como
nmero de firmas exportadoras que experimentan un crecimiento anual de sus ingresos en por lo menos
5% son operacionalmente precisos.
Adecuacin
Tomados como grupo, un indicador de desempeo y sus indicadores complementarios deberan medir
adecuadamente el objetivo en cuestin. Una pregunta frecuentemente formulada es cuntos indicadores
deberan ser usados para medir un determinado objetivo? La respuesta depende de los siguientes factores:
Para algunos objetivos un indicador de desempeo podra ser suficiente. Por ejemplo, si el objetivo abordado
es exportaciones tradicionales incrementadas, el indicador valor en dlares de las exportaciones
tradicionales por ao es probablemente suficiente.
En los casos en los que un indicador simple no sea suficiente, o cuando existe beneficios a ser obtenidos
mediante la triangulacin, entonces dos o ms indicadores podran ser necesarios. Sin embargo, por regla
general se debera evitar el uso de demasiados indicadores. Debe existir un equilibrio entre los recursos
disponibles para la medicin de desempeo y la cantidad de informacin que los ejecutivos deben tener para
tomar decisiones razonablemente bien informadas.
cuantitativos, ciertos indicadores cualitativos pueden complementarlos, logrando con ello una mayor riqueza
de informacin.
Prcticos
Un indicador es prctico si los datos pueden ser obtenidos oportunamente y a un costo razonable. Los
ejecutivos y evaluadores requieren datos que puedan ser recopilados con la frecuencia suficiente para evaluar
el avance y adoptar las decisiones que sean necesarias. Las unidades ejecutoras de proyectos deben reconocer
que ser necesario incurrir en determinados costos, razonables pero no exorbitantes, para obtener informacin
til sobre el desempeo de los proyectos. Una regla de oro es destinar una asignacin presupuestal que flucte
entre el 3 y 5% del costo total del proyecto para el trabajo de monitoreo y evaluacin.
Confiables
Una consideracin final se refiere a la confiabilidad de los datos para la adopcin de decisiones acertadas.
Baste sealar al respecto que los datos que una entidad ejecutora necesita para tomar decisiones
razonablemente acertadas no tiene necesariamente la misma rigurosidad que busca un cientfico social. En
general, si bien el trabajo de un evaluador de proyectos se nutre de los procedimientos de la investigacin
cientfica, las circunstancias que lo rodean, tales como el carcter perentorio de las decisiones que deben ser
adoptadas y la necesidad de responder a las necesidades de grupos de beneficiarios no siempre iguales, hacen
que su trabajo tenga casi siempre connotaciones propias de lo poltico y lo pragmtico.
3.5
Regla N 1: Todos los resultados y procesos deben tener por lo menos un indicador
Cada resultado y proceso establecido en la primera columna del marco lgico debe tener por lo menos un
indicador. Esto es vlido para el fin, propsito, componentes y actividades.
RESULTADOS
INDICADORES
21
Gran parte de los ejemplos a los que se hace referencia en esta seccin y en las siguientes han sido tomados de
los subproyectos que se ejecutan en el marco del Proyecto INCAGRO.
47
N de estudios.
N de proyectos elaborados.
N de normas aprobadas.
RESULTADOS
INDICADORES
N de ciclovas operativas
Regla N 3: Los indicadores deben guardar una jerarqua congruente con la cadena de
resultados
Deben seleccionarse indicadores correspondientes al nivel de impacto, efecto o producto, segn corresponda.
RESULTADOS
COMPONENTES
INDICADORES
Fin
Contribuir a mejorar la
competitividad y las exportaciones
del sector horto-frutcola.
Propsito
Componentes
Campaa de erradicacin de la
mosca de la fruta.
Vigilancia y proteccin
permanentes de reas libres.
48
INDICADORES
VERIFICACIN
Incremento de la productividad en
crcuma.
Rendimiento de la tierra.
Mejoramiento de la seguridad
ciudadana.
Tasa de victimizacin.
INDICADORES
N de padres participantes.
N de personas capacitadas
RESULTADOS
INDICADORES
N de estudios de evaluacin de la calidad del
velln de los rebaos de alpacas.
N de estudios de identificacin preliminar de
reproductores con vellones de calidad.
N de estudios de evaluacin del efecto gentico
de los padres reproductores seleccionados, en su
progenie.
N de estudios sobre la calidad del velln de las
49
RESULTADOS
INDICADORES
METAS
Incremento de la productividad en
crcuma.
Rendimiento de la tierra.
Incremento a 10 TM/HA en 2
aos.
Fortalecimiento de organizaciones de
productores.
N de organizaciones
fortalecidas.
05 organizaciones
fortalecidas.
N de programas diseados
04 programas diseados en 4
aos
INDICADORES
Propsito
N de propietarios de
predios rurales y de
comunidades campesinas y
nativas que reciben ttulos
de propiedad debidamente
inscritos en RR.PP.
Componentes
Clasificacin, saneamiento y
deslinde de zonas intangibles de
proteccin ecolgica.
N de reas naturales
protegidas que han sido
demarcadas.
Inventario, saneamiento y
deslinde de zonas intangibles de
proteccin cultural.
N de reas culturales en
zonas de titulacin rural que
han sido demarcadas.
RESULTADOS
50
RESULTADOS
INDICADORES
N de normas aplicadas.
RESULTADOS
INDICADORES
Poblacin de vicuas.
Poblacin de alpacas.
Volumen de fibra de vicua comercializada.
N de rutas racionalizadas.
N de empresas optimizadas.
Porcentaje de personas que usan transporte pblico.
N de personal capacitado.
N de campaas y/o talleres.
N de cursos dictados.
N de equipos re potenciados o adquiridos.
51
3.6
RESULTADOS
INDICADORES
N de prcticas registradas.
N de informes elaborados.
RESULTADOS
INDICADORES
N de canales construidos.
N de proyectos ejecutados.
N de personas capacitadas.
RESULTADOS
INDICADORES
52
INDICADORES
RESULTADOS
INDICADORES
53
RESULTADOS
INDICADORES
RESULTADOS
INDICADORES
54
COMPONENTES
INDICADORES
RESULTADOS
Propsito
Consecucin de la seguridad
jurdica de los predios individuales
y territorios de las comunidades
campesinas y nativas.
N de expedientes de predios
individuales y de comunidades
campesinas y nativas inscritos en
SUNARP.
N de reas naturales protegidas
demarcadas
Componentes
N de expedientes de predios
individuales y de comunidades
campesinas y nativas inscritos en
SUNARP.
N de reas naturales protegidas
demarcadas.
RESULTADOS
COMPONENTES
INDICADORES
Componentes
Componentes
INDICADORES
55
Poblacin de vicuas.
Poblacin de alpacas.
Volumen de fibra de vicua comercializada.
Titulares que implementan planes de manejo.
Productores formalizados.
Propuestas concertadas e implementadas.
Proporcin de mujeres que participan en cargos directivos en
organizaciones de base para el manejo de camlidos
sudamericanos.
56
La lnea de base de un proyecto debe brindar informacin sobre los aspectos siguientes:
En sntesis, la idea fundamental a tener en cuenta es que los ELB son muy acotados, pues slo
recogen informacin que pueda ser comparada posteriormente con los resultados del proyecto, para
determinar el antes y el despus. Como se sabe, un principio inherente en la evaluacin es la
posibilidad de establecer comparaciones, disponiendo de valores y valoraciones iniciales respecto a los
indicadores de evaluacin. Por ello, la informacin al respecto debe estar estrechamente vinculada a
los indicadores de efecto e impacto del proyecto, puesto que el mismo anlisis ha de repetirse en la
evaluacin intermedia y evaluacin final.
58
El estudio en profundidad es el que trata de conseguir el conocimiento integral del fenmeno estudiado.
Se denomina tambin investigacin cualitativa. Los estudios en profundidad se basan en pequeas
muestras. Para obtener los datos utilizan formularios poco estructurados y flexibles, con preguntas
abiertas y entrevistas de larga duracin (ms de media hora). No persiguen la cuantificacin de las
respuestas, sino obtener ideas y una mejor comprensin del fenmeno a investigar (Parasuraman,
1991). Utilizan fundamentalmente tcnicas psicolgicas: entrevistas en profundidad, reuniones de
grupo, tcnicas proyectivas, de asociacin, frases incompletas, etc.
La encuesta constituye un mtodo muy habitual de obtener informacin en investigacin social y de
mercados. Se basa, por lo general, en grandes muestras representativas de la poblacin objeto de
estudio. Los datos se obtienen mediante comunicacin, a travs de entrevista personal, por correo
(ordinario o electrnico), por telfono, fax, Internet, etc., y empleando un cuestionario. Se denomina
tambin investigacin cuantitativa, porque se utilizan tcnicas estadsticas para analizar los datos.
59
Fin
Contribuir a la reduccin del incumplimiento tributario
y el fortalecimiento de la institucionalidad de la Sunat.
Propsito
Resultados
Productos
1. Acceso a redes de comunicacin.
2. Acceso a equipos mviles.
3. Acceso a sistemas de control integrado.
4. Implementacin de sistema de control mediante video.
5. Desarrollo de normas y procedimientos.
6. Implementacin de programa de entrenamiento.
Procesos
Actividades
1.1 Interconexin de puestos de control.
1.2 Mecanismos de continuidad del servicio en puestos de control.
1.3 Implementacin de redes wifi/wimax.
2.1 Implementacin de equipos mviles en puestos de control.
3.1 Desarrollo de sistema de control integrado.
4.1 Implementacin de solucin de cmaras IP.
5.1 Normas y procedimientos de operacin de la solucin.
6.1 Entrenamiento.
Las actividades, sin embargo, estn asociadas a los componentes y pueden conformar el referente
para la evaluacin en la etapa de ejecucin de un proyecto.
La lnea de base es un elemento clave del sistema de monitoreo y evaluacin. Supone la identificacin
de una serie de variables clave y su organizacin en un conjunto de indicadores. Los indicadores son
informacin utilizada por los mecanismos de control para monitorear y ajustar las acciones dirigidas al
logro de determinados objetivos, en el marco de una intervencin o sistema dado. La comparacin de
las metas logradas con los valores de la lnea de base permite evaluar los cambios generados por el
proyecto.
Evaluar es, en efecto, comparar los resultados planeados con los resultados efectivamente logrados.
En general, la evaluacin es la disciplina que se ocupa de la comparacin de los resultados de un
proyecto con las metas que se propuso alcanzar y que, por ende, mide hasta qu punto un proyecto
alcanza ciertos objetivos. En esta definicin hay dos tipos de riesgos:
En primer lugar, podra existir una sobreestimacin de las metas, en cuyo caso,
independientemente de la calidad del diseo y de la implementacin, se consideraran como
deficientes aquellos proyectos que no alcancen dichas metas, an cuando desde una
perspectiva realista, pudieran haber sido considerados exitosos.
Tambin existe el riesgo contrario: la subestimacin de las metas. En este caso, proyectos mal
concebidos y ejecutados, podran tener una evaluacin aparentemente positiva, debido a que
sus formuladores, cautos en el momento de plantearse las metas, situaron stas en un nivel
ostensiblemente bajo.
Cabe destacar el hecho que las evaluaciones son tiles siempre que los resultados que generen
aporten valor agregado para las entidades ejecutoras, en trminos de lecciones aprendidas que
60
puedan ser incorporadas en el diseo de futuras intervenciones. En el contexto del enfoque del marco
lgico y como ya ha sido sealado se pueden establecer hasta tres tipos de evaluacin: evaluacin de
procesos (monitoreo), evaluacin de resultados (o simplemente evaluacin) y evaluacin de impacto.
Cabe destacar que estos tres tipos de evaluacin tienen su razn de ser en el hecho que, por lo
general, cuando se evala un proyecto se busca responder a tres preguntas fundamentales:
Pertinencia. Grado en el cual el objetivo del proyecto es consistente con las prioridades de
desarrollo de la poblacin objetivo y las polticas de la entidad ejecutora y el organismo donante
o financiador.
Eficacia. Grado en el cual se logran los objetivos especficos y el propsito del proyecto.
Eficiencia. Anlisis de los resultados con relacin al costo; es decir un anlisis de la
transformacin de los insumos en producto mediante la realizacin de determinadas
actividades.
Impacto. Valoracin socioeconmica global, incluyendo los efectos positivos y negativos, tanto
aquellos que son deseados y estaban previstos, como los no previstos y no deseados.
Sostenibilidad. Apreciacin de la capacidad para mantener los impactos positivos del proyecto
por un largo periodo de tiempo. Anlisis sobre si el efecto global en trminos, por ejemplo, de
empleo e ingresos es positivo tambin en el largo plazo.
Estos aspectos estn estrechamente relacionados al enfoque del marco lgico. As, la pertinencia
alude a la relacin del propsito con las prioridades de desarrollo; la eficacia a la relacin entre los
productos y el propsito; la eficiencia es una comparacin de los insumos con los productos; el
impacto establece relaciones entre las variables controlables por el proyecto y el fin; y, por ltimo, la
sostenibilidad analiza la interaccin entre el fin y los supuestos al mismo nivel.
61
Evaluacin de impacto. Las evaluaciones de impacto permiten determinar con mayor certeza la
relacin causa-efecto de un proyecto dado y sus resultados en la poblacin beneficiaria. Por lo general,
la metodologa de evaluacin consiste en la construccin de un escenario contrafactual, a travs del
cual se compara la situacin con proyecto versus la situacin sin proyecto y, de este modo, se estima
tanto la magnitud de los cambios como la proporcin de dichos cambios atribuible al proyecto. El
escenario contrafactual se puede construir usando diversas metodologas que se clasifican en dos
categoras generales: diseos experimentales y no experimentales. Tambin se pueden usar mtodos
cualitativos y participativos para evaluar el impacto. Estas tcnicas con frecuencia proporcionan
informacin decisiva sobre las perspectivas de los beneficiarios, el valor que los proyectos tienen para
ellos, los procesos que pueden haber afectado los resultados y una interpretacin ms profunda de los
resultados observados en el anlisis cuantitativo.
1.
Anlisis de datos.
10
Elaboracin propia.
62
La determinacin del mbito del estudio implica precisar la poblacin objetivo del proyecto. En el contexto de
un estudio de lnea de base, debe entenderse por poblacin al conjunto de todos los casos que concuerdan con
una serie de especificaciones. La delimitacin de la poblacin implica determinar la unidad de anlisis, es
decir, el grupo de personas, instituciones u objetos a ser evaluados, lo cual depende del objetivo de la
intervencin. La caracterizacin de la poblacin objetivo implica la descripcin de los siguientes elementos:
caractersticas demogrficas y sociales, caractersticas econmicas y productivas, caractersticas tecnolgicas y
caracterstica histrico - culturales. La caracterizacin de la poblacin objetivo de la intervencin se efecta
mayormente con base en informacin obtenida a travs de fuentes secundarias, tales como revisin
bibliogrfica, consulta de documentos oficiales y entrevistas a tcnicos y expertos.
63
Las variables claves estn relacionadas con los objetivos de la intervencin. Para ello, los objetivos deben ser
claros, especficos y mensurables. Cuantificar un objetivo consiste en asociarle patrones que permitan hacerlos
verificables.
Muestra dirigida
Cuando una encuesta se realiza slo a una parte de la poblacin, se trata de un estudio muestral. Una muestra
es un conjunto de elementos de una poblacin o universo del que se quiere obtener informacin. A efectos de
que la informacin obtenida de una muestra sea vlida, sta debe ser representativa de la poblacin; es decir,
que en su estructura se reproduzcan exactamente las caractersticas y comportamientos de la poblacin de la
que ha sido obtenida. Aunque la precisin o exactitud de los datos obtenidos a travs de una muestra es menor
que en un estudio censal, las ventajas de coste y tiempo superan con creces tal inconveniente.
La unidad muestral es el elemento de la poblacin de la cual se obtienen los datos. Pueden ser individuos,
hogares, tiendas, empresas u objetos (productos, marcas, modelos, etc.). La muestra puede ser seleccionada por
procedimientos aleatorios o no aleatorios. En el primer caso, se trata de un muestreo probabilstico, mientras
que en el segundo es un muestreo no probabilstico. En un muestreo probabilstico todos los elementos de la
poblacin tienen igual oportunidad de ser seleccionados para componer la muestra. En un muestreo no
probabilstico, en cambio, la seleccin de los elementos de la muestra se realiza, total o en parte, segn
criterios fijados por el investigador.
64
Traslada el objetivo de la investigacin a preguntas concretas que sern respondidas por las personas
encuestadas.
Homogeniza las obtencin de informacin, ya que todos los encuestados responden a las mismas
preguntas del cuestionario.
Si su diseo, estructura, ordenacin y aspecto es acertado, el cuestionario contribuye eficazmente a
que las personas proporcionen informacin
Ayuda a que el tratamiento de datos se haga ms rpido, porque facilita las tareas de codificacin de
datos, pues figuran en el propio cuestionario, y su grabacin en los equipos informticos,
especialmente cuando se trata de cuestionarios que se pueden leer con un lector ptico.
Las preguntas que contiene un cuestionario estn determinadas por los objetivos de la investigacin que se
desea realizar, que pueden ser medir comportamientos, actitudes u opiniones. Una investigacin se disea
globalmente. Se fijan unos objetivos de conocimiento, los cuales determinan qu informacin debe recogerse y
cmo va a medirse. Paralelamente, debe seleccionarse la tcnica idnea para tratar la informacin. Cada tipo
de datos exige una tcnica de anlisis, y cada estudio necesita aplicar la tcnica idnea.
Una vez que se haya diseado el cuestionario, ste debe ser aplicado a un grupo de personas para efectuar una
prueba. En una primera confeccin, es posible que no se acierte con aspectos semnticos en las preguntas. Es
decir, la redaccin del cuestionario puede no ser del todo correcta o que no se comprenda bien. Es posible,
tambin, que algunas preguntas importantes no se hayan incluido, o no estn bien matizadas, o que haya un
exceso de preguntas y algunas no sean significativas.
Los defectos de contenido y/o forma que pudieran aparecer en el cuestionario se detectan mediante pruebas
piloto, dirigidas a pequeos grupos. Una vez subsanados los errores o perfeccionado el cuestionario se podr
dirigir a la totalidad de la muestra. De esta manera se evita tener que repetir la investigacin por haber
difundido un cuestionario confuso o errneo.
En la prueba piloto se mide la consistencia interna del cuestionario, a travs del coeficiente a de Cronbach.
Las pruebas piloto se repiten las veces necesarias hasta conseguir la mayor validez del cuestionario.
65
Gran parte del trabajo de campo lo realizan proveedores de investigacin que se especializan en la
recoleccin de datos. Cuando una segunda parte es subcontratada, la tarea del diseador del estudio no es slo
la de contratar un proveedor de investigacin, sino la de construir controles de supervisin sobre el servicio
de campo. En algunos casos se usa una tercera firma. Si el administrador de la investigacin contrata a un
entrevistador interno o selecciona un servicio de entrevistas en el campo, idealmente los trabajadores de
campo deben satisfacer ciertos requisitos. Aun cuando los requerimientos del puesto para diferentes tipos de
encuesta varan, por norma los entrevistadores deben gozar de buena salud, ser extrovertidos y de
presentacin agradable, bien arreglados y vestidos. Las personas que les gusta hablar con desconocidos casi
siempre son los mejores entrevistadores. Una parte esencial de la entrevista es entablar una buena relacin
con el participante. Una personalidad abierta ayuda a los entrevistadores a garantizar la cooperacin del
participante. Los prejuicios del entrevistado pueden presentarse si el vestido o apariencia fsica del
entrevistador de campo es poco atractiva o descuidada. Una excepcin a esto sera la investigacin
etnogrfica, en la cual el entrevistador debe vestirse de acuerdo con el grupo que se estudia.
66
La entrada y grabacin de los datos es el registro de los cdigos y valores de las variables en un
sistema informtico para su posterior tratamiento y anlisis. Se entiende por dato un valor especfico
de una variable. Por ejemplo, 35 aos es un dato de la variable edad.
La edicin de datos es la inspeccin de las respuestas de los cuestionarios, con el fin de asegurar que
estn suficientemente contestados y que las respuestas sean consistentes. De ser necesario, se
efectuarn las correcciones oportunas o se rechazarn los cuestionarios mal o insuficientemente
contestados.
La codificacin de los datos consiste en asignar cdigos numricos a las respuestas dadas a un
cuestionario para poder efectuar el tratamiento estadstico de los datos. En las preguntas cerradas los
cdigos estn preestablecidos en el cuestionario, pero en las preguntas abiertas (variables tipo texto)
deben asignarse cdigos a las respuestas obtenidas. Para ello debe procederse a agrupar las
respuestas obtenidas por su similitud, y asignarles un cdigo y su correspondiente significado en una
nueva variable categrica.
Los datos codificados se recopilan sistemticamente en un fichero o matriz de datos que permite el
tratamiento estadstico posterior. Cada fila del fichero recoge las respuestas o la informacin recogida en un
cuestionario. A cada pregunta o variable se le asigna una o ms columnas del fichero. La interseccin de la
fila i con la columna j recoger la respuesta codificada del individuo i a la pregunta asignada a la columna j.
Las primeras columnas se suelen reservar para la identificacin de la observacin o individuo.
Para el anlisis se debe definir la naturaleza de cada variable, cualitativa mtrica o textual. El fichero de
trabajo puede contener la siguiente informacin:
Este aparatado se basa en el texto de Miguel Santesmases Mestre, Diseo y anlisis de encuestas en
investigacin social y de mercados. Editorial Pirmide, Madrid 2009.
67
La informacin obtenida en el paso anterior se encuentra como datos recopilados en forma de cuestionarios,
guas de entrevistas con informes manuscritos de los temas predeterminados, listados de personas
encuestadas, etc. En este paso, toda esa informacin, fruto de la recopilacin de un amplio conjunto de
observaciones, se transforma en informacin organizada mediante el uso de la estadstica descriptiva, tanto en
lo que se refiere al anlisis de una sola variable, como la de las observaciones de las relaciones entre dos o
ms variables. En funcin del nmero de variables analizadas simultneamente, las tcnicas de anlisis de
datos pueden clasificarse en univariables, bivariables y multivariables, segn se analicen, respectivamente,
una sola variable, la relacin o dependencia entre dos variables y la relacin o interdependencia entre ms de
dos variables.
Al igual que los pasos anteriores, el anlisis de los datos requiere un trabajo de equipo para aclarar preguntas
y garantizar resultados oportunos y de calidad. Un primer problema que debe ser abordado se refiere a la
depuracin de los datos proveniente de fuentes primarias y secundarias. Existen diversas tcnicas de anlisis
cuantitativo basadas en mtodos estadstico, as como tambin existen muchas tcnicas para analizar datos
cualitativos. Particularmente en los estudios de lnea de base y evaluaciones de impacto, dos tcnicas son de
uso frecuente: anlisis de contenido y anlisis de casos.
El anlisis de contenido se usa para analizar datos obtenidos a travs de entrevistas, observaciones y
documentos. Sobre la base de un sistema de clasificacin de datos, la informacin debe ser organizada de
acuerdo con lo siguiente:
De otro lado, el anlisis de casos se basa en estudios de detalle de un determinado grupo o individuo
relacionado con el contexto bajo evaluacin. El alto nivel de detalle obtenido puede proporcionar
informacin valiosa para evaluar la calidad de los procesos, resultados e impactos del proyecto. Los procesos
de recopilacin y anlisis de los datos se llevan a cabo en forma simultnea, puesto que los evaluadores
realizan observaciones mientras recopilan la informacin.
68
Al redactar el informe final del estudio, debe tenerse en cuenta que la lnea de base de un proyecto debe
brindar informacin sobre los aspectos siguientes:
En sntesis, la idea fundamental a tener en cuenta es que los ELB son muy acotados, pues slo recogen
informacin que pueda ser comparada posteriormente con los resultados del proyecto, para determinar el
antes y el despus. Como se sabe, un principio inherente en la evaluacin es la posibilidad de establecer
comparaciones, disponiendo de valores y valoraciones iniciales respecto a los indicadores de evaluacin. Por
ello, la informacin al respecto debe estar estrechamente vinculada a los indicadores de efecto e impacto del
proyecto, puesto que el mismo anlisis ha de repetirse en la evaluacin intermedia y evaluacin final.
Finalmente, cabe indicar que los informes de lnea de base se deben programar como parte de una estrategia
de difusin, que puede incluir, adems del informe tcnico propiamente dicho, la realizacin de
presentaciones ante diversos pblicos y la difusin en los medios de comunicacin de los resmenes
ejecutivos sobre los hallazgos de la evaluacin.
1. Determinacin del
mbito de estudio
La determinacin del mbito del estudio implica precisar las unidades de anlisis, que pueden
ser sujetos u objetos. El tipo de unidades de anlisis depende del objetivo de la intervencin.
2. Determinacin de
los objetivos
Por lo general, el objetivo de un ELB es ofrecer una referencia slida para la medicin de los
cambios que se lograran gracias a la ejecucin del proyecto. Adems, los ELB deben mostrar
evidencias cualitativas de la situacin de la poblacin objetivo al inicio de la intervencin.
3. Seleccin de
variables e
indicadores
69
4. Determinacin del
marco muestral
5. Diseo del
cuestionario
Una vez que se ha elaborado el cuestionario conviene hacer una valoracin del mismo, para
ello, debe ser sometido a un grupo de personas para efectuar una prueba. Lo cual nos ayudar
a detectar los defectos de contenido y/o forma que pudieran aparecer en el cuestionario. Una
vez subsanados los errores o perfeccionado el cuestionario se podr dirigir a la totalidad de las
personas que se considere oportuno.
7. Realizacin del
trabajo de campo
8. Construccin de
la base de datos
9. Anlisis de datos
La redaccin del Informe del Estudio de Lnea de Base es, obviamente, el paso final. Los
informes de lnea de base se deben planificar como parte de una estrategia de difusin, que
puede incluir, adems del informe tcnico propiamente dicho, la realizacin de presentaciones
ante diversos pblicos y la difusin en los medios de comunicacin de los resmenes
ejecutivos.
Elaboracin propia.
Este aparatado se basa en el texto de Miguel Santesmases Mestre, Diseo y anlisis de encuestas en
investigacin social y de mercados. Editorial Pirmide, Madrid 2009.
70
c.
d.
e.
f.
g.
h.
71
Una dependencia es una relacin o asociacin entre dos o ms variables en la que el comportamiento
o el valor de una o ms de ellas (variables dependientes, criterio o a explicar) es el efecto (depende)
del valor de otra u otras variables causales (independientes, predictoras o explicativas). Una relacin
de dependencia es, por ejemplo, la que se da entre el nmero de peridicos que se lee diariamente
(variable a explicar) y la edad, sexo y nivel de estudios del individuo (variables explicativas). El
comportamiento de la primera variable puede estar en funcin o depender (por esto se la denomina
variable dependiente) de las otras variables consideradas explicativas (identificadas como variables
independientes).
Las tcnicas estadsticas multivariables de anlisis de dependencias se subdividen, a su vez, en dos
grupos:
Tcnicas que analizan la relacin de dependencia entre una sola variable dependiente o a
explicar y mltiples independientes o explicativas (como en el ejemplo antes citado de relacin
entre el nmero de peridicos ledos diariamente y la edad, sexo y nivel de estudios del
individuo).
Tcnicas que analizan la relacin de dependencia entre mltiples variables dependientes y
mltiples variables independientes (como sera el caso, por ejemplo, de relacin entre el nivel
de utilizacin de varios medios de informacin alternativos -prensa, radio, televisin- y las
caractersticas socioeconmicas indicadas del lector -edad, sexo y estudios).
Aquellas que ponen el nfasis en la interrelacin entre las variables, como las tcnicas de
anlisis factorial y relacionadas.
Las que analizan la interrelacin entre los sujetos u objetos analizados, como las tcnicas de
cluster analysis o anlisis de grupos.
Las primeras pueden utilizarse, por ejemplo, en el estudio de actitudes. Las segundas, en estudios de
segmentacin, para determinar grupos homogneos.
72
Proyecto
Objetivos
del estudio
Variables
de estudio
Unidades
de anlisis
Puestos
de control
Recopilacin
de datos
Variables de fuente
primaria
Variables de fuente
secundaria
Variables
cuantitativas
Variables
cualitativas
Priorizacin
de poblacin
Diseo del
cuestionario
Estratificacin de
poblacin y cuoteo
Prueba piloto
Tamao y marco
muestral
Trabajo de campo
Base de datos
Indicadores
y anlisis
Redaccin
de Informe
73
5.1
En qu consiste el monitoreo?
Proporciona informacin til para las entidades de control superior nacionales y los
organismos de financiacin externos;
Proporciona una base para la toma de decisiones sobre posibles cambios en la
programacin, ya que tal vez haya que reajustar la utilizacin de recursos, modificar la
escala de prioridades e introducir actividades nuevas.
Brinda mayores oportunidades para servir bien a la poblacin destinataria, porque el efecto
sobre la misma se analiza en forma reiterada, a lo largo de la ejecucin del proyecto.
El monitoreo tiene por objeto orientar la ejecucin de un proyecto hacia su finalidad y detectar
cualquier problema que haga probable que no logre los resultados previstos. Esta tarea supone un
seguimiento peridico del avance tcnico y los gastos financieros correspondientes, por medio del
cual se compara el desempeo y los resultados efectivos con los planes.
5.2
En esta seccin se presenta ante el lector, en forma pormenorizada, un proceso tpico de monitoreo,
de un proyecto de inversin pblica en el sector agrario.
24
Los principales conceptos e instrumentos tratados en el presente captulo estn basados en el Manual de
Monitoreo de la Ejecucin de Proyectos (OPS, Abril, 1999)
74
01
02
03
Cronograma
E
Resultados esperados.
Actividades que debern realizarse.
Tareas que debern emprenderse.
Costos, es decir, un presupuesto en el que se especifiquen los fondos requeridos para
ejecutar el plan de trabajo anual.
AO 1
AO 2
AO 3
PRESUPUESTO
TOTAL
76
Resultado 01
Actividad 1
Tarea 1
Tarea 2
Actividad 2
Tarea 1
Tarea 2
Costos por ao
RESULTADOS
ESPERADOS
1. El perodo de espera de los
pacientes se habr reducido en
30%
INDICADOR
Duracin del perodo de espera
Nmero de pacientes
77
Los buenos indicadores comienzan con un enunciado claro de los objetivos o los resultados
esperados. Cada indicador requiere una definicin detallada en la que se especifiquen cantidad,
calidad y tiempo. A la hora de seleccionar indicadores, las caractersticas ms importantes son las
siguientes:
Datos de referencia bsica. Es casi imposible establecer metas o medir avances sin saber cul es la
situacin de partida de un proyecto. Es por ello que antes del comienzo del mismo hay que
establecer datos de referencia bsicos que reflejen, con la mayor fidelidad posible, el valor de cada
indicador al principio del proyecto. Esos datos bsicos sern el valor en funcin del cual se medirn
los cambios durante todo el perodo abarcado por el proyecto.
Ejemplo
En un proyecto destinado a aumentar la produccin triguera de los pequeos
agricultores (resultado esperado) resulta fcil, establecer el nivel de referencia bsico:
nivel de produccin triguera al comienzo del proyecto.
Cuando los resultados esperados son de carcter ms cualitativo, como por ejemplo
"mayor conocimiento de las prcticas higinicas relacionadas con el uso del agua", el
establecimiento de un punto de referencia bsico requiere un poco ms de
imaginacin.
Metas de desempeo. Las metas representan el nivel y cronograma exacto de los resultados que
se espera lograr con un proyecto. Mientras el indicador define la forma en que se ha de medir el
desempeo segn una escala o dimensin, la meta determina el nivel planificado especfico del
resultado que se debe lograr en un plazo determinado.
Ejemplo
Si el resultado esperado es "reducir 30%, en un plazo de dos aos, el perodo de espera
de los pacientes", se pueden establecer las siguientes metas provisionales: "reduccin de
10% en el perodo de espera medio, para el mes de julio del primer ao; reduccin ulterior
de 10% para el mes de enero del segundo ao y, por ltimo, reduccin adicional de 10%
para el mes de julio del segundo ao".
Una meta final es el valor planificado de un indicador para la culminacin del proyecto o el perodo
de planificacin. Si ese plazo resulta demasiado prolongado, conviene establecer metas
provisionales o, como se las denomina a menudo, hitos.
Ejemplo
78
Resultado esperado: "Acceso a un agua potable limpia para 80% de la poblacin rural de la
provincia de Santa Clara". Al comenzar el proyecto, slo 50% de la poblacin tiene acceso
al agua limpia (valor de referencia bsico). El proyecto se ha planificado para un plazo de
siete aos. Su objetivo final es el nivel de 80% que debe haberse alcanzado al cabo de
dicho plazo. En este caso quiz convenga fijarse metas intermedias, por ejemplo 60% tras
dos aos, 70% tras cuatro y 80% al cabo de los siete.
Conviene utilizar una curva acumulativa para ilustrar las metas intermedias y la final. Dicha
curva pasar a ser una buena base para realizar una comparacin con los logros reales del
caso.
La unidad de anlisis.
Las necesidades de desglose de datos (por sexo, edad, grupo tnico, ubicacin).
Las tcnicas de muestreo.
Las tcnicas o los instrumentos para adquirir datos.
Para los indicadores basados en datos secundarios se deben proporcionar tanto el mtodo de
clculo de los puntos de datos del indicador especfico como las fuentes de informacin. Asimismo,
hay que suministrar detalles suficientes sobre el mtodo de recopilacin o clculo de datos, para
poder repetirlo si se quiere.
Frecuencia y cronograma de recopilacin de datos. Para poder medir el avance de un proyecto,
los sistemas de seguimiento deben recopilar peridicamente datos comparables. Con qu
frecuencia hay que recopilar datos? No hay respuestas generales a esta pregunta. Segn el
indicador, tal vez convenga hacerlo con una frecuencia trimestral, anual, o incluso menor. Por
ejemplo, como los cambios son lentos, los datos sobre el grado de descentralizacin de funciones de
determinado sector se pueden recopilar cada cierto nmero de aos, mientras que los
correspondientes respecto al nivel de produccin de determinado producto agroindustrial.
Cuando se planifican la frecuencia y programacin de la recopilacin de datos, los factores
importantes a tener en cuenta son las necesidades de los encargados de la gestin del proyecto para
una toma de decisiones oportuna, y los momentos de decisin dentro del ciclo del proyecto.
Responsabilidades en cuanto a la obtencin de datos. La responsabilidad de la adquisicin
oportuna de datos a partir de su fuente se debe asignar claramente, en funcin de cada indicador, a
79
El anlisis de los resultados del monitoreo supone, bsicamente, comparar el desempeo real con
los planes, y los gastos reales con el presupuesto, analizando cualquier desviacin o discrepancia.
Ello se puede expresar tanto en palabras como mediante cuadros y diagramas. Por lo general, los
cuadros y grficos resultan ms fciles y rpidos de interpretar, e ilustran claramente la
comparacin entre planes y resultados.
Ejemplo: Adiestramiento de agricultores
En este caso la ejecucin tcnica, es decir, el nmero de agricultores adiestrados, es
apenas 90% del nivel esperado, mientras que el costo excede 16% la cifra presupuestada.
Dicho sobrecosto puede obedecer a razones vlidas, que hay que explicar, o bien pueden
existir problemas que obliguen a modificar la organizacin del adiestramiento. Las
discrepancias y deficiencias pueden obedecer a problemas o situaciones inherentes al
proyecto, como su organizacin, sus sistemas administrativos, el cambio de los
coordinadores / gerentes del mismos o la escasez de personal.
Nmero
Nmero real
planificado de agricultores
adiestrados
180
162
90%
Costo
Presupuesto
US$
8.600
Costo real
US$
10.100 116%
80
Los resultados del monitoreo deben incorporarse en informes peridicos y tenerse en cuenta al
formularse nuevos planes de trabajo. Los informes siempre deben relacionar con los documentos
del proyecto y con la matriz del Enfoque del Marco Lgico presentada en dicho documento.
Hay dos temas bsicos que se deben tratar en los informes:
La ejecucin tcnica en relacin con el plan anual, y con nfasis en el nivel de resultados
esperados, ms que en los niveles de actividades y tareas;
La ejecucin financiera en relacin con el presupuest y, concretamente, con los costos
previstos para alcanzar los resultados esperados y realizar las actividades.
La notificacin sobre ambos aspectos debe estar sincronizada, al comparar el grado de ejecucin
tcnicas con la utilizacin de fondos. El gerente del proyecto tiene la responsabilidad de velar por
que se d esa correspondencia.
El seguimiento de la ejecucin tcnica proporciona al gerente del proyecto elementos para la
notificacin de los factores tcnicos.
Los requisitos de presentacin de informes de los socios financiadores externos se defines en los
convenios respectivos y el socio o parte contratante. Dichos requisitos varan en cierta medida en
cuanto a frecuencia, contenido y nivel de detalle. Es importante que los informes estn bien
estructurados y que sean concisos y concretos. El objeto es proporcionar una vista panormica del
avance del proyecto, de la medida en que se han logrado los resultados esperados, de los problemas
surgidos en la ejecucin y el entorno del proyecto, y de las perspectivas para el prximo perodo
que ser objeto de un informe. Conviene evitar un nivel de detalle excesivo.
La estructura de los informes no se debe modificar durante el plazo de vigencia del proyecto,
mantenindose asimismo el nivel y las categoras de notificacin para facilitar las comparaciones
correspondientes.
81
Principales logros del proyecto, problemas, resumen de la ejecucin financiera y propuestas futuras. MXIMO: 1 PGINA.
INFORMACIN TCNICA
En esta seccin se deben describir las actividades realizadas, de conformidad con el Plan Operativo Anual y la
programacin especfica del periodo correspondiente (mensual o trimestral). MXIMO: 4 PGINAS.
INFORMACIN FINANCIERA
En esta seccin se debe describir la ejecucin de los gastos, de conformidad con el presupuesto aprobado y la
programacin especfica del periodo. MXIMO: 4 PGINAS.
PROGRAMACIN FUTURA
Proponer las caractersticas bsicas del plan de trabajo para el periodo siguiente. Slo es necesario formular comentarios si
se introducen actividades nuevas o se proponen cambios a nivel de las actividades o el presupuesto contenidos en el
documento original del proyecto. MXIMO: 1 PGINA.
.
ANEXOS
Se pueden incluir anexos diversos: fotos, noticias aparecidas en los medios relacionadas con el proyecto, estadsticas de
produccin, etc.
82
Componentes
/Acciones
(2)
Unidad
de
Medida
(4)
Finan
(6)
Finan
(8)
%
(10)=(9)/(5)
Finan
(11)
%
(12)=(11)/(6)
%
(10)=(9)/(5)
Finan
(11)
%
(12)=(11)/(6)
Responsa
ble
(9)
Componente 1
Indicador:
Accin 1:
Accin 2:
Accin 3:
Accin n:
Componente 2
Indicador:
Accin 1:
Accin 2:
Accin 3:
Accin n:
Componente n
Indicador:
Accin 1:
Accin 2:
Accin 3:
Accin n:
TOTAL
83
6.1
Los productos son bienes o servicios que obtiene la poblacin beneficiaria como
resultado inmediato de cumplir las actividades. Ejemplo: carreteras construidas,
campesinos capacitados, crditos recibidos, etc.
Los impactos o resultado final vienen a ser cambios positivos fundamentales en algn
aspecto de la propia vida de la gente o en el ecosistema en el que se asientan. Son
resultados sinergticos generados por los efectos. Ejemplo: mayores ingresos familiares,
reduccin de la morbi-mortalidad y conservacin del medio ambiente, entre otros.
La evaluacin de resultados tiene por objeto verificar en el mbito del proyecto, el cumplimiento
de los objetivos (a nivel de productos, propsito y fin), sin mayor preocupacin por determinar
en qu medida los resultados se pueden atribuir en estricto al proyecto o tienen su origen en
factores externos.
Tipologa de evaluacin
Un proyecto, visto de manera agregada, consta de procesos y resultados. Mientras los
procesos son la materia de estudio de la evaluacin de procesos (monitoreo), los
resultados son abordados a travs de la evaluacin de resultados.
Para medir los resultados de los proyectos se utilizan indicadores verificables objetivamente
(IVOs) que vienen a ser evidencias empricas comprendidas y aceptadas por todos los actores de
un proyecto: poblacin objetivo, equipo ejecutor, supervisores y financieras. Los IVOs pueden ser
directos o proxys segn expliquen los contenidos de un resultado directamente o utilicen un
fenmeno aproximado para hacerlo, tal como se puede observar en los ejemplos siguientes:
Ao
TM
%
2000
100
-
2001
120
20
2002
150
50
2003
180
80
2004
210
110
2005
250
150
El contenido de materia en suspensin de las aguas del ro Canipaco, emisario principal de la micro cuenca
Quishuarcancha y hbitat de la comunidad de Janjaillo, medida en el Puente Calicanto, en marzo, mes de mxima
avenida, disminuye
Ao
grs./litro
%
6.2
2000
12
-
2001
12
-
2002
10
16
2003
180
80
2004
210
110
2005
250
150
85
Aspecto
6.3
Evaluacin de resultados
Evaluacin de impacto
Objetivos
Informacin necesaria
Metodologa
Comparacin de indicadores a
travs del tiempo.
86
Cuarto, es importante incluir los factores cualitativos y subjetivos cuando se fijan los objetivos.
Numerosos factores que afectan la calidad de vida no se pueden cuantificar fcilmente pero no
por ese motivo son menos importantes. Cuando sea factible, se pueden aadir indicadores
cualitativos y subjetivos por ejemplo, si la gente se considera pobre o no.
Identificacin de indicadores
Despus de haber fijado los objetivos, el prximo paso es identificar los indicadores para medir
el progreso hacia esos objetivos.
Los indicadores se pueden clasificar en general, en dos grupos: intermedios y finales. Cuando un
indicador mide un objetivo final o el efecto de una intervencin sobre el bienestar de la gente, lo
llamamos indicador de impacto o indicador de resultados o sea un indicador final. Por
ejemplo, la alfabetizacin se puede considerar como un objetivo final, por lo tanto, un indicador
que lo mide como la proporcin de personas de cierta edad que puede leer un texto sencillo y
escribir su nombre seria un indicador final.
Cuando un indicador mide un factor que determina un resultado o contribuye al proceso de
lograr un resultado, lo llamamos un indicador de aporte o de producto. Dependiendo de la
etapa del proceso puede considerarse un indicador intermedio. Por ejemplo, se pueden
necesitar realizar varias actividades para elevar el nivel de alfabetizacin: ms escuelas y
maestros, ms alumnos atendiendo clases, etc. Una medida del monto de inversin en aulas y
personal docente sera un indicador de aporte, mientras que la medida de aulas construidas y
personal docente capacitado seran indicadores de producto. Lo que es importante es que los
aportes y los productos no son objetivos en s; ms bien ayudan a alcanzar los objetivos
escogidos.
Los datos sobre indicadores intermedios pueden generalmente ser recopilados mediante
sistemas de informacin para la administracin (management information system o MIS)
diseados para administrar proyectos y programas, mientras que los datos sobre resultados e
impactos normalmente deben ser recopilados a partir de los beneficiarios, requiriendo de
encuestas con personas o familias.
Ambos indicadores, los finales (resultado e impacto) y los intermedios (proceso y producto) son
importantes. El examen de indicadores finales ayuda a juzgar el progreso hecho hacia las metas
fijadas. Sin embargo, estos indicadores cambian generalmente ms lentamente con el tiempo y
son los resultados de muchos factores, algunos fuera de control de los responsables de la poltica
y de los administradores de programa. Por otra parte, el examen de los indicadores intermedios
da una imagen ms correcta de lo que est ocurriendo.
Los indicadores intermedios que son los ms tiles para seguir la marcha del progreso hacia un
impacto o un resultado varan segn las zonas o grupos al pasar el tiempo. Por ejemplo, si todas
las escuelas tuvieran ms o menos el mismo coeficiente de maestro por alumno, el coeficiente de
maestro por alumno no sera un indicador intermedio muy til para examinar las diferencias en
la calidad de educacin en diferentes regiones, aunque podra todava servir para observar
cambios al pasar el tiempo.
Los indicadores finales e intermedios podran ser completados con otros indicadores escogidos
para medir el rendimiento general del pas y describir el contexto en el cual la estrategia de
reduccin de pobreza se est llevando a cabo. Por ejemplo, los indicadores que miden los
factores externos que podran afectar los indicadores de resultados como la lluvia o la sbita
propagacin de una epidemia se podran incluir en el sistema de control.
Desglose de indicadores
de ingresos y el grupo social (etnicidad, religin, tribu, casta). Los indicadores colectivos a nivel
de pas son tiles para algunos propsitos y dan una imagen de conjunto. Sin embargo, los
indicadores colectivos tienden a ocultar diferencias significativas en las diferentes zonas, sexo o
grupos sociales. Sin obtener una imagen ms desglosada de esas diferencias, es difcil concebir
buenas polticas y programas para mejorar las consecuencias de la pobreza. El tipo y nivel
apropiados de desglose dependen de las condiciones de un pas y del indicador mismo.
Un tipo bsico de desglose es por zonas geogrficas, incluyendo las unidades administrativas
urbanas y rurales y las zonas geoclimticas. La divisin entre zona urbana y rural es comn y
esencial, pero no siempre suficiente. Las ciudades ms pequeas tienden a veces a ser ms
similares a zonas rurales que grandes ciudades por ejemplo, en cuanto a la importancia de la
agricultura como fuente de sustento. Podra ser til desglosar an ms las zonas urbanas por
dimensin de la aglomeracin para distinguir las ciudades muy grandes de las dems. De la
misma manera, la ciudad capital tiende a menudo a tener diferentes caractersticas: ingresos
medios ms altos, mayor disponibilidad de servicios, una mayor cantidad de empleos en
servicios, etc. Por lo tanto, podra ser til establecer unos indicadores separados para la capital.
La mayora de los pases son divididos en unidades administrativas ms pequeas como estados,
regiones, provincias, distritos, municipalidades y pueblos, etc. categoras que pueden ser usadas
para el desglose.
Un tercer tipo de desglose es por zonas geoclimticas. La mayora de los pases tienen numerosas
zonas geogrficas caracterizadas por suelos, lluvia y topografa diferentes y por consiguiente
difieren las prcticas agrcolas, la configuracin de los asentamientos, la facilidad de acceso, etc.
Otro tipo de desglose es por sexo. Los indicadores de sexo apropiados miden factores que varan
segn los sexos y toman en cuenta el impacto de las diferencias biolgicas. Por ejemplo, la
esperanza de vida tiende a ser ms alta para las mujeres, por eso una esperanza de vida ms
corta para mujeres que para hombres es generalmente una indicacin que las mujeres pudieran
tener altos riesgos para su salud durante el parto.
El desglose por nivel de ingresos o de consumo es una manera comn de ver como los
indicadores varan entre la poblacin. Es generalmente preferible a un desglose sencillo de pobre
no pobre porque capta la realidad de que muchas caractersticas de familias y de personas
varan a lo largo de una lnea continua. Existen a menudo unas diferencias significantes entre los
que se clasifican como pobres, y los que se encuentran justo por debajo de la lnea de pobreza
tienen generalmente unas caractersticas muy similares a los que estn justo por encima. Por lo
tanto, es preferible dividir la poblacin en grupos del mismo tamao en vez de simplemente en
pobres y no pobres. Algunas agrupaciones comnmente utilizadas basadas en el nivel de
ingresos y de consumo son:
Nombre
Nmero de grupos
Porcentaje de la poblacin
Deciles
10
10 por ciento
Quintiles
20 por ciento
Cuartiles
25 por ciento
n percentil
En la mayora de los pases hay diferencias significativas entre los grupos socialmente definidos,
bien sea por el lado tnico, tribal, religioso u otro. La definicin de los grupos pertinentes puede
variar naturalmente segn los pases.
Determinacin de datos
88
Los datos provenientes diversas fuentes son generalmente utilizados para examinar los
resultados. La tabla N 21 proporciona una lista de diferentes tipos de datos utilizados para
examinar resultados, sus fuentes y los organismos responsables de su recopilacin.
Cuadro 7.2 Recopilacin de datos
Datos
Fuente
Organismos
Nacional
Cuentas nacionales:
producto nacional bruto,
consumo, inversin,
exportaciones,
importaciones, etc.
Finanzas pblicas: ingresos,
gastos por categora
Sistema de cuentas
nacionales, estadsticas
comerciales
Organismo central de
estadsticas
Precios al consumidor y al
productor
Indicadores sociales
Sistemas administrativos
Sistema de informacin
administrativa de los
ministerios sectoriales
Medicin directa.
Organismo nacional de
Meteorologa
Local
Disponibilidad de servicios
Encuestas en las
comunidades, encuestas de
hogares sobre mltiples
temas; estudios cualitativos
Administracin local,
ministerios sectoriales
Individual y familiar
Uso de servicios
Encuestas de observacin
Proveedores de servicios
locales
Consumo e ingresos
familiares; condiciones de
vida, indicadores sociales
Presupuesto/gastos/ingresos
de familias, encuestas de
hogares sobre mltiples
termas
Encuestas sobre prioridades,
encuestas sobre indicadores
de bienestar bsico
Organismo central de
estadsticas, ministerio del
trabajo /del empleo
Estudios cualitativos;
encuestas de usuarios
Organismo central de
estadsticas, ministerio
sectoriales, otros
Organismo central de
estadsticas, ministerio del
trabajo /del empleo, otros
Se debe notar que los datos de esas fuentes son complementarios y no substitutos entre s. El
hecho de tener muy buenos datos al nivel familiar sobre consumo e ingresos no ser suficiente
para proyectar tendencias en los resultados sobre determinados objetivos.
Frecuencia de seguimiento
89
Frecuencia
Nacional
Finanzas pblicas:
ingresos, gastos por categora
Indicadores sociales
Diariamente
Local
Disponibilidad de servicios
Anualmente
Uso de servicios
Anualmente
Individual y familiar
6.4
Anualmente
Criterios de evaluacin
Con la finalidad de determinar si el diseo y la gerencia del proyecto fueron adecuados se pone
nfasis en cinco aspectos importantes:
a. Pertinencia. Grado en el cual el objetivo del proyecto es consistente con las prioridades de
desarrollo de la poblacin objetivo y las polticas de la entidad ejecutora y el organismo
donante o financiador.
b. Eficacia. Grado en el cual se logran los objetivos especficos y el propsito del proyecto.
90
c. Eficiencia. Anlisis de los resultados con relacin al costo. Es un anlisis de cmo los
insumos se transforman en productos mediante la realizacin de determinadas actividades.
d. Impacto. Valoracin socioeconmica global, incluyendo los efectos positivos y negativos,
tanto aquellos que son deseados y estaban previstos, como los no previstos y no deseados.
e. Sostenibilidad. Apreciacin de la capacidad para mantener los impactos positivos del
proyecto durante un largo perodo.
Estos aspectos de la evaluacin estn estrechamente relacionados al enfoque del marco lgico.
As, la pertinencia alude a la relacin del propsito con las prioridades de desarrollo; la eficacia
a la relacin entre los productos y el propsito; la eficiencia es una comparacin de los
insumos con los productos; el impacto establece relaciones entre las variables controlables por
el proyecto y el fin; y, por ltimo, la sostenibilidad analiza la interaccin entre el fin y los
supuestos al mismo nivel.
Cabe reiterar que en la evaluacin ex-post se suele convenir que el concepto de resultado abarca
tres niveles de la columna de objetivos del marco lgico: los productos (o componentes), los
efectos (o propsito) y los impactos (o fin). En ocasiones se suele diferenciar a la evaluacin de
resultados del anlisis de impactos, con la intencin de estimar cualitativamente y
cuantitativamente la incidencia del proyecto sobre determinados aspectos o reas del desarrollo.
A este anlisis se denomina evaluacin de impacto.
Pertinencia
La pertinencia debe ser considerada desde las primeras etapas de planificacin y a lo largo de
todo el ciclo del proyecto. La pertinencia se preocupa de la razn de ser de un proyecto en
relacin con las prioridades de la comunidad beneficiaria y la sociedad en su conjunto. Por una
parte, esto se refiere a la direccin del proyecto en relacin con su objetivo principal o propsito.
Por otra, significa observar los cambios sociales que pueden haber tenido lugar mientras el
proyecto ha sido ejecutado, precisando hasta qu punto pueden alterar la razn de ser del
mismo. Un cambio en las condiciones externas puede significar que se conceda menos prioridad
al proyecto o que ste pierda parte de su razn de ser. Por ejemplo, una vez solucionado un
conflicto poltico, puede ser que ya no sea necesario un campo de refugiados. En otras palabras,
la pertinencia es bsicamente una cuestin de prioridades, que conduce a decisiones del ms alto
nivel acerca de si se debe finalizar el proyecto o permitir que este contine. En caso de optar por
su continuidad: Qu cambios deben realizarse y en qu direccin?, Son todava validos los
objetivos acordados y tienen suficiente razn de ser para continuar con el proyecto?
Eficacia
La eficacia se define como el grado en que se alcanzan los objetivos y metas del proyecto en un
perodo determinado, independientemente de los costos que ello implique. Si bien la referencia
bsica para la evaluacin de eficacia es el conjunto de objetivos (y sus correspondientes
indicadores) planteados en el marco lgico del proyecto, esto por s solo no necesariamente
refleja un buen desempeo, puesto que tanto los niveles programados como los alcanzados
pueden estar alejados de estndares adecuados. Por esta razn, una evaluacin en profundidad
del nivel de eficacia alcanzado debe realizarse tomando en cuenta determinados estndares para
91
cada objetivo/indicador establecido en forma independiente, hacia los cuales deberan apuntar
las metas del proyecto.
Por lo general, un proyecto de desarrollo es slo uno de los varios factores que contribuyen al
logro de los objetivos globales. El equipo responsable de la evaluacin deber por tanto prestar
atencin a las causas que estn detrs de la eficacia o de la ausencia de la misma, especialmente
al grado en el que se han alcanzado los resultados esperados; y si stos son suficientes o es
necesario realizar cambios en el diseo del proyecto para asegurar la eficacia en el marco
temporal establecido. Igualmente importante es realizar un minucioso anlisis de los factores
externos -los supuestos- que ejercen tambin una influencia sobre las posibilidades de xito del
proyecto.
En general, el concepto de eficacia relaciona dos variables fundamentales: metas y tiempo. El
logro de las metas en el tiempo previsto.
Eficacia
Re sultados obtenidos
Metas previstas
Eficiencia
La eficiencia del proceso de ejecucin de un proyecto consiste en la obtencin del mximo
producto con el mnimo de recursos. La eficiencia, o su expresin cuantitativa, la productividad,
est contenida en la L del extremo inferior izquierdo del marco lgico, constituida por los
casilleros productos-actividades-insumos. En el contexto del manejo de proyectos, la eficiencia
consiste en organizar las actividades de modo que se obtengan los productos previstos con los
recursos asignados.
La dificultad principal para evaluar la eficiencia radica en determinar un valor de referencia. Este
depende del tipo de proyecto, de las circunstancias locales, de la tecnologa disponible y de otros
factores. En algunos casos existen estndares o valores de referencia predeterminados que
actan como lneas de corte para determinar en qu casos una ejecucin es eficiente o
ineficiente. Estas lneas de corte pueden establecerse sobre la base de la experiencia adquirida
en proyectos comparables ejecutados en otros lugares, o pueden estar dados por instituciones
independientes. El concepto de eficiencia puede operativizarse desde dos perspectivas:
Si la cantidad de producto est predeterminada, se persigue minimizar el costo total y
medio.
Si el gasto total est fijado de antemano, se busca optimizar la combinacin de insumos
para maximizar el producto.
La productividad es una medida de la eficiencia con la cual se miden los insumos utilizados para
generar productos. Por ello, productividad y eficiencia, se asumen como conceptos semejantes.
La eficiencia, intuitivamente puede representarse mediante la frmula:
92
Eficiencia
Metas obtenidas
Re cursos utilizados
La medicin de eficiencia es una relacin entre dos variables: una de producto y otra de insumo.
Esto rige para cualquier tipo de indicador de eficiencia: parcial o total y media o marginal. Y
como relacin que es, atendiendo a su naturaleza estrictamente matemtica, la eficiencia puede
expresarse en forma de razn geomtrica o aritmtica, o en otras formas menos usuales.
Cuando se expresa en trminos de relacin geomtrica lo que obtenemos es un coeficiente de
productividad, (Q/F), donde el antecedente o numerador es la variable de producto y el
consecuente o denominador es la variable representativa de insumo. Cuando, por el contrario, la
expresin se hace en trminos de razn aritmtica, lo que obtenemos es una ganancia de
productividad (Q - F), donde el antecedente es el minuendo o la variable de producto y el
consecuente o sustraendo es la variable de insumo.
Usualmente, la expresin geomtrica se aplica en las mediciones de productividad media
(promedio), ya sea de cobertura parcial o total. En cambio, la expresin aritmtica se utiliza
mayormente para las mediciones de productividad marginal, ya sea en su vertiente parcial o en
el total. Es usual, asimismo, armar series de nmeros a partir de los coeficientes de
productividad media; aunque, claro, los nmeros ndices pueden ser construidos a partir de
cualquier otro tipo de datos.
En ciertos estudios del Banco Mundial se hace una interesante distincin entre dos dimensiones
de la productividad, la esttica y la dinmica. En un contexto esttico, los mejoramientos de
productividad se producen sin modificaciones de la base tecnolgica y, por lo tanto, se deben a
cosas como la racionalizacin de procedimientos, el mayor esfuerzo laboral y la aplicacin de
nuevos mtodos administrativos, entre otros. Bajo un punto de vista dinmico, el cambio
tecnolgico juega un rol protagnico en la generacin de mejoramientos dramticos de la
productividad total, al igual que la acumulacin de capital, la cual influye particularmente sobre
la productividad del factor trabajo.
Impacto
El concepto de impacto es ms amplio que los de eficacia y eficiencia, ya que incluye no slo las
consecuencias positivas, vale decir los objetivos o productos deseados por el proyecto, sino
tambin las consecuencias negativas, hayan sido o no previstas durante el diseo del proyecto.
Adems, una evaluacin de impacto tiene la ventaja que permite estimar la magnitud de los
efectos logrados y determinar la causalidad de los mismos, de modo que se pueda precisar la
contribucin exacta del proyecto al logro de determinados objetivos de desarrollo.
Al momento de analizar los impactos, el punto de partida debe ser el propsito y fin del proyecto,
as como el grado de eficacia alcanzado. Acto seguido se debe formular la siguiente pregunta:
Qu otros efectos, positivos o negativos, esperados o imprevistos, han tenido lugar como
resultado del proyecto? Puede tratarse de efectos econmicos, sociales, polticos, tcnicos o
ambientales, tanto en el nivel local, como regional y nacional. El impacto total del proyecto es el
resultado de condiciones causales complejas cuyo anlisis puede resultar difcil. As:
Puede ser especialmente problemtico probar que los cambios observables pueden
adscribirse a determinado proyecto.
A fin de comprender las conexiones causales, el evaluador puede necesitar tanto mtodos
cuantitativos como mtodos cualitativos y participativos.
Pueden apreciarse impactos diferentes en distintos momentos, por lo que el trabajo de
evaluacin debe prestar atencin a los impactos de un proyecto tanto en el corto como en
el largo plazo.
93
El tiempo que debe transcurrir para que se puedan apreciar los impactos variar segn el tipo de
proyecto. Un proyecto agrcola, por ejemplo, puede dar lugar a impactos considerables slo
despus de unos meses, mientras que un proyecto educativo producir generalmente sus
mayores efectos varios aos despus de que hayan finalizado el proyecto. Por tal razn, si bien se
considera que una evaluacin de impacto debe realizarse algunos aos despus de culminada la
ejecucin del proyecto, en ciertos casos es posible realizar un anlisis de impacto en las
momentos previos o en los inmediatamente posteriores al trmino de la intervencin, en la
medida en que se evidencien cambios importantes en la poblacin objetivo vinculados al
propsito y fin del proyecto.
Cuadro 7.4 Impactos socioeconmicos y ambientales: ejemplos
DESARROLLO ECONMICO
Productividad incrementada.
MEJORAMIENTO DE
CONDICIONES DE VIDA
FORTALECIMIENTO
INSTITUCIONAL
Organizaciones sociales fortalecidas.
Capacidad de gestin mejorada.
Espacios de concertacin fortalecidos.
DESARROLLO AMBIENTAL
Suelos ampliados y/o recuperados.
Recursos genticos mejorados.
Capacitacin en manejo ambiental
brindada.
Sostenibilidad
El anlisis de sostenibilidad de un proyecto consiste en determinar si, ms all del logro de sus
objetivos, es posible que los impactos positivos continen despus que la ayuda o el
financiamiento externo haya finalizado. El concepto de sostenibilidad en general alude a la
capacidad de un proyecto para generar beneficios por un periodo mayor al del apoyo externo o
al perodo de vigencia del proyecto.
A diferencia del anlisis de eficacia, eficiencia, pertinencia e impacto, el anlisis de sostenibilidad
del proyecto es ms bien una cuestin del proceso de desarrollo en s mismo, en una perspectiva
de largo plazo. La sostenibilidad es, en cierto modo, la prueba definitiva del xito del proyecto.
Muchos proyectos encuentran dificultades una vez terminada la fase de ejecucin, debido a que
los beneficiarios o los responsables del mismo no son disciplinados o carecen de la motivacin
suficiente para proporcionar los recursos necesarios para que las actividades continen. Por lo
general, la sostenibilidad de un proyecto es afectada por tres amplio grupos de factores:
94
muchas agencias de desarrollo estn concediendo mayor importancia a las perspectivas de largo
plazo y a las mejoras duraderas. La viabilidad de cualquier proyecto depender en gran medida
de si el impacto positivo justifica las inversiones necesarias y si la comunidad local valora el
proyecto lo suficientemente como para dedicar sus escasos recursos a continuarlo. En otras
palabras, la sostenibilidad se preocupa de lo que ocurre cuando el proyecto ha finalizado. Por lo
tanto, ser difcil proporcionar cualquier anlisis seguro de la sostenibilidad mientras el
proyecto est en marcha o inmediatamente despus de su conclusin. En esos casos, el anlisis
tendr que basarse en suposiciones acerca de desarrollos futuros, partiendo del conocimiento
disponible sobre el proyecto y la comunidad local.
95
INTRODUCCIN
Datos generales
Marco Lgico
1.2 Metodologa de evaluacin
ANALISIS DE EFICACIA
ANLISIS DE EFICIENCIA
EVALUACIN DE IMPACTO
ANLISIS DE PERTINENCIA
96
97
7.1
Esta seccin est basada principalmente en los trabajos del ILPES sobre evaluacin de impacto. Sin embargo,
pueden encontrarse magnficos trabajos en el Banco Mundial, especialmente los de Judy Baker y en la OIT,
sobre todo el trabajo de Abdala. En el Per, los trabajos de GRADE, especialmente el de evaluacin de
impacto del programa PROJOVEN constituye una excelente aplicacin del mtodo.
98
asignacin dificulta la conformacin de grupos similares, lo que hace necesario el uso de tcnicas
estadsticas y economtricas para corregir el sesgo de seleccin generado.
Los mtodos no experimentales conforman intencionalmente el grupo de control con personas
que quisieron participar en el proyecto pero que llegaron tarde o al ltimo a la inscripcin y por
tanto no pudieron hacerlo; o bien con individuos que siendo elegibles para el proyecto por
cualquier otro motivo no pudieron participar del mismo.
As mismo, la evaluacin de impacto, al igual que cualquier otra evaluacin, puede realizarse
antes (ex- ante) o despus (ex-post) de la ejecucin del proyecto. En trminos generales, es
conveniente realizar evaluaciones de impacto ex-ante cuando se quiere escoger el proyecto o la
combinacin de los mismos que pueda contribuir de forma ms efectiva a la reduccin de la
pobreza; y evaluaciones ex-post cuando la evaluacin de impacto puede retroalimentar la
efectividad del proyecto en cuestin.
99
Beneficiarios
E: Situacin antes
del proyecto
Controles
F: Situacin antes
del proyecto
C: Estado de tratamiento
D: Estado de no tratamiento
Situaciones observables
7.2
Situaciones no observables
Diseos experimentales26
La mayor parte del presente seccin y las siguientes han sido tomadas de las publicaciones del ILPES,
especialmente de las siguientes: Manual para la Evaluacin de Impacto de Proyectos y Programas de Lucha
contra la Pobreza (Hugo Navarro, 2005) y Pauta Metodolgica de Evaluacin de Impacto Ex ante y Ex post de
Programas Sociales de Lucha contra la Pobreza (Hugo Navarro y otros, 2006).
100
7.3
Diseos cuasi-experimentales
La segunda alternativa para construir el escenario contrafactual son los diseos cuasiexperimentales donde no es aleatoria la seleccin de los grupos de beneficiarios y no
beneficiarios. Al proyecto puede ingresar cualquier individuo interesado en participar, que
cumpla con los criterios de elegibilidad y focalizacin del proyecto, y al cual el proyecto este en
capacidad de atender. En el diseo cuasi-experimental una de las alternativas para seleccionar el
grupo de comparacin es el mtodo de pareo. El objetivo de este mtodo es encontrar o
identificar un grupo de individuos que no participaron en el proyecto pero cumplen con los
criterios de seleccin del proyecto y son similares a las personas que conforman el grupo de
tratamiento en aquellas caractersticas observables que podran incidir en la variable de impacto
del proyecto y en la decisin de los individuos de participar o no en el proyecto.
El pareo se puede realizar por individuo o por grupo. Cuando se utiliza el pareo por individuo se
busca que para cada beneficiario del grupo de tratamiento sea comparable con un no
beneficiario en el grupo de comparacin. Por su parte, el pareo por grupo es menos exigente,
requiere que el grupo de tratamiento y comparacin sean en promedio iguales. Segn Freeman,
Rossi, y Wright (1980), el pareo por individuos es ms preciso y arroja resultados ms confiables
que el pareo por grupo. Sin embargo, aunque el pareo por individuo es estadsticamente ms
deseable que el pareo por grupos, en general las evaluaciones de impacto utilizan ms el mtodo
agregado. Debido en parte a la disponibilidad de informacin, es difcil encontrar siempre un
individuo de comparacin para cada beneficiario que se encuentra en el grupo de tratamiento.
Esto conlleva a que un nmero significativo de observaciones en el grupo de tratamiento no
puedan ser utilizadas en las evaluaciones, disminuyendo la representatividad de la muestra.
Adicionalmente, el pareo por individuo es ms costoso en trminos de dinero y tiempo.
El mtodo de pareo es un procedimiento relativamente sencillo de aplicar cuando slo unas
pocas caractersticas de los individuos afectan la variable de impacto y la decisin de participar
en el proyecto. Sin embargo, en general los problemas que buscan resolver los proyectos sociales
estn determinados por ms de dos variables, lo cual dificulta la aplicacin del mtodo de pareo.
Cabe sealar que cuando el pareo no incluye todas las variables que determinan la variable de
impacto y la participacin en el proyecto podra existir sesgo en la estimacin del impacto. Esto
debido a que los grupos (tratamiento y control) no seran estadsticamente comparables.
101
Para facilitar la aplicacin del mtodo de pareo se han desarrollado modelos economtricos que
permiten controlar los efectos de n variables observables e identificar aquellos individuos que
son similares a las personas que conforman el grupo de tratamiento. Estos modelos estiman la
probabilidad de los individuos de participar en el proyecto a travs de modelos probit o logit,
utilizando como variables independientes una serie de caractersticas socioeconmicas de los
individuos relevantes al problema que se evala. Los individuos que no son beneficiarios del
proyecto y que su probabilidad de haber participado en el proyecto es similar a la de los
beneficiarios conforman el grupo de comparacin. Uno de los mtodos ms utilizados con este
propsito es el Propensity Score Mactching Method27.
La utilizacin del mtodo de pareo ofrece al menos dos ventajas En primer lugar, los grupos de
tratamiento y comparacin no tienen necesariamente que conformarse antes de iniciar la
operacin del proyecto. Utilizando estimaciones de la probabilidad de participacin en el
proyecto, estos grupos se pueden conformar a partir de informacin sobre la situacin con
proyecto de los individuos que participaron y no participaron en el proyecto.
La segunda ventaja, es que el mtodo de pareo no exige que se prohba el ingreso al proyecto a
individuos que hacen parte de la poblacin objetivo de la intervencin. Los individuos que
conforman el grupo de pareo generalmente son personas que por restricciones de cobertura o
tecnolgicas no hubieran podido tener acceso al proyecto bajo ninguna circunstancia. Por
ejemplo, usualmente se seleccionan reas geogrficas en donde el proyecto no se ejecut o
ejecutar.
Por su parte, la principal debilidad del mtodo de pareo para cuantificar el impacto de un
proyecto social es la existencia de diferencias no observables entre los grupos de tratamiento y
control, que generan un sesgo de seleccin. Este sesgo se genera por el hecho que el ingreso al
proyecto es una decisin del beneficiario y no de un proceso aleatorio. Esto implica, que las
personas que deciden ingresar al proyecto podran tener caractersticas no observables por el
evaluador que influyen en su decisin de participar y a su vez determinan la variable de impacto
del proyecto.
Un ejemplo clsico, es la motivacin. Generalmente, las personas que deciden ingresar al
proyecto tienen una mayor motivacin de mejorar sus condiciones socioeconmicas y, por lo
tanto, an si no hubieran participado en el proyecto, las condiciones de vida de estos
beneficiarios hubieran mejorado debido a que su motivacin les hubiera permitido encontrar
otras alternativas de solucin. Si al proyecto ingresan todas las personas con motivacin,
implica que en el grupo de comparacin slo hay personas sin motivacin. Esta diferencia hara
que los dos grupos no sean equivalentes y, por lo tanto, se sobre estime el impacto del proyecto.
Finalmente, otra alternativa usada por el diseo cuasi-experimental para seleccionar el grupo de
comparacin es comparar la situacin de los beneficiarios antes y despus de la intervencin.
Como ya se mencion este es el mtodo de comparaciones reflexivas. La lnea base conforma el
escenario contrafactual contra la cual se contrasta la situacin de los beneficiarios despus de
haberse ejecutado el proyecto. El supuesto general de este mtodo es que las condiciones de vida
de los beneficiarios no cambiaran en la ausencia del proyecto lo cual es difcil de suponer en
muchos proyectos sociales. Este diseo es principalmente utilizado en el caso de proyectos de
cobertura total en los que no es posible construir un grupo de control o comparacin. Por
ejemplo, en un proyecto nacional de alfabetizacin que tiene la infraestructura para beneficiar a
todas las personas analfabetas del pas, no es posible encontrar una muestra representativa de
personas analfabetas que no estn siendo capacitadas por el proyecto. En este caso, se evaluara
el impacto del proyecto comparando la tasa promedio de analfabetismo del grupo de
beneficiarios antes y despus del proyecto, controlando los factores externos que pudieran haber
incidido en el resultado.
27
102
7.4
Diseos no experimentales
103
C. Recopilacin de informacin
Es una de las actividades ms importantes en una evaluacin, debido a la alta incidencia de su
calidad en los resultados. En las evaluaciones de proyectos contra la pobreza esta actividad es
particularmente compleja debido a las caractersticas de los beneficiarios. Estos pueden ser
personas con bajo nivel de educacin, avanzada edad, con enfermedades crnicas, indigentes,
entre otros. Adems, generalmente existen restricciones de tiempo y presupuesto.
D. Anlisis de la informacin
Para cada indicador es necesario recolectar datos de alguna fuente que permita viabilizar la
evaluacin. En algunos casos, los datos ya estn disponibles, por lo que el trabajo se reduce al anlisis
de los mismos. En otros casos no existe data disponible, por lo que se tiene que disear y conducir un
estudio para obtener esos datos.
Fuentes primarias. Son aquellas fuentes en las que la informacin se encuentra en su origen, y por
lo tanto debe ser elaborada por primera vez y de forma especfica.
Fuentes secundarias. Son aquellas fuentes que ofrecen informacin ya elaborada, o existente, que
es generada anteriormente con otra finalidad y que, generalmente, no tiene por qu coincidir con los
objetivos institucionales.
Aunque los indicadores tienen un carcter eminentemente cuantitativo, en su realizacin se recurre
a mtodos cuantitativos y cualitativos, con la finalidad de optimizar la calidad de los hallazgos.
Tambin cabe precisar que, en primer lugar, es necesaria la revisin de la disponibilidad de
informacin pertinente de fuentes secundarias sobre las variables que queremos analizar. En
muchas ocasiones no es necesario realizar un estudio de campo debido a que la informacin
necesaria para establecer la lnea de base y las subsecuentes lneas de salida puede ser obtenida de
estas fuentes.
104
105
DATOS GENERALES
Objetivo del proyecto
1.1
Indicar el objetivo general del proyecto
Resultados esperados
1.2
Indicar los productos que se espera obtener con la ejecucin del proyecto.
Duracin del proyecto
1.3
Indicar el periodo de ejecucin y el periodo de evaluacin del proyecto
Poblacin objetivo
1.4
1.5
Describir brevemente componentes, fuentes de financiamiento y fases del proyecto.
2
METODOLOGA
Definicin de variables
2.1
Explicitar las variables sobre las cuales se va a explicitar el impacto, as como las variables de
control.
Muestra
2.2
2.3
3.1
Muestran los valores que adoptan las variables antes de la puesta en marcha del proyecto,
tanto para el grupo beneficiario como el grupo de control.
Lneas de salida
Muestran los valores de las variables al final del periodo de evaluacin, para el grupo
beneficiario y el grupo de control.
Estimacin del impacto
3.2
Se refiere a las diferencias registradas en los grupos que pueden ser atribuibles al proyecto.
Otros efectos del proyecto
3.3
Sealan los efectos del proyecto sobre variables adicionales, que no constituyen el objetivo
primordial del mismo.
EVALUACION ECONOMICA
4.1
106
Muestra en forma sucinta la estructura de costos del proyecto, tanto los inversin y de
operacin del proyecto.
Beneficios del proyecto
4.2
Se refiere a los beneficios percibidos directamente por los beneficiarios del proyecto.
Factor de actualizacin
4.3
Explicar el factor de actualizacin a utilizar. Para los proyectos sociales es usual emplear
0.11.
Valor Actual Neto
4.4
Compara los costos y beneficios llevados a valor presente segn el factor de actualizacin
especificado. Si el resultado es mayor que cero el proyecto result rentable.
Tasa Interna de Retorno
4.5
Proporciona la tasa de rentabilidad intrnseca del proyecto, que se debe comparar con la tasa
de rentabilidad mnima exigida. Si la TIR es mayor, la evaluacin del proyecto es positiva.
Costo Efectividad
4.6
Para los proyectos cuyos beneficios son difciles o imposibles de medir se hace uso de
indicadores de efectividad. El valor del ndice se obtiene como el cociente del valor actual de
costos sobre el valor que presente el indicador de efectividad.
Conclusiones y recomendaciones
Se hace una valoracin de los resultados cuantitativos obtenidos. Se evala la pertinencia de
la metodologa empleada y se mencionan los factores que actuaron a favor del proyecto y los
que dificultaron el mismo. Finalmente, se presentan sugerencias acerca de futuras lneas de
accin en el campo del proyecto.
107
8.1
Definicin de sostenibilidad
8.2
28
Vase, Quality Assurance Group PIA/OPRE, Promoting Practical Sustainability. Australian Agency for International
Development (AusAID), Canberra, September 2000.
108
Los factores clave que afectan la sostenibilidad de los proyectos, segn la experiencia nacional e
internacional, son los siguientes:
Estos factores son aspectos conformantes de la calidad general de los proyectos y son, al mismo
tiempo, factores que especficamente afectan la sostenibilidad de las intervenciones.
Sostenibilidad poltica
Un proyecto no puede ser separado del contexto en el que tendr lugar. Los vnculos entre el
proyecto y los objetivos de desarrollo deben ser establecidos desde el inicio de la intervencin.
Las investigaciones realizadas por organismos calificados, como el BID y el Banco Mundial,
indican que los proyectos funcionan mejor en ambientes con pocas distorsiones que en
ambientes altamente distorsionados. Por ello, las polticas pblicas, o ms especficamente, el
marco regulatorio sectorial, pueden tener un impacto significativo sobre la sostenibilidad del
proyecto.
Dado que los proyectos se ejecutan dentro de un entorno ms amplio de polticas, un marco
compatible con los objetivos del proyecto es un factor clave en la promocin de sostenibilidad. El
marco de poltica, por lo tanto, debe ser analizado cuidadosamente durante el diseo del
proyecto. Si es necesario, podran incluirse reformas o mejoras de las polticas como parte de los
componentes del proyecto. Alternativamente, las entidades de financiacin pueden establecer en
calidad de condiciones previas o condiciones de efectividad de un proyecto, la aprobacin por
parte del pas receptor de la ayuda de un conjunto de polticas compatibles con la naturaleza de
la intervencin.
Sostenibilidad social
Otro factor crtico en la promocin de sostenibilidad es el papel de las partes interesadas o
involucrados, en particular los directamente relacionados con la intervencin, especialmente los
beneficiarios directos. La sostenibilidad no puede lograrse sin su participacin y apoyo. Los
beneficiarios, tanto hombres como mujeres, deben participar activamente en tener la
oportunidad de influir en la direccin y los detalles de diseo y ejecucin. Los beneficiarios
debieran apropiarse del proyecto, a fin de que este tenga garantizada su sostenibilidad.
Sostenibilidad institucional
Cuando las actividades previstas en el proyecto integran y se basan en las estructuras existentes
de gestin local, tienen mejor perspectivas de sostenibilidad de los beneficios que aquellas que
implican el establecimiento de nuevas estructuras o estructuras paralelas. La capacidad de los
organismos locales para gestionar (o absorber) nuevas estructuras o sistemas no suele ser
adecuadamente evaluado. Es frecuente observar un exceso de supuestos optimistas en la etapa
de diseo de la intervencin.
Obtener la estructura de gestin "correcta" requiere un adecuado anlisis institucional del
proyecto, tanto durante la fase de diseo, como en la etapa de evaluacin ex post, como parte del
proceso de extraccin de lecciones que permita mejorar la calidad de las futuras intervenciones.
Sostenibilidad financiera
109
La sostenibilidad financiera est directamente relacionada con la posibilidad de contar con los
recursos necesarios y suficientes para sufragar los costos recurrentes o costos operativos
generados por el proyecto. Los costos operativos son aquellos en que se incurre durante el
proceso de produccin del bien u operacin del servicio correspondiente al objetivo del
proyecto, una vez realizada la inversin.
Debe observarse que los costos operativos relevantes son los costos operativos incrementales,
que resultan de la diferencia entre los costos operativos que se generan con la ejecucin del
proyecto (situacin con proyecto) menos los costos operativos que se proyectan si es que el
proyecto no fuera implementado (situacin sin proyecto). En esta perspectiva, cuando un
proyecto es fruto de un acuerdo de cooperacin de una entidad pblica nacional con un
organismo internacional, se deben considerar, entre otros, los aspectos siguientes:
Costos de operacin
Los costos de operacin son generados durante el periodo en el que el proyecto se
encuentra en funcionamiento y constituyen un elemento clave para la sostenibilidad
financiera del proyecto. En efecto, para mantener la operatividad de los servicios es
necesario cubrir los costos de operacin y mantenimiento. De lo contrario, el proyecto en su
conjunto (esto es, la inversin total comprometida en la intervencin) afrontara el riesgo
inminente del fracaso.
Sostenibilidad econmica
La clave de la sostenibilidad econmica consiste en el desarrollo de mercados que permitan una
provisin permanente e independiente del Estado de los servicios que el proyecto gener
inicialmente o que sern demandados en el futuro en el contexto de la operacin y
mantenimiento de las capacidades generadas por una intervencin.
Existen muchos ejemplos de relaciones mutuamente beneficiosas de participacin del sector
privado en el desarrollo. Estos incluyen el papel de las empresas privadas en la construccin de
obras de infraestructura vial, la participacin de las empresas privadas en la atencin de casos
de enfermedades, tales como el VIH/SIDA y, en general, en la provisin de servicios de salud. En
trminos ms generales, puede mencionarse, tambin, el papel de ONG y las iglesias en el
desarrollo de la educacin. La clave est en identificar la complementariedad entre el sector
privado y el Estado. Por ello, todo proyecto debe sensibilizar al beneficiario acerca de la
necesidad y beneficio de contar con el servicio pertinente, de manera particular, en el futuro.
Para esto se deber establecer medidas para potenciar la contribucin del proyecto en el
desarrollo de un mercado privado de provisin de los bienes o servicios pertinentes.
110
8.3
Condiciones de sostenibilidad
Arreglos institucionales
En este acpite del proyecto se debe sealar las consideraciones que se deben tener en cuenta,
desde el punto de vista institucional y de gestin, para lograr el xito del proyecto. Se debe
mencionar los roles y competencias de cada uno de los participantes comprometidos con el
proyecto, as como su compromiso, a fin de garantizar la sostenibilidad del proyecto. Los
participantes del proyecto deben estar claramente identificados, sealando los compromisos de
cada uno de ellos. Los compromisos de los actores involucrados deben demostrarse, por
ejemplo, mediante algn documento: (i) convenios; (ii) disponibilidad de recursos; (iii)
compromisos de compra y venta; (iv) autorizaciones de las administraciones locales; y, (v)
compromisos de la poblacin.
Una evaluacin de esta participacin puede facilitarse si se hace referencia a las formas de
organizacin tradicionales de la poblacin o si recin, con base al proyecto, se organizar la
poblacin. El aprovechamiento de las capacidades organizativas de la poblacin redundar en el
xito del proyecto.
8.4
Matriz de sostenibilidad
29
Ministerio de Economa y Finanzas, Direccin General de Programacin Multianual del Sector Pblico, Gua
metodolgica para la identificacin, formulacin y evaluacin de proyectos de saneamiento bsico en el mbito
rural, nivel perfil, Lima, 2007.
111
Factores de sostenibilidad. En esta columna se deben anotar todos los elementos que
podran influir en la sostenibilidad del proyecto bajo evaluacin. Por ejemplo:
sostenibilidad poltica, sostenibilidad social, sostenibilidad institucional, sostenibilidad
financiera, sostenibilidad econmica.
Efectos esperados. En esta columna se debe anotar los efectos que las estrategias
recomendadas tendrn sobre las perspectivas de sostenibilidad del proyecto.
El llenado de la matriz, que es ilustrada mediante la Tabla 23, permite contar con una opinin
slida sobre el grado de sostenibilidad del proyecto, lo que a su vez permitir tomar una
decisin informada sobre la conveniencia de ejecutarlo, aprobarlo o postergar su ejecucin.
Incidencia sobre la
sostenibilidad
Estrategia
recomendada
Probabilidad de
ocurrencia
Efectos
esperados
Sostenibilidad
poltica
Sostenibilidad
social
Sostenibilidad
institucional
Sostenibilidad
financiera
Sostenibilidad
econmica
8.5
Concepto de empoderamiento
tres tipos de inversin que son de particular importancia para el empoderamiento de los pobres:
inversin en educacin, provisin de seguridad social y promocin de la participacin e
inclusin econmica y social.
La educacin bsica es una condicin crtica para la inclusin social y el incremento de la
productividad. Una fuerza laboral educada incrementar el nivel de crecimiento que se obtiene
con un buen clima de inversin, as como tambin aumentar notablemente la reduccin de la
pobreza que dicho crecimiento puede provocar. La provisin de seguridad social puede ser vista
como una dimensin del empoderamiento, en la medida que permite a las personas adaptarse y
recuperarse de los shocks econmicos. Pero la seguridad social debera ser vista como algo ms
que simplemente un paliativo de corto plazo. Se trata de uno de los cimientos esenciales de una
economa de mercado, el cual le permite funcionar adecuadamente e involucrar a la gente pobre
en las oportunidades que genera. Sin una buena seguridad social, la gente pobre puede no ser
capaz de enfrentar algunos riesgos que forman parte de la participacin en la economa de
mercado, an cuando hayan logrado crecer sostenidamente y proveerse de bienes materiales en
el mediano plazo.
La tercera dimensin del empoderamiento se refiere a la participacin e inclusin en las
organizaciones sociales, desde grupos de crdito de autoayuda y asociaciones de usuarios de
agua, hasta en la provisin de servicios de salud y la toma de decisiones en el gobierno de las
escuelas. Segn seala Nicholas Stern en su libro Una Estrategia para el Desarrollo, estas
dimensiones del empoderamiento educacin, seguridad social e inclusin - son las que
aceleran la conexin entre el crecimiento y la reduccin de la pobreza, y que convierten el simple
crecimiento en un crecimiento con equidad social.
113
Traslada los objetivos del estudio a preguntas concretas que sern respondidas por las
personas encuestadas o, en general, por las unidades muestrales.
Homogeniza la obtencin de informacin, en razn de que todos los encuestados
respondern a los mismos tems, ya que el cuestionario se formula para todos por igual.
Ayuda a que la construccin de la base de datos y su tratamiento se realice con la mayor
celeridad posible, ya que facilita las tareas de codificacin de datos, almacenamiento,
tabulacin y posterior anlisis.
Qu se debe preguntar?
114
En el contexto del presente estudio, las preguntas del cuestionario son los instrumentos de
recopilacin de datos sobre las variables de inters (y complementariamente variables de control),
en el caso de que se trate de variables que requieran informacin de fuente primaria.
1
Determinacin de variables
de estudio
2
Seleccin del tipo
de cuestionario
3
Formulacin del contenido
de las preguntas
4
Estructuracin del
cuestionario
5
Prueba piloto
del cuestionario
115
lo general, se cree que el cuestionario debe ser sencillo, comprensible, imparcial, sin ambigedades
y sin palabras irritantes, no es posible generalizar un procedimiento paso a paso para asegurar la
precisin en la redaccin de las preguntas. La obtencin de respuestas precisas de los participantes
depende en gran medida de la capacidad del investigador para disear un cuestionario que facilite
la recordacin y motive a los participantes a cooperar. stos tienden a ser ms cooperativos cuando
el tema les interesa. Si las preguntas no son largas, difciles de responder o amenazantes para el
ego, hay ms probabilidad de obtener respuestas imparciales.
116
En el contexto del presente estudio, se busca medir un conjunto de variables relacionadas a los
resultados esperados del proyecto. Estas se encuentran clasificadas de conformidad tres tipos
bsicos: variables de impacto, variables de efecto y variables de producto. A su vez, las variables de
producto se subdividen de acuerdo con los componentes del proyecto: existen seis componentes
sustantivos, directamente vinculados con el logro del propsito del proyecto. Estos son los
siguientes:
Acceso a redes.
Accesos a equipos mviles.
Sistema de control integrado.
Sistema de control mediante video.
Normas y procedimientos.
Entrenamiento del personal.
Estas variables han sido clasificadas en dos categoras genricas: por un lado, aquellas que tratan
de aspectos objetivos (variables objetivas) del desempeo de la fiscalizacin, y por otro, aquellas
que tratan de los aspectos relacionados al comportamiento humano implicado en los actos de
fiscalizacin, tales como observancia de las normas y procedimientos, capacitacin y actitudes.
117
Clases de
cuestionarios
Por la concrecin de
las preguntas
Por la autonoma de
quien responde
Por la naturaleza de
quien responde
Abiertos
Autoadministrado
Dirigidos a
personas
Cerrados
Con presencia de
encuestador
Dirigidos a
empresas
Semicerrados
hecho que no es sencillo obtener la informacin puntualmente. Estos cuestionarios tienen que estar
perfectamente diseados; correcta y claramente redactados. Tambin deben ser muy fciles de
cumplimentar. Las normas que deben seguirse para su diseo son las siguientes:
Debe enviarse una carta que explique lo que se espera del encuestado. Se explicar la
finalidad de la investigacin. Es conveniente que la carta est personalizada.
Conviene explicar los criterios de seleccin de las personas.
Debe explicarse que el cuestionario es annimo.
Deben proporcionarse instrucciones claras para su cumplimentacin.
En lo posible deben utilizarse preguntas cerradas.
Las preguntas ms convenientes son las dicotmicas.
El diseo y presentacin debe ser atractivo, pues as aumenta la tasa de respuesta.
119
Cuestionarios abiertos
Cuestionarios semicerrados
Cuestionarios cerrados
Se emplean en investigaciones
exploratorias.
Se emplean en investigaciones
exploratorias y concluyentes.
Se emplean en investigaciones
descriptivas y causales.
No contienen escalas.
Contienen escalas.
Contienen escalas.
No se emplean tcnicas de
muestreo.
Se emplean tcnicas de
muestreo.
Se emplean en entrevistas y en
dinmicas de grupos.
La informacin se analiza
cualitativamente.
La informacin se analiza
cuantitativamente.
La informacin se analiza
cuantitativamente.
resultados.
resultados.
resultados.
120
9.4
Para realizar una adecuada recopilacin de datos, es necesario que el cuestionario sea
cuidadosamente elaborado en contenido y forma para recoger la informacin relevante y necesaria.
Adems, debe estar redactado de forma que facilite su cumplimentacin y permita obtener una tasa
elevada de respuesta. Para ello, en su diseo debe definirse la codificacin ms adecuada de las
preguntas para su tratamiento posterior.
Clases de preguntas
121
Criterio de Clasificacin
Clases de Preguntas
Abiertas.
Cerradas.
Semicerradas.
Dicotmicas.
Respuesta mltiple.
Bateras de preguntas.
Filtro.
Control.
Obtener informacin.
Forma de realizarse
Directas.
Indirectas.
122
Una pregunta dicotmica no debera sustituir a otras preguntas ms complejas o encadenadas. Por
ejemplo, no debera preguntarse Conteste s o no, ayer estuvo su televisor conectado ms cinco
horas y vio una pelcula de accin en TV1 y un programa cultural en TV2? Esta pregunta debera
desglosarse en tres, una por cada idea; si se vio la TV ms de cinco horas; si se vio una pelcula de
accin en TV1 y si se vio un programa cultural en TV2.
Preguntas con mltiples respuestas. Ante una pregunta o afirmacin se proporcionan varias
alternativas de respuesta. La pregunta con mltiples respuestas est cerrada, es inequvoca, fcil
de responder y fcil de codificar. Sin embargo, no es adecuada para estudiar motivaciones. Es
adecuada para conocer hechos, preferencias y opiniones.
Puede suceder que el nmero de alternativas de respuesta sea demasiado corto o elevado. En el
primer caso tal vez no se recoja toda la informacin que pudiera tener inters. Si fueran muchas las
alternativas los respondientes podran aburrirse. Adems es posible que esta pregunta pueda tener
mltiples respuestas, porque una persona puede practicar varios deportes. En estos casos la
codificacin es complicada. En tal caso, cada alternativa puede convertirse en dicotmica para
poder tabularla correctamente.
Preguntas en batera. Se llama as a una serie de preguntas relacionadas con un mismo tema, que
se integran y complementan.
Por los fines de las respuestas
Preguntas filtro. Son preguntas dispuestas de forma que se subordinen unas a otras. Una
respuesta afirmativa o negativa a una pregunta excluye o requiere la siguiente.
Preguntas de control. Su misin es verificar la coherencia entre las respuestas proporcionadas por
el encuestado. Las preguntas de control son muy tiles para eliminar cuestionarios por
incoherentes.
Por la forma de realizarse
Preguntas directas. Las preguntas directas se formulan para obtener respuestas directas, sin
rodeos. En una pregunta directa -y dicotmica- slo cabe s o no. Las respuestas a las preguntas
directas pueden cerrarse en los cuestionarios.
Preguntas indirectas. Las preguntas indirectas se formulan as porque de lo contrario sera ms
difcil obtener una respuesta. Se aplican principios de tcnicas proyectivas. Una pregunta directa
posiblemente dara lugar a una respuesta cuya credibilidad sera discutible, pues es demasiado
ntima para ser contestada a un extrao.
Cerrar las preguntas indirectas es difcil o incmodo, aunque es posible. Las preguntas indirectas
generan respuestas muy ricas en matices, que deberan recogerse en preguntas abiertas. Las
preguntas indirectas, por lo general, no se emplean en cuestionarios, sino en la aplicacin de
tcnicas cualitativas proyectivas. El cuadro 6.3 muestra caractersticas de algunos de los tipos de
preguntas que se han expuesto.
Clase de pregunta
Caractersticas
Pregunta abierta
Pregunta dicotmica
Preguntas cerradas
9.5
Cuerpo. Es el conjunto de preguntas que se van a formular. Este conjunto de preguntas se puede
subdividir a su vez en tres tipos de preguntas:
1. De aproximacin, que suelen ser muy sencillas, poco comprometidas y que generan inters
en colaborar. A medida que se avanza en el cuestionario se puede aumentar el grado de
complejidad de su formulacin o contenido. Si las preguntas delicadas se colocan al principio
la posibilidad de una negativa a colaborar es mayor.
2. De transicin. Se formulan antes de las preguntas complejas. Se colocan entre las preguntas
de aproximacin y las complejas.
3. Complejas. Requieren mucha atencin, inters y juicio por parte de quien responde.
124
Identificacin. Los identificadores del encuestado son variables generalmente nominales que
permiten reconocer las caractersticas demogrficas o sociodemogrficas de quienes proporcionan
la informacin, y que son fundamentales para formar grupos o identificar segmentos homogneos.
Deben ir al final del cuestionario. Una vez que se ha respondido al cuestionario, la persona que lo
haya hecho comprende los objetivos de la investigacin, y entender mejor por qu se le piden
datos que la caractericen. Tras finalizar la recogida de informacin es ms fcil que se proporcionen
los identificadores, especialmente los relativos a edad, renta, estudios y actividad laboral.
Adems de lo expuesto conviene tener en cuenta dos aspectos ms: el orden de las preguntas y el
orden del cuestionario.
El orden de las preguntas no debe afectar a las respuestas. Esta es posiblemente la norma de
redaccin de cuestionarios ms difcil de aplicar. Lo deseable es que las respuestas que den los
encuestados no dependan para nada del orden en que se formulan. Cada pregunta debera ser
independiente de las anteriores.
El orden del cuestionario deber ser lgico. Las preguntas deben formularse por temas afines y
en orden de dificultad creciente. Cada pregunta debe conducir a la siguiente.
9.6
Una vez que se ha elaborado el cuestionario conviene hacer una valoracin del mismo. Para ello
debe darse respuesta a las siguientes preguntas de esta lista de comprobacin.
Un cuestionario puede estar muy bien diseado y el encuestador ser excelente. No obstante,
siempre existe la duda sobre la veracidad de la informacin que se obtiene. Tres son las fuentes de
incertidumbre.
Quien responde tiene dificultad para expresarse o para comprender el cuestionario. Puede
ser por razones culturales o intelectuales. En general, los cuestionarios con preguntas
cerradas son los ms aconsejables para personas que tengan estas caractersticas en
grado medio o bajo. Cuando se trata de preguntas abiertas es ms difcil obtener
respuestas, porque obligan a un ejercicio mental. A veces el nmero de tems o de
categoras en cada uno de ellos pueden resultar excesivos, especialmente con personas
mayores o muy jvenes.
Quien responde tiene mala memoria. Este problema aparece con frecuencia cuando se trata
de personas de edad, pero tambin puede aparecer aisladamente en cualquier otra. Para
conseguir informacin fiable se puede acudir a listas u otros elementos visuales (fotos,
125
Una vez que se haya diseado el cuestionario este debe ser sometido a un grupo de personas para
efectuar una prueba. En una primera confeccin, es posible que no se acierte con aspectos
semnticos en las preguntas. Es decir, la redaccin del cuestionario puede no ser del todo correcta
o que no se comprenda bien. Es posible, tambin, que algunas preguntas importantes no se hayan
incluido, o no estn bien matizadas, o que haya un exceso de preguntas y algunas no sean
significativas.
Los defectos de contenido y/o forma que pudieran aparecer en el cuestionario se detectan mediante
pruebas piloto, dirigidas a pequeos grupos. Una vez subsanados los errores o perfeccionado el
cuestionario se podr dirigir a la totalidad de las personas que se considere oportuno que deben
responderlo. De esta manera se evita tener que repetir la investigacin por haber difundido un
cuestionario confuso o errneo.
En resumen, la prueba piloto del cuestionario persigue,
Eliminar ambigedades.
Eliminar preguntas superfluas.
Aadir al cuestionario preguntas relevantes.
Simplificar preguntas difciles.
Cambiar el orden de las preguntas para agilizar el flujo de respuestas.
Corregir la redaccin.
Eliminar faltas de ortografa.
Comprobar que los cdigos para grabar los datos ms adelante sean correctos.
Finalmente, cabe sealar que como parte de la prueba piloto del cuestionario, ste ser aplicado en
dos puestos de control, uno relacionado a la fiscalizacin de tributos internos y otro relacionado a
tributos externos. El cuadro 6.5 ofrece un resumen del cuestionario, clasificando las preguntas en
funcin de las variables de estudio y stas, a su vez, relacionadas a los resultados esperados del
proyecto. Asimismo, se ofrece el detalle de las unidades de anlisis, unidades y escalas de medida
y categoras de respuesta que se prev para cada una de las preguntas.
126
1. Evitar la
complejidad
2. Evitar las
preguntas que
sirven de gua y las
preguntas cargadas
Las preguntas que sirven de gua y las cargadas son una fuente importante de
prejuicio en su redaccin. Una pregunta que sirve de gua sugiere o lleva ciertas
respuestas que amenazan la validez del estudio. Una pregunta cargada sugiere
una respuesta socialmente deseable o emocionalmente cargada.
3. Evitar la
ambigedad
4. Evitar los
renglones de doble
efecto
Se hace referencia a una pregunta que cubre varios aspectos a la vez como una
pregunta de doble efecto y siempre se debe evitar. Es fcil cometer el error de
hacer dos preguntas en vez de una, es por eso que si se van a explorar dos
ideas, se merecen al menos dos preguntas, para no generar la innecesaria
confusin que resulta de la pregunta de doble efecto.
5. Evitar hacer
suposiciones
6. Evitar las
preguntas
opresivas que
pueden poner a
prueba la memoria
del participante
127
Glosario de trminos
1. Accin. Unidad bsica de intervencin pblica en el desarrollo. En el contexto de las funciones
de Estado, las entidades pblicas ejecutan acciones que, por una parte, generan determinados
beneficios para la sociedad, denominados objetivos o resultados en el lenguaje administrativo,
que toman la forma de productos; y, por otra, demandan un costo fiscal. Las acciones
constituyen la unidad bsica de programacin fsica y financiera, y pueden ser de carcter
permanente o temporal, dando lugar a dos categoras de intervencin: actividades y proyectos.
128
mediante el anlisis de sendas (path analysis) y que tratan de estimar la magnitud de las
relaciones entre las variables. LlSREL y AMOS son programas estadsticos de anlisis causal.
9. Anlisis costo - efectividad. Mtodo de evaluacin que relaciona el costo del proyecto (o de
alguno de sus componentes) con indicadores no monetarios de los resultados obtenidos. Puede
realizarse en forma previa o posterior a la ejecucin del proyecto.
10.Anlisis de alternativas. Apreciacin crtica de los distintos medios para alcanzar el propsito
del proyecto desde los puntos de vista tcnico y econmico. La alternativa seleccionada se
cristaliza en el casillero de componentes del marco lgico. Grficamente, este anlisis se realiza
con el rbol de Objetivos.
11.Anlisis estadstico bivariable. Conjunto de tcnicas que estudian la relacin o asociacin
entre dos variables. Pueden considerarse, en algunos supuestos, como casos especiales o
simplificados de las tcnicas de anlisis multivariable. Son ejemplo de ellas las tablas y
coeficientes de contingencia, la correlacin entre rangos, la correlacin lineal, el anlisis de la
varianza y covarianza y el anlisis de regresin simple.
12. Anlisis estadstico multivariable. Conjunto de tcnicas estadsticas que estudian la
relacin entre ms de dos variables. El anlisis multivariable permite un mejor acercamiento a la
realidad en la que los fenmenos suelen ser multidimensionales. Las tcnicas que incluyen
suelen clasificarse en dos grandes grupos, segn analicen relaciones de dependencia o de
interdependencia entre variables.
13.Anlisis estadstico univariable. Conjunto de tcnicas de anlisis de una sola variable, como,
por ejemplo, la distribucin de frecuencias (tabulaciones simples), los promedios (media,
mediana y moda), las medidas de dispersin [varianza y desviacin estndar), medidas de
asimetra y de curtosis, tests estadsticos no paramtricos (test ji cuadrado, Mann- Whitney,
Wilconxon) y paramtricos (test t, test z).
129
17. Anlisis de riesgos. Anlisis o evaluacin de factores externos que podran afectar el logro de
los objetivos de un proyecto. El anlisis de riesgos se expresa en la columna de supuestos del
marco lgico.
18. Anlisis de sensibilidad. Anlisis de las relaciones existentes entre los resultados esperados
de un proyecto y las variables de las que dependen tales resultados. En el contexto del marco
lgico, el anlisis de sensibilidad implica establecer la relacin entre la columna de objetivos y la
de supuestos.
19. rbol de objetivos. Representacin en forma de diagrama de relaciones medio-fin del anlisis
de las alternativas de un proyecto. El rbol de objetivos se elabora a partir del rbol de
problemas, invirtiendo el sentido de las proposiciones.
20. rbol de problemas. Representacin en forma de diagrama de relaciones causa-efecto del
problema central que ser abordado por un proyecto. El rbol de problemas es una
representacin metafrica del anlisis del problema central, y supone contar con dos elementos
clave: marco terico apropiado y participacin de los involucrados clave.
21. Asociacin. Relacin entre variables. Puede reflejar una correlacin casual o, por el contrario,
una relacin causal, en la que una o varias variables dependen o son explicadas por una o varias
variables independientes o explicativas.
22. Atribucin. Imputacin de un vnculo causal entre los resultados esperados (u observados) y
una intervencin especfica. La atribucin est conceptualmente relacionada a la evaluacin de
impacto de un proyecto. En el contexto del marco lgico, el logro del propsito es atribuible a los
componentes (y sus correspondientes actividades), bajo ciertas condiciones del entorno.
23. Atributo. Caracterstica que describe a un sujeto, organizacin u objeto. En las personas los
atributos son las caractersticas demogrficas, socioeconmicas o psicogrficas que lo
distinguen. En un grupo u organizacin los atributos vienen dados por el tamao, naturaleza
jurdica, estructura organizativa, valor econmico, cifra de ventas, etc. Los atributos de un objeto
pueden ser muy variados: tamao, color, sabor, duracin, coste, etc.
24. Beneficiarios. Poblacin que recibir los productos, tangibles e intangibles, considerados en un
proyecto. Tambin denominado poblacin beneficiaria, grupo beneficiario, grupo objetivo o grupo
meta. En proyectos de investigacin y en los diseos de evaluaciones de impacto suele
denominrsele grupo de tratamiento o poblacin testigo.
25. Beneficiarios directos. Grupo especfico de la poblacin para beneficio del cual se emprende el
proyecto. El nmero de beneficiarios directos podra ser uno de los indicadores de efecto.
26. Beneficiarios indirectos. Grupo de personas que estn localizadas alrededor o en un rea muy
cercana de ejecucin de un proyecto, cuyos beneficios generados por el mismo son marginales
a los resultados esperados del proyecto.
130
27. Beneficio. En trminos financieros, es la ganancia neta que se obtiene de una inversin. En
trminos amplios, es el conjunto de mejoras logradas en las condiciones de vida de la poblacin
beneficiaria de un proyecto. En el contexto del marco lgico, los beneficios de un proyecto se
expresan en los indicadores de efecto e impacto.
28. Cadena de resultados. Conjunto jerarquizado de logros esperados de una intervencin. Los
resultados pueden ser expresados tanto en forma cualitativa como cuantitativa. Cualitativamente,
los resultados son: fin, propsito, productos y actividades. Cuantitativamente, los resultados se
expresan en indicadores de impacto, efecto, producto y proceso.
29. Causa. Problema social que determina y explica otro problema, hacia cuya solucin se orienta
un proyecto. El anlisis de problemas consiste, esencialmente, en un anlisis de las causas del
problema central abordado por un proyecto. Es una variable que produce un cambio en el
comportamiento de otra u otras variables.
30. Causalidad. Relacin entre dos variables en la que un cambio en una de ellas (variable
independiente o explicativa) produce un cambio en la otra (variable dependiente o a explicar).
Para probar la existencia de relacin causa-efecto entre dos variables, y no simple asociacin, es
necesario que se cumplan al menos tres condiciones: variacin concomitante (supone
asociacin o variacin conjunta entre las variables causa y efecto). Orden temporal de la
ocurrencia de las variaciones (la causa de un acontecimiento debe preceder a su ocurrencia) y
control sobre otros posibles factores causales.
31. Ciclo del proyecto. Conjunto de etapas que recorre un proyecto. Las principales etapas del ciclo
de proyecto son: pre-inversin, inversin y operacin. El ciclo de un proyecto se enmarca en el
ciclo ms amplio de gestin de una entidad pblica: planificacin, ejecucin y evaluacin.
32. Cierre del proyecto. Es el acto por el cual se da por finalizada la ejecucin del proyecto, en
concordancia con lo establecido en el estudio definitivo del proyecto. Puede elaborarse un marco
lgico ex post, que muestre la intervencin con los procesos ejecutados y los resultados reales.
33. Coherencia. En el contexto del marco lgico, se refiere a la existencia de una correcta relacin
de causa a efecto entre los distintos niveles de la cadena de resultados. Es la lgica vertical del
proyecto.
34. Componente. Divisin de una actividad o proyecto que permite identificar un conjunto de
actividades concretas. En el marco de un PIP, un componente es un producto especfico,
tangible o intangible, que el Estado entrega a la sociedad, y que emerge como resultado de la
ejecucin de una o varias actividades.
35. Condicin previa. Condicin que debe cumplirse previamente al otorgamiento de
financiamiento para la ejecucin de un proyecto. Tambin se le conoce como condicin de
efectividad. Aun cuando no forma parte del marco lgico, suele ser ubicado en la parte anterior a
las actividades.
131
36. Confiabilidad. Es el grado en que la medida de una variable est libre de error aleatorio y, por
tanto, proporciona resultados consistentes. Una medida o un mtodo de investigacin es
confiable si proporciona resultados prcticamente idnticos en todos los casos en que se repita
la investigacin. Un mtodo para medir la confiabilidad es la determinacin de consistencia
interna a travs del coeficiente alfa de Cronbach.
37. Constante. Propiedad de un objeto que toma un solo valor.
38. Constructo. Es un concepto o construccin terica especfica mente diseado para un propsito
cientfico determinado, generalmente para organizar el conocimiento y dirigir la investigacin, con
el fin de describir y explicar algn aspecto del fenmeno a estudiar. El trmino validez del
constructo se refiere a la correspondencia entre una construccin, que est a un nivel
conceptual e inobservable, y una medida propuesta de la misma a nivel operativo. Una medida
es vlida en tanto y cuanto evale correctamente el concepto que se propone medir.
39. Contraste de hiptesis. Tambin se denomina ensayo de hiptesis. Comprende un conjunto de
procedimientos estadsticos para decidir si una hiptesis se debe aceptar o rechazar.
40. Correlacin. Asociacin entre las variaciones de los valores de dos variables. Esta asociacin
puede ser positiva o directa (del mismo sentido) o negativa o inversa (en sentido contrario). Se
mide, por lo general, con el coeficiente de correlacin de Pearson, que puede tomar valores
comprendidos entre -1 y 1.
41. Correlacin espuria. Asociacin entre dos variables de carcter accidental o por efecto de una
tercera variable, sin que se d ninguna relacin causal entre ellas.
42. Costos. Recursos que se sacrifican para la ejecucin de las actividades de un proyecto. Los
costos pueden ser directos e indirectos, y en conjunto forman el presupuesto del proyecto. Al
mtodo de costeo en base a las actividades necesarias para el logro de los productos y,
finalmente, del propsito, se conoce como enfoque de presupuesto por resultados.
43. Covarianza. Es una medida de la relacin o asociacin entre dos variables. Puede tomar valores
positivos o negativos. Si son positivos, expresa que las dos variables varan en igual sentido. Un
valor negativo expresa lo contrario.
46. Cuestionario. Formulario que contiene las preguntas de una encuesta y en el que se registran
las respuestas. El diseo del cuestionario debe partir de una correcta definicin del problema a
investigar, una formulacin precisa de las hiptesis y una especificacin adecuada de las
variables y escalas de medida. En el cuestionario pueden formularse preguntas abiertas, sin
indicacin de posibles respuestas, o preguntas cerradas, con una relacin exhaustiva de las
respuestas posibles.
132
47. Dato. Valor de una variable o de una constante. Informacin sobre una situacin, que se utiliza
de base para el anlisis y el clculo.
48. Dato primario. Es aquel que se obtiene de modo especfico para la investigacin a efectuar. El
propsito, y no la naturaleza de los datos, es lo que los define como primarios o secundarios.
Los datos primarios, al ser obtenidos expresamente para la investigacin a realizar, son los ms
idneos porque se pueden adaptar a los propsitos de la investigacin. Sin embargo, tienen un
coste elevado, superior al de los secundarios. Existen dos maneras bsicas de conseguirlos:
por observacin o mediante comunicacin.
49. Dato secundario. Dato que ya est disponible, que se ha obtenido en estudios anteriores
y que sirve para el propsito de la investigacin a realizar. Las fuentes de informacin
secundaria pueden ser internas o externas a la organizacin. En este segundo caso, pueden ser
pblicas o privadas. Los datos secundarios tienen como ventaja su menor coste y tiempo
necesario para obtenerlos.
50. Diseo de proyectos. Accin central de la etapa de pre inversin. Abarca los procesos de
identificacin, formulacin y evaluacin ex ante. Estos procesos, segn el nivel de profundidad
de los estudios, pueden tomar la forma de documentos diversos, siendo los ms importantes el
perfil, estudio de pre-factibilidad y estudio de factibilidad.
51. Efecto. Cambio real buscado por un proyecto en la situacin de la poblacin beneficiaria.
Frecuentemente, los efectos son localizados a nivel del propsito y fin del marco lgico.
52. Efecto directo. Resultado obtenido a nivel de propsito en la cadena de resultados o jerarqua
de objetivos.
53. Efecto indirecto. Resultado obtenido a nivel de fin en la cadena de resultados o jerarqua de
objetivos.
54. Eficacia. Grado en el que un proyecto logra sus resultados y metas planeadas, de conformidad
con lo establecido en la columna de indicadores del marco lgico.
55. Eficiencia. Relacin entre los recursos utilizados o costos y los productos de un proyecto. Una
gerencia eficiente de proyectos implica la obtencin del mximo producto con el mnimo costo.
56. Encuestado. Persona a la que se le efecta una encuesta y contesta las preguntas de un
cuestionario.
57. Encuestador. Persona que realiza una en- cuesta y formula las preguntas del cuestionario.
58. Enfoque de marco lgico. Enfoque metodolgico que abarca todos los pasos para la
identificacin de un proyecto: determinacin del problema central, anlisis de involucrados,
anlisis de problemas, anlisis de objetivos (y alternativas) y marco lgico propiamente dicho.
Tambin conocido como ZOPP o planificacin de proyectos orientada a objetivos.
133
63. Error de la encuesta. La confiabilidad de una encuesta est en funcin de su error total,
que se compone del error de muestreo y del error ajeno al muestreo. El error de muestreo
se produce como con- secuencia de que la muestra no es una representacin perfecta de
la poblacin. Se puede controlar con una adecuada seleccin y aumentando el tamao de
la muestra. El error ajeno al muestreo puede ser debido a la falta de respuesta (poblacin
no alcanzada, no en casa, rehsa contestar, etc.), y al error de la respuesta (engao,
ocultamiento, alteracin a propsito, recuerdo impreciso o equivocado, cansancio,
influencia del entrevistador, redaccin de las preguntas, posicin de las mismas en el
cuestionario, posicin de las alternativas de respuesta dentro del cuestionario, etc.). Estos
errores pueden ser subsanados, en parte, mediante encuestas de prueba y supervisin
posterior a la realizacin de la encuesta.
64. Error de muestreo. Es el error que se comete en la medida de las variables estudiadas al
tomar una muestra en lugar de la totalidad de la poblacin. Puede ser cuantificado cuando
el muestreo es probabilstico. El error de muestreo se determina a partir del error estndar
de la media.
65. Error en la redaccin de preguntas. Es el que se comete por una inadecuada redaccin
de las preguntas del cuestiona- rio. Puede ser de cinco tipos: preguntas cargadas (inducen
a dar una respuesta determinada), preguntas o respuestas dobles, preguntas ambiguas,
vocabulario inadecuado o excesivamente tcnico, y alternativas no contempladas.
66. Escala. Instrumento utilizado para medir variables. Las escalas pueden ser de cuatro tipos:
1) escalas nominales, que indican slo la pertenencia a una clase o categora; 2) escalas
ordinales, que expresan la existencia de una ordenacin de algn tipo en las categoras; 3)
escalas intervlicas, que suponen, adems de ordenacin, la existencia de distancias
iguales entre las categoras, y 4) escalas proporcionales o de razn, que suponen, adems
de ordenacin e igual distancia, la existencia de proporcionalidad entre los intervalos y el
valor 0 es absoluto. El anlisis estadstico de las variables est condicionado por la escala
de medida utilizada.
67. Estandarizacin de una variable. Resultado de dividir la diferencia entre el valor de
una variable y su media aritmtica por la desviacin estndar de la variable.
134
72. Estrategia del proyecto. Alternativa seleccionada para el logro de los objetivos del proyecto. En
el contexto del marco lgico, existe una estrategia general y una estrategia operativa. La primera
esta expresada en el campo de los componentes y la segunda en el campo de las actividades.
73. Evaluabilidad. Nivel de confiabilidad con que puede evaluarse un proyecto. Grado en el cual el
diseo ha sido definido, en trminos de indicadores objetivamente verificables, de tal manera que
sea posible realizar acciones de monitoreo y evaluacin vlidas y confiables.
74. Evaluacin de impacto. Tipo de evaluacin ex post que se realiza con el objetivo de
determinar si un proyecto ha producido los efectos necesarios en el bienestar de la poblacin y
en qu magnitud stos pueden ser atribuidos a la intervencin.
75. Evaluacin de procesos. Tipo de evaluacin ex post, tambin conocida con el nombre de
monitoreo o seguimiento, que centra su atencin en la verificacin de las actividades, los
indicadores de proceso y las correspondientes metas fsicas y financieras.
76. Evaluacin de resultados. Tipo de evaluacin ex post que se interesa, principalmente, por la
verificacin del logro de los productos y el propsito del proyecto. Usualmente, se realiza a medio
trmino y al final de la ejecucin del proyecto.
135
77. Evaluacin ex - ante. Evaluacin del proyecto realizada antes de que sea ejecutado, tanto para
determinar su viabilidad, como para contribuir a mejorar el diseo del mismo. Existen dos
enfoques: evaluacin privada y evaluacin social; y dos mtodos: anlisis costo-beneficio y
anlisis costo-efectividad.
78. Evaluacin ex - post. Evaluacin realizada despus de finalizada la ejecucin del proyecto.
Tiene por objetivo analizar el logro de los objetivos del proyecto y extraer lecciones para mejorar
el diseo de las intervenciones futuras. Existen tres tipos de evaluacin ex post: evaluacin de
procesos, evaluacin de resultados y evaluacin de impacto.
79. Escenario contrafactual. Representacin de lo que ocurrira con la poblacin afectada en el
caso de que el proyecto no se ejecute. Estadsticamente est representado por el grupo de
control o poblacin testigo.
80. Factores controlables. Acciones que estn bajo el control de la entidad ejecutora del proyecto.
Son expresadas en la columna de objetivos del marco lgico, especficamente en los campos de
componentes y actividades.
81. Factores de calidad. Se refiere a los factores determinantes de la calidad del diseo de un
proyecto. Existen tres factores fundamentales: coherencia, viabilidad y evaluabilidad.
82. Factores externos. Condiciones o eventos externos sobre los cuales se tiene poco o ningn
control y que pueden afectar los procesos y resultados de un proyecto. Son considerados en los
supuestos en el marco lgico.
83. Fiabilidad. Confiabilidad de un instrumento de medida.
84. Ficha tcnica. Documento que informa sobre las condiciones en las que se ha realizado una
encuesta. Indica el tipo de encuesta (personal, por correo o por telfono), la fecha de realizacin,
el mtodo de muestreo, los puntos de muestreo seleccionados, el tamao de la muestra y el
error de muestreo cometido.
85. Fichero. La Ley Orgnica de Proteccin de Datos de Carcter Personal, de 13 de diciembre de
1999, define un fichero como todo conjunto organizado de datos de carcter personal,
cualquiera que fuere la forma o modalidad de su creacin, almacenamiento, organizacin y
acceso (artculo 3, apartado b).
86. Fichero de datos. Conjunto de datos organizados de acuerdo con algn criterio (alfabtico,
numrico, etc.), que se crea y mantiene para que sus registros puedan ser consultados y
analizados, as como relacionados con otros. El fichero de datos puede estar contenido en un
soporte magntico para su utilizacin mediante un ordenador.
87. Fin. Objetivo global hacia el cual se prev que contribuya un proyecto. Por lo general, el fin de un
proyecto es un objetivo estratgico de la entidad ejecutora.
136
88. Fuentes de verificacin. Fuentes de informacin que permiten verificar el logro de los procesos
y resultados de un proyecto, tal como stos se encuentran precisados en los indicadores del
marco lgico.
89. Fuentes primarias. Informacin alfabtica y numrica, cualitativa o cuantitativa- que proviene
del trabajo de investigacin realizado por la propia entidad ejecutora de un proyecto.
90. Fuentes secundarias. Informacin alfabtica y numrica, cualitativa o cuantitativa- que
proviene del trabajo de investigacin realizado por entidades distintas de la ejecutora de un
proyecto.
91. Goal. Trmino del idioma ingls que, si bien literalmente se traduce como meta, en el contexto
del marco lgico equivale a fin.
92. Grupo de control. Grupo de personas que, deliberadamente, no reciben los productos del
proyecto, como si ocurre con el grupo beneficiario. Ello permite medir y evaluar las diferencias
entre ambos y, de este modo, obtener una cuantificacin del impacto del proyecto.
93. Hiptesis. Presunciones respecto a las condiciones necesarias y suficientes para el logro de un
determinado resultado. Las condiciones necesarias se expresan en la columna de objetivos
(campos de los componentes y actividades) y las condiciones suficientes en la columna de
supuestos.
95. Indicador de desempeo. Magnitud que permite verificar los cambios resultantes de una
intervencin. En el contexto del marco lgico, se denominan indicadores objetivamente
verificables.
96. Indicador de efecto. Indicador de desempeo a nivel del propsito del marco lgico, que, por lo
general, refleja el logro del objetivo principal del proyecto.
97. Indicador de impacto. Indicador de desempeo a nivel del fin del marco lgico. Mide el logro de
los objetivos estratgicos de una entidad, aunque no son de carcter vinculante, sino nicamente
referencial.
99. Indicador de proceso. Indicador a nivel de actividades. Son la base para el establecimiento de
las metas fsicas y financieras del proyecto.
137
100. Informacin cualitativa. Informacin del proyecto que no se expresa en forma numrica, tales
como actas de reunin o anotaciones generales procedentes de las observaciones. Los datos
cualitativos suelen describir los conocimientos, actitudes y comportamientos de las personas.
105. Lnea de base. Datos principalmente numricos que describen la situacin anterior a la
ejecucin del proyecto, y que se elaboran, principalmente, sobre la base de los indicadores de
impacto y efecto.
106. Lgica horizontal. Relacin entre los factores internos y externos del marco lgico; es decir,
entre los objetivos y los supuestos. Permite verificar la viabilidad del proyecto en el contexto
global del mbito pertinente del mismo.
107. Lgica de intervencin. Es el conjunto de elementos que forman parte de la estrategia del
proyecto. Por lo general, resulta de una combinacin de factores internos (actividades y
componentes) y factores externos (condiciones econmicas, sociales y polticas).
108. Lgica vertical. Cadena de relaciones de causa a efecto entre los distintos niveles de la
columna de objetivos del marco lgico que permite garantizar la coherencia interna del proyecto.
109. Marco lgico. Instrumento de gestin que consiste en una matriz de cuatro filas y cuatro
columnas en el cual se resume las caractersticas bsicas de un proyecto. Las columnas se
denominan: objetivos, indicadores, medios de verificacin y supuestos. Las filas se denominan:
fin, propsito, componentes y actividades.
110. Matriz de seguimiento y evaluacin. Cuadro en el que se detallan los indicadores de
desempeo necesarios para el monitoreo y evaluacin de los resultados del proyecto.
111. Medios. Cursos de accin que permiten alcanzar el objetivo del proyecto. En el contexto del
marco lgico, se reconocen dos tipos de medios: medios de primer nivel y medios de segundo
nivel o fundamentales.
138
112. Medios de primer nivel. Son los medios relacionados al proceso subyacente en el logro del
propsito.
113. Medios fundamentales. Son medios que se derivan de los medios de primer orden y que
representan los bienes pblicos necesarios para lograr los medios de primer nivel.
114. Medios de verificacin. Fuentes de informacin a partir de las cuales se puede determinar la
situacin de cada uno de los indicadores en la matriz del marco lgico.
115. Medio de neutralizacin. Componentes y/o actividades establecidas con la finalidad de
contrarrestar el efecto de un factor externo no controlable que podra poner en riesgo el logro del
propsito del proyecto.
116. Meta financiera. Gastos previstos en la realizacin de las actividades, calculados teniendo en
cuenta los costos unitarios y las metas fsicas.
117. Meta fsica. Logros previstos en la realizacin de actividades, teniendo en cuenta los
indicadores de proceso y las unidades de medida correspondientes.
118. Monitoreo. Procedimiento empleado para comprobar la eficacia y eficiencia del proceso de
ejecucin de un proyecto, que culmina generalmente recomendando medidas correctivas para
optimizar los resultados de un proyecto.
119. Muestra. Conjunto de elementos de una poblacin o universo del que se quiere obtener
informacin. Para que sea vlida, la muestra debe ser representativa de la poblacin, es decir,
que en su estructura se reproduzcan exactamente las caractersticas y comportamientos de la
poblacin de la que ha sido obtenida. La muestra permite obtener datos de una poblacin de
forma rpida y econmica.
120. Muestreo. Procedimiento de seleccin de una muestra, para la realizacin de una encuesta.
Implica llevar a cabo las siguientes actividades: definir la poblacin objeto de estudio, seleccionar
la estructura de la muestra, especificar la unidad muestral, seleccionar el mtodo de muestreo,
determinar el tamao de la muestra, disear el plan de muestreo y seleccionar la muestra.
121. Objetivo. Enunciado de un estado deseado hacia el cual un proyecto est dirigido. Un objetivo
se debe formular en trminos de cambio en la situacin de la poblacin y lingsticamente
empleando un verbo en modo infinitivo. Trmino tambin conocido como resultado.
122. Objetivo principal. Es el propsito del proyecto.
123. Objetivo especfico. Trmino que refiere a los componentes del proyecto, expresados como
resultados esperados.
139
124. Objetivo estratgico. Objetivo que orienta la labor general de una entidad pblica. Por lo
general, los proyectos de inversin pblica son acciones diseadas en la perspectiva de lograr
un determinado objetivo estratgico.
125. Operacin. Etapa del ciclo del proyecto durante la cual se perciben los beneficios derivados de
la inversin realizada durante la ejecucin. Por lo general, el Fin del marco lgico tiene relacin
con la situacin de la poblacin beneficiaria en la etapa de operacin.
126. Output. Trmino del idioma ingls que equivale a producto.
127. Outcome. Trmino del idioma ingls que equivale a efecto.
128. Panel. Muestra permanente de individuos o de establecimientos de los que se obtienen datos de
forma continuada a intervalos de tiempo regulares. A cambio de alguna compensacin
econmica o de regalos, sus miembros facilitan informacin sobre las mismas o distintas
variables a lo largo del tiempo.
129. Parmetro. Caracterstica definida de una poblacin. Valor que forma parte de una expresin o
ecuacin y que se presenta como constante. Coeficiente de una ecuacin.
130. Pertinencia. Grado en el que los objetivos de un proyecto son vlidos, a la luz de las prioridades
de desarrollo del pas o de la poblacin beneficiaria. En lo que se refiere al fin del marco lgico, la
pertinencia debe ser evaluada en trminos de su coincidencia con las prioridades nacionales,
sectoriales y/o regionales. Trmino tambin conocido como relevancia.
131. Plan estratgico. Documento maestro de gestin de una entidad pblica. Contiene una
descripcin del rol institucional, macro problemas centrales, objetivos estratgicos y especficos,
as como las acciones estratgicas, sean estas actividades o proyectos.
132. Plan operativo. Documento que detalla el contenido de las actividades y proyectos de una
entidad pblica para un ao calendario. El plan operativo anual contiene la porcin anual de las
metas fsicas y financieras de un proyecto.
133. Poblacin. Conjunto de elementos (individuos, organizaciones, objetos o acontecimientos) del
que se toma una muestra para su estudio. Se denomina tambin universo. Una poblacin puede
ser finita o infinita. La poblacin consistente en todos los productos fabricados por una empresa
en un perodo determinado es finita, mientras que la poblacin formada por los precios posibles
de un producto es infinita. El error de muestreo se estima de forma distinta segn se trate de
poblaciones finitas o infinitas.
134. Pregunta. Cuestin planteada en un cuestionario, de la que se solicita una respuesta por parte
del encuestado. Puede ser abierta, sin indicacin de respuestas posibles, o cerrada, con una
relacin exhaustiva de respuestas, para que el encuestado elija una o varias de ellas.
135. Pregunta abierta. Es aquel tipo de pregunta en un cuestionario que no contiene indicacin de
posibles respuestas. Las preguntas abiertas permiten dar una respuesta totalmente libre al
encuestado y utilizar su propio lenguaje. Sin embargo, para poder ser tratadas estadsticamente,
140
deben ser agrupadas y codificadas, lo que puede entraar cierta dificultad. Son especialmente
adecuadas en investigaciones exploratorias o cuando no se tiene mucho conocimiento sobre las
respuestas posibles.
136. Pregunta ambigua. Pregunta de un cuestionario que tiene dos o ms interpretaciones posibles.
Se incurre en este defecto de formulacin de la pregunta cuando se utilizan trminos vagos e
imprecisos como antes, despus, mucho, poco, normal, frecuente, etc., y no se
ha definido previamente cul es su alcance o contenido.
137. Pregunta cargada. Pregunta de un cuestionario que por su forma de estar redacta- da induce a
una respuesta determinada. Por ejemplo, la pregunta Considera que los bancos deben bajar
los altos intereses que cobran por sus prstarnos? est sesgada hacia una respuesta
afirmativa, porque se presupone que los intereses son elevados.
138. Pregunta cerrada. Pregunta en un cuestionario que contiene una relacin exhaustiva de las
respuestas posibles. Puede ser dicotmica, si tiene slo dos respuestas posibles, de eleccin
mltiple, si tiene ms de dos, o bien tratarse de una escala de medida. Las preguntas cerradas
son adecuadas cuando se conocen las respuestas posibles. Son ms fciles de contestar que
las preguntas abiertas, dado que el encuestado slo tiene que elegir una o varias alternativas, y
su tratamiento estadstico es sencillo. Este tipo de preguntas suelen ser las ms utiliza- das en
las encuestas.
139. Pregunta condicionada. Es aquella cuya respuesta est indicada por una pregunta filtro
anterior, y slo debe ser contesta- da si se cumplen las condiciones establecidas por la pregunta
filtro o condicionante.
140. Pregunta de clasificacin. Pregunta de un cuestionario que se formula al encuestado sobre sus
atributos personales (edad, sexo, estudios, hbitat, clase social, etc.) o las caractersticas de la
entidad a la que representa (nmero de empleados, cifra de ventas, etc.], que sirven para su
clasificacin.
141. Pregunta de control. Pregunta que se formula para comprobar la consistencia de las
respuestas y, en general, contrastar la calidad de la informacin facilitada por el encuestado.
142. Pregunta de eleccin mltiple. Pregunta de un cuestionario en la que se proponen varias
alternativas de respuesta.
143. Pregunta de respuesta nica. Pregunta cuyas alternativas de respuesta son mutuamente
excluyentes, de modo que el encuestado slo puede dar una respuesta.
144. Pregunta de respuesta mltiple o multirrespuesta. Pregunta en la que el encuestado puede
dar ms de una respuesta.
145. Pregunta dicotmica. Es aquella que tiene slo dos respuestas alternativas: s o no, acuerdo o
desacuerdo, etc.
141
146. Pregunta de relleno. Pregunta sencilla, neutral y cuya informacin no es necesaria para la
investigacin, pero que se utiliza para iniciar la encuesta, cambiar de tema o relajar el ambiente,
cuando el tema del cuestionario es sensible o controvertido.
147. Pregunta doble. Cuestin en la que se formulan dos o ms preguntas a las que se solicita una
sola respuesta.
148. Pregunta filtro. Pregunta cerrada, generalmente con pocas opciones, que tiene por objeto
seleccionar submuestras concretas de encuestados, para continuar la administracin del
cuestionario por vas total o parcialmente distintas.
149. Pregunta introductoria. Pregunta para establecer contacto con el encuestado, que se coloca al
principio del cuestionario, y J que pretende interesar al entrevistado y ganar su confianza.
150. Pregunta semiabierta. Modalidad de pregunta cerrada en la que se aade una pregunta
abierta, generalmente bajo la denominacin de otras respuestas, que permite aadir al
encuestado otras opiniones no contempladas en las alternativas de respuesta sugeridas en la
parte cerrada de la pregunta.
151. Problema. En el contexto del SNIP, se refiere a una necesidad bsica insatisfecha o una
oportunidad de mercado desaprovechada, en razn de la deficiencia del Estado en la provisin
de determinados bienes y servicios.
152. Producto. Resultado que el proyecto debe alcanzar. Constituye el primer nivel de resultados
dentro del ciclo de un proyecto. Los productos pueden ser bienes, servicios, cambios de calidad,
cambios de eficiencia en produccin, etc.
153. Proyecto de inversin pblica. Accin de carcter temporal, organizada como un conjunto de
componentes y actividades interrelacionados, que utiliza total o parcialmente recursos pblicos
con la finalidad de mejorar la dotacin de bienes y servicios esenciales para la satisfaccin de las
necesidades bsicas de la poblacin y la promocin del desarrollo del pas.
154. Programa de inversin pblica. Conjunto de proyectos de inversin pblica orientados a un
propsito comn, ejecutados por una o varias unidades ejecutoras. Visto el programa en su
conjunto, los proyectos son sus componentes; visto cada proyecto en forma individual, cada
componente del programa se constituye en el propsito de los proyectos correspondientes.
155. Proposicin. Frase de la que se puede decir que es, o bien verdadera o bien falsa. El marco
lgico est compuesto de 16 proposiciones, ubicadas en 16 celdas.
156. Propsito. Resultado situado entre los productos y el fin en la jerarqua de objetivos establecida
en el marco lgico. Refleja los resultados a mediano plazos que razonablemente cabe esperar
del proyecto siempre que se generen los productos previstos y sigan siendo vlidas las hiptesis
adoptadas en los supuestos.
142
157. Proyecto. Conjunto de actividades con objetivos establecidos, diseados para producir un
resultado de un plazo limitado y con recursos presupuestados. Su objetivo es contribuir a
resolver un determinado problema y producir un impacto neto positivo en el bienestar del pas.
158. Riesgo. Posibilidad de que los resultados reales sean menores a los resultados esperados,
debido a factores no controlables. Las principales fuentes de riesgo son la inestabilidad
econmica, la vulnerabilidad de los arreglos institucionales y los modelos mentales inadecuados
de la poblacin.
159. Situacin con proyecto. Corresponde a la proyeccin de lo que ocurrir si se lleva a cabo el
proyecto, en las condiciones de vida de la poblacin y el desarrollo del pas.
160. Situacin sin proyecto. Denominada tambin situacin base, corresponde a la proyeccin de
lo que ocurrir a futuro si no se lleva a cabo el proyecto, en las condiciones de vida de la
poblacin y el desarrollo del pas.
161. Sostenibilidad. Durabilidad de los resultados del proyecto despus de concluida la intervencin.
Continuacin de los beneficios de una intervencin por un periodo razonable de tiempo.
162. Supuestos. Hiptesis sobre los factores externos o riesgos que pueden afectar el avance o xito
de una intervencin para el desarrollo.
163. Tratamiento de datos. Fase del proceso de investigacin comercial, posterior a la obtencin de
los datos. Tiene como finalidad convertir los datos en informacin til para la toma de decisiones.
Incluye las actividades de edicin, codificacin y grabacin de los datos, tabulacin de los
resultados y aplicacin de tcnicas de anlisis estadstico.
164. Unidad muestra. Es el elemento de la poblacin objeto de estudio en una en- cuesta del cual se
obtienen los datos. Pueden ser individuos, hogares, empresas, entidades u objetos (productos,
marcas, modelos, etc.).
165. Validez externa. Es la que determina si la relacin causa-efecto encontrada en un experimento
puede ser generalizada.
166. Validez interna. Es una medida de la precisin de un experimento. Determina si la manipulacin
de la variable independiente o tratamiento causa realmente los efectos sobre la variable
dependiente.
167. Variable. Atributo de un objeto de anlisis, que puede expresarse en trminos alfabticos o
numricos. En este ltimo caso, se denominan indicadores. Es una magnitud cuyos valores son
objeto de estudio. Puede referirse a un individuo, grupo de personas, organizacin u objeto. Una
variable puede tomar un valor cualquiera dentro de un conjunto determinado de ellos, llamado
dominio de la variable. La definicin de las variables permite hacer operativos y susceptibles de
medida los problemas bsicos a investigar. La medida de las variables viene determinada por la
escala utilizada.
143
168. Variable binaria. Es una variable dicotmica cuyos valores posibles son O y 1. Una variable
ficticia es una variable binaria.
169. Variable categrica. Denominacin utilizada para identificar a las variables medidas con escalas
no mtricas (nominales y ordinales).
170. Variable continua. Es aquella variable que puede tomar cualquier valor numrico. Para
cualquier par de valores es posible determinar otro entre medio de ellos. Por ejemplo, los
ingresos, expresados en unidades monetarias.
171. Variable criterio. Variable dependiente o a explicar por una o varias variables independientes o
explicativas.
172. Variable cualitativa. Variable que est medida con una escala no mtrica, como la nominal y la
ordinal, Por ejemplo, el sexo (hombre, mujer), la ocupacin (obrero, empleado, profesional, etc.)
y la clase social (alta, media, baja).
173. Variable cuantitativa. Variable que est medida con una escala mtrica, como la intervlica o la
proporcional. Por ejemplo, la edad (medida en aos), el gasto familiar anual en alimentacin
(medido en euros), y la actitud hacia el consumo de bebidas alcohlicas (medido con una escala
tipo Likert de cinco puntos, de mayor a menor grado de acuerdo).
174. Variable dependiente. Variable cuyo comportamiento es explicado por otra u otras
independientes. Se la denomina tambin variable a explicar o criterio y suele representarse por
la letra Y del eje de ordenadas.
175. Variable dicotmica. Aquella que slo puede tomar dos valores, por ejemplo, el sexo
(hombre/mujer), la superacin de un test (pasa/falla) o una creencia (verdadera o falsa). Cuando
los valores posibles son O y 1, suele denominarse variable binaria. Variables dicotmicas son
tambin las variables ficticias.
176. Variable discreta. Variable que slo puede tomar un nmero finito de valores distintos. Es decir,
entre dos valores consecutivos una variable discreta no puede tomar ninguno ms. Por ejemplo,
el nmero de hijos.
177. Variable explicativa. Variable independiente o predictora.
178. Variable ficticia. Variable dicotmica que se obtiene convirtiendo un nivel dado de una variable
cualitativa en una variable binaria, en la que el valor 1 indica la presencia de la caracterstica y el
valor 0 la ausencia de la misma. En general, con una variable cualitativa de n categoras, se
precisan n - 1 variables ficticias, para representar la totalidad de las categoras de la variable
original.
179. Variable independiente. Variable que se su- pone que explica el comportamiento de otra
dependiente. Se la denomina tambin variable explicativa o predictora y se representa por la
letra X del eje de abscisas.
144
180. Variable moderadora. Es aquella que modifica sistemticamente bien la forma o la fuerza de la
relacin entre una variable predictora o explicativa y una variable criterio o dependiente.
181. Variable mixta. Denominacin utilizada para identificar a las variables que comparten
caractersticas de las variables categricas y numricas. Las variables mixtas se miden con
escalas de intervalos iguales, y se les puede aplicar cualquier tcnica estadstica.
182. Variable numrica. Denominacin utilizada para identificar a las variables medidas con escalas
mtricas (intervlica y numrica).
183. Variable predictora. Variable independiente o explicativa que puede explicar o predecir el
comportamiento de otra u otras variables.
Variable tipificada. Si a cada uno de los valores de una variable se le resta su media aritmtica
y se divide el resultado por la desviacin tpica, se obtiene una nueva variable tipificada o
normalizada o estandarizada. Los valores de una variable tipificada son adimensionales, es
decir, independientes de la unidad de medida empleada. Una variable tipificada tiene media
igual a O y desviacin estndar igual a 1.
184. Viabilidad. Compatibilidad de la estrategia de un proyecto con su entorno, que torna probable su
implementacin satisfactoria.
145
BIBLIOGRAFA
AGENCIA NORUEGA DE DESARROLLO, El Enfoque del Marco Lgico. 1990
AGENCIA NORUEGA DE DESARROLLO, Evaluacin de Proyectos de Ayuda al
Desarrollo, 1998.
BID, Evaluacin: Una Herramienta de Gestin para Mejorar el Desempeo de los
Proyectos, marzo 1997.
CEPAL ILPES. Metodologa General de Identificacin, Preparacin y Evaluacin de
Proyectos de Inversin Pblica. rea de Proyectos y Programacin de Inversiones,
Santiago de Chile, 2005.
COHEN, E. y FRANCO R. Evaluacin de Proyectos. ILPES/ONU, Washington, 2003.
DGPM MEF. Gua General de Identificacin, Formulacin y Evaluacin Social de
Proyectos de Inversin Pblica a Nivel de Perfil. Ministerio de Economa y Finanzas,
Lima, 2003.
DEPARTAMENTO NACIONAL DE PLANEACIN. Manual Metodolgico General para la
Identificacin, Preparacin y Evaluacin de Proyectos. Banco de Programas y Proyectos
de Inversin Nacional, Colombia, 2003.
GMEZ, Manuel CMARA, Luis. Orientaciones para la Aplicacin del Enfoque del
Marco Lgico. CIDEAL, Madrid, 2003.
GTZ, Gestin del Ciclo del Proyecto y Planificacin de Proyectos Orientada a
Objetivos, 1990.
JUDY BAKER, Evaluacin del Impacto de los Proyectos en la Pobreza, Banco Mundial,
2000.
Ley N 27293. Lima, 2000. Ley del Sistema Nacional de Inversin Pblica. Ministerio de
Economa y Finanzas
MARTINEZ, E. y ESCUDEY, M. Evaluacin y Decisin Multicriterio, Reflexiones y
Experiencias. Editorial Universidad de Santiago, 1998.
MEDIANERO, David. El Enfoque del Marco Lgico en la Gestin de Proyectos. CINDEH,
Lima, 2002.
MITROFF, Ian. Convierta Problemas en Soluciones Inteligentes. Amat Editorial,
Barcelona, 2000.
NAVARRO, Hugo. Manual para la Evaluacin de Impacto de Proyectos y Programas de
Lucha Contra la Pobreza, ILPES, Santiago de Chile, 2005.
NORAD. The Logical Framework Approach (LFA). NORAD, Oslo, s/f.
OPS, Formatos de Presentacin de Proyectos, 1996.
ORTEGN, Edgar PACHECO, Juan Francisco ROURA, Horacio. Metodologa General
de Identificacin, Preparacin y Evaluacin de Proyectos de Inversin Pblica. ILPES,
Santiago de Chile, 2005.
146
OTEGN, Edgar PACHECO, Juan Francisco PRIETO, Adriana. Metodologa del Marco
Lgico para la planificacin, el seguimiento y evaluacin de proyectos y programas.
ILPES, Santiago de Chile, 2005.
PRACTICAL CONCEPTS INC, Marco Lgico: Una Gua de Gerentes para Disear y
Evaluar Proyectos en Forma Cientfica. Reproducido por el Ministerio de Agricultura,
1986.
PRACTICAL CONCEPTS INC., Sistema de Manejo de Proyectos. Reproducido por el
Ministerio de Agricultura, 1986.
R. HERNNDEZ y otros Metodologa de la Investigacin, Mxico, 1998.
SANN, H. Gua Metodolgica General para la Preparacin y Evaluacin de Proyectos
de Inversin Social. Direccin de Proyectos y Programacin de Inversiones, ILPES, 1995.
UNFPA, Elaboracin de Planes de Trabajo y Cronograma de Actividades, 1999.
147