a-i4237s

1Evaluacin

Gestin Pblica con base en resultados

Herramientas para el diseo e instrumentacin de programas

pblicos de desarrollo rural mediante el enfoque del ciclo del proyecto

Diseo

DiagnsticoEvaluacinMDulO 4

Ejecucin y Monitoreo

Gestin Pblica con base en resultados HErraMiEntas para El DisEO E instruMEntacin DE prOgraMas pblicOs DE DEsarrOllO rural MEDiantE El EnfOquE DEl ciclO DEl prOyEctO

2

iEvaluacin

Gestin Pblica con base en resultados

Herramientas para el diseo e instrumentacin de programas

pblicos de desarrollo rural mediante el enfoque del ciclo del proyecto

ORGANIZ ACIN DE LAS NACIONES UNIDAS PARA LA ALIMENTACIN Y LA AGRICULTURA

S a n t i a g o , 2 0 1 4

Diseo

DiagnsticoEvaluacinMDulO 4

Ejecucin y Monitoreo


ii

las denominaciones empleadas en este producto informativo y la forma en

que aparecen presentados los datos que contiene no implican, por parte de

la Organizacin de las naciones unidas para la alimentacin y la agricultura

(faO), juicio alguno sobre la condicin jurdica o nivel de desarrollo de

pases, territorios, ciudades o zonas, o de sus autoridades, ni respecto de la

delimitacin de sus fronteras o lmites. la mencin de empresas o productos

de fabricantes en particular, estn o no patentados, no implica que la faO los

apruebe o recomiende de preferencia a otros de naturaleza similar que no se

mencionan.

las opiniones expresadas en este producto informativo son las de su(s) autor(es),

y no reflejan necesariamente los puntos de vista o polticas de la faO.

isbn 978-92-5-308662-7

faO, 2015

la faO fomenta el uso, la reproduccin y la difusin del material contenido

en este producto informativo. salvo que se indique lo contrario, se podr copiar,

descargar e imprimir el material con fines de estudio privado, investigacin

y docencia, o para su uso en productos o servicios no comerciales, siempre

que se reconozca de forma adecuada a la faO como la fuente y titular

de los derechos de autor y que ello no implique en modo alguno que la faO

aprueba los puntos de vista, productos o servicios de los usuarios.

todas las solicitudes relativas a la traduccin y los derechos de adaptacin

as como a la reventa y otros derechos de uso comercial debern dirigirse a

www.fao.org/contact-us/licence-request o a [email protected].

los productos de informacin de la faO estn disponibles en el sitio web de la

Organizacin (www.fao.org/publications) y pueden adquirirse mediante solicitud por

correo electrnico a [email protected].

iiiEvaluacin

agradecimientos---------------------------------------------------------------------------------------------------------------------- vii

presentacin ---------------------------------------------------------------------------------------------------------------------------- ix

introduccin ----------------------------------------------------------------------------------------------------------------------------- xi

I. Evaluacin de impactos de un programa o proyecto ------------------------------------------------------ 1

Captulo 1 Evaluacin de impactos de un programa o proyecto ---------------------------------------------------------------- 2

1.1 Evaluacin de resultados e impacto ------------------------------------------------------------------------------ 3

1.2 Mtodos de evaluacin de impacto ------------------------------------------------------------------------------- 3

Captulo 2 Caso prctico: Evaluacin de impactos de un programa de mejoramiento gentico -----------------------11

2.1 Descripcin del programa que se busc evaluar -------------------------------------------------------------11

2.2 Mtodologa de muestreo ------------------------------------------------------------------------------------------11

2.3 Metodologa de evaluacin ----------------------------------------------------------------------------------------13

2.4 Determinantes de la participacin en el programa -----------------------------------------------------------13

2.5 pareo y estimacin de impactos ----------------------------------------------------------------------------------15

2.6 anlisis de resultados ----------------------------------------------------------------------------------------------17

Herramienta --------------------------------------------------------------------------------------------------------------------------------19

cuestionario para la evaluacin de impactos del programa de Mejoramiento gentico ----------------------------19

f I G u r a s

Figura 1. ciclo de vida del proyecto: Evaluacin --------------------------------------------------------------------------- 2

Figura 2. soporte comn para el pareo -------------------------------------------------------------------------------------- 5

Figura 3. rea de soporte comn --------------------------------------------------------------------------------------------15

ndice


iv

C u a D r o s

Cuadro 1. tipos de evaluacin a lo largo del ciclo del proyecto ---------------------------------------------------------- 3

Cuadro 2. composicin de la muestra para el levantamiento de datos ------------------------------------------------12

Cuadro 3. impacto promedio anual del programa de Mejoramiento gentico ganadero sobre los beneficiarios con tres distintos mtodos de pareo para indicadores seleccionados -------------------16

Cuadro 4. sesgo del impacto estimado como porcentaje del error estndar -----------------------------------------17

vEvaluacin

s I G l a s

fao Organizacin de las naciones unidas para la alimentacin y la agricultura

MMl Matriz del Marco lgico

oI Otoo-invierno

PMGG Metodologa del Marco lgico

PPP pareo de la propensin de participacin

PV primavera-verano

saGarPa secretara de agricultura, ganadera, Desarrollo rural, pesca y alimentacin

ZsC Zona de soporte comn


vi

viiEvaluacin

Agradecimientos

por ms de diez aos, la Organizacin de las naciones unidas para la alimentacin y la agricultura (faO), a travs

de proyectos continuos de evaluacin y anlisis de polticas rurales, ha brindado asistencia tcnica a la secretara

de agricultura, ganadera, Desarrollo rural, pesca y alimentacin (sagarpa) de Mxico, en materia de evaluacin

de programas de fomento productivo agropecuario, pesquero, acucola y de desarrollo rural. En el marco de esta

cooperacin, se han desarrollado de manera conjunta herramientas metodolgicas para la gestin de las distintas fases

de un programa: diagnstico sectorial, diseo, implementacin y evaluacin. Este documento recoge las experiencias

obtenidas a raz de los proyectos para que puedan ser replicadas o referenciadas por actores vinculados a la gerencia

de programas o proyectos con caractersticas similares.

En el desarrollo de los proyectos destacaron las contribuciones de los siguientes funcionarios de la sagarpa: arturo

Enciso serrano, Ernesto Ezequiel abraham tarrab, Horacio santoyo, Jos de Jess romo santos, Jos correa,

Juan carlos vargas Moreno, luca rosas Ortz, Miguel ngel lpez arregun, Omar anaya Mandujano, alan Kristian

Hernndez, pablo Hernndez alarcn; patricia valtierra carrillo, claudia gabriela valadez romero, roberto cedeo,

rogelio carmona len; Eduardo benitez pauln; Jos Merced tulais lpez y silvia urbina Hinojosa.

una mencin especial para vernica gutirrez Macas, Jaime clemente Hernndez y renato Olvera nevarez (in

memoriam).

la direccin y coordinacin tcnica de esta publicacin estuvo a cargo de alfredo gonzlez cambero, quien dirigiera el

proyecto entre 2007 y 2012, y salomn salcedo baca, lder tcnico de los proyectos y Oficial principal de polticas de

la Oficina regional para amrica latina y el caribe de la faO. En su elaboracin participaron ana Harumi Hayashida

carrillo e ina salas casasola, ambas consultoras de la faO. para la sistematizacin de cada uno de los cuatro mdulos

que conforman este compendio de herramientas se cont con la colaboracin de integrantes de los proyectos, quienes

aportaron sus conocimientos y experiencias en cada una de las fases que comprende un proyecto. En particular, se

hace un reconocimiento a isabel Madrid prez, ruth Mendoza Ortinez, Mariana Ortega ramrez y alejandro Dvila

topete quienes colaboraron en la construccin del rbol de alternativas para la sustentabilidad de los recursos naturales.

finalmente, se agradece la direccin operacional de los proyectos a la Oficina de la representacin de la faO en

Mxico.


viii

ixEvaluacin

Presentacin

a partir de la Mesa redonda de Marrakech en 2004, la comunidad internacional respald cinco compromisos

especficos relacionados para mejorar la eficacia de la ayuda para el desarrollo1, sintetizados en el concepto de gestin

con base en resultados. Esto implica que desde el inicio de cualquier iniciativa, proyecto o programa se tomen en

cuenta los resultados esperados y la forma de lograrlos. asimismo, la implementacin, el monitoreo de los avances,

as como la posterior evaluacin deben considerar cules son los resultados esperados que se plantearon al inicio de

dicho proceso.

Existe, por tanto, un gran reto de los pases en desarrollo para operar desde una nueva visin. Esto significa romper

con viejas costumbres y patrones en la forma de gestionar el ciclo del proyecto, cambiando de un enfoque de atencin

a la demanda a un proceso de planificacin para el logro de resultados concretos y anticipados desde un inicio. si bien

no existe un camino nico, ya que cada pas, cada sector y cada proyecto presentan situaciones particulares, existen

experiencias y buenas prcticas que pueden ser sistematizadas y compartidas.

la elaboracin de un conjunto de herramientas para la gestin pblica con base en resultados responde a la necesidad

de romper con esquemas inerciales de operacin de los programas pblicos de desarrollo en la mayora de los pases,

los cuales no contemplan la eficiencia y eficacia en el logro de resultados. la ausencia de dicho enfoque implica que

se gasten recursos sustanciales sin un horizonte de trmino para la solucin de los problemas que las intervenciones

pblicas pretenden resolver.

El presente documento recoge las experiencias obtenidas a raz del proyecto de Evaluacin y anlisis de polticas

rurales llevado a cabo por la Organizacin de las naciones unidas para la alimentacin y la agricultura (faO) y

la secretara de agricultura, ganadera, Desarrollo rural, pesca y alimentacin (sagarpa) de Mxico durante la

implementacin del enfoque de gestin con base en resultados en sus diferentes programas. al respecto, el consejo

nacional de Evaluacin de la poltica de Desarrollo social de Mxico ha otorgado, en cuatro ocasiones, reconocimiento

a la sagarpa por sus buenas prcticas en el desarrollo, ejecucin y evaluacin de polticas pblicas en el sector agro-

rural desde 2007, dando un importante paso para mejorar sus programas y orientarlos hacia el buen desempeo e

impacto en el sector.

En este sentido, el documento gestin pblica con base en resultados: Herramientas para el diseo e instrumentacin

de programas pblicos de desarrollo rural mediante el enfoque del ciclo del proyecto incluye las cuatros fases del ciclo

de vida de un proyecto o programa. El primer mdulo comprende las herramientas metodolgicas para llevar a cabo

un diagnstico sectorial, el cual se constituye en el primer paso que justifica la intervencin al permitir la identificacin

de un problema, el dimensionamiento del mismo, la identificacin y cuantificacin de la poblacin o rea potencial, y

la estratificacin de la poblacin potencial.

El segundo mdulo muestra el procedimiento y las herramientas metodolgicas para el diseo de un programa o

proyecto, el cual ser sintetizado en la Matriz del Marco lgico. En este mdulo se muestra la metodologa para llevar a

cabo el anlisis de objetivos, el anlisis de alternativas, la construccin de indicadores de desempeo, la identificacin

1 los principios de la gestin con base en resultados acordados en 2004 durante la segunda Mesa redonda sobre gestin para resultados de Desarrollo son: 1) centrar el dilogo en los resultados en todas las fases del proceso de desarrollo; 2) alinear la programacin, el monitoreo y la evaluacin con los resultados; 3) mantener la medicin y la informacin sencillas; 4) gestionar para, no por, resultados; y 5) usar la informacin de resultados para aprender y para la toma de decisiones.


x

de los medios de verificacin, la identificacin de los riesgos y supuestos, y el levantamiento de informacin contrafactual

para el desarrollo de la lnea base de los indicadores de desempeo del programa o proyecto.

El tercer mdulo brinda los elementos metodolgicos para la implementacin de un programa o proyecto que, bajo

el enfoque de resultados, debe incluir un sistema de monitoreo y evaluacin acorde con su diseo a travs de la

presupuestacin, la reglamentacin, la evaluacin del diseo en su primer periodo de ejecucin, la evaluacin de

procesos y el monitoreo del programa o proyecto.

El cuarto mdulo se compone de los elementos metodolgicos para evaluar los resultados arrojados por el programa

o proyecto como efecto de su operacin a travs del diseo de la evaluacin de resultados e impactos. Esto es, se

presenta la metodologa para llevar a cabo una evaluacin de impacto de un programa o proyecto.

cada mdulo se estructura con captulos que incluyen una parte terica, un captulo sobre la experiencia del proyecto

referido, y se complementa con la sistematizacin de las herramientas metodolgicas para una buena comprensin de

los mdulos.

salomn salcedo Baca alfredo Gonzlez Cambero

Oficial principal de polticas Director del proyecto (2007-2012)

xiEvaluacin

Introduccin

la evaluacin es el elemento que cierra el crculo virtuoso del ciclo del proyecto o programa. Esta comprende la medicin

y comparacin de los impactos de las intervenciones con respecto a los resultados esperados de las mismas; es decir,

lo que se plane y lo que se logr, y cmo se logr. En ese sentido, la evaluacin permite establecer si se obtuvo un

cambio en la situacin que se pretenda modificar o el problema que se pretenda resolver con la implementacin del

proyecto o programa, as como la magnitud de dicho cambio. Es decir, la evaluacin de impactos permite determinar

si un programa ha tenido los efectos deseados sobre la poblacin objetivo y si dichos efectos son atribuibles a las

intervenciones del programa. la evaluacin de impactos tambin puede explorar consecuencias no intencionales, ya

sean positivas o negativas, sobre los beneficiarios.

la medicin de los resultados e impactos, efecto de las intervenciones de la poltica pblica, es de suma importancia

para contar con elementos de juicio sobre la efectividad de stas. por lo tanto, el Mdulo de Evaluacin del conjunto

integrado de herramientas comprende, en el captulo 1, los aspectos conceptuales de la evaluacin de impactos y, en el

captulo 2, se presenta un caso aplicado de evaluacin de impactos. finalmente, al final del Mdulo se presenta como

herramienta el cuestionario para el levantamiento de informacin utilizado en el caso prctico.


xii

1Evaluacin

Evaluacin de impactos de un programa oproyecto4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4

4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4 4

I


2

fIGura 1. ciclO DE viDa DEl prOyEctO: EValuaCIn

3. Ejecucin y Monitoreo

2. Diseo

1. Diagnstico4. Evaluacin

Captulo 1Evaluacin de impactos de un programa o proyecto

El ciclo de vida de un programa o proyecto culmina con la evaluacin final del mismo (figura 1), donde se valoran los resultados alcanzados y el impacto que ha tenido la intervencin. la evaluacin de impactos tiene por objeto determinar si el programa o proyecto tuvo o est teniendo los efectos deseados sobre los individuos, los hogares o las instancias sobre las que se pretenda revertir una situacin negativa identificada previamente como problema de desarrollo, as como si dichos efectos son atribuibles a las intervenciones representadas por dicho programa o proyecto. En particular, la evaluacin de impacto permite medir los efectos que tuvo el programa o proyecto de acuerdo al fin que desde su diseo se estableciera. a diferencia del monitoreo de un programa o proyecto que reporta el valor de los indicadores, la evaluacin permite saber a qu se debe dicho valor. En ese sentido, la evaluacin es una valoracin sistmica del programa o proyecto, de manera que se pueda comprender cmo los elementos de ste, desde el diagnstico que fue la base para su diseo hasta la ejecucin y monitoreo del mismo, tuvieron como efecto los resultados e impacto encontrados.

por lo tanto, como parte del conjunto de herramientas para la gestin con base en resultados de un programa o proyecto, en este captulo se presentan aspectos conceptuales para la evaluacin de impacto..

3Evaluacin

1.1 Evaluacin de resultados e impacto

Desde el diseo de un programa o proyecto, se parte de la existencia de un problema de desarrollo que se desea resolver; es decir, de una situacin negativa susceptible de ser revertida mediante la intervencin. la evaluacin de resultados e impactos, por lo tanto, establece en qu medida la intervencin logr alcanzar su cometido en cuanto al cambio buscado sobre la situacin de problema identificada en el diagnstico; es decir, la diferencia existente entre el valor de las variables indicativas de la situacin inicial y el valor de dichos indicadores observados en la situacin final atribuibles al programa o proyecto. En ese sentido, la evaluacin responde preguntas tales como cul habra sido el desempeo de los individuos que se beneficiaron del programa en la ausencia del mismo? cul habra sido el desempeo de aqullos que no se beneficiaron del programa de haber sido expuestos al programa? la intervencin est produciendo los beneficios previstos y cul fue el efecto general en la poblacin objetivo? asimismo, la evaluacin de impactos trata de medir los resultados de la intervencin de un programa o proyecto aislando a sta de otros posibles factores.

la evaluacin de impacto, a diferencia de la evaluacin de diseo y procesos, se realiza en un estado ya avanzado o final de la ejecucin del programa o proyecto. En ese sentido, la evaluacin de la gestin (diseo, procesos e intermedia de desempeo), tal como se vio en el Mdulo iii, corresponde a la etapa de ejecucin y monitoreo, y no propiamente a la etapa de evaluacin, ya que el objetivo de stas es retroalimentar la gestin del programa o proyecto (cuadro 1)

Tipo de Evaluacin

Tiempo de realizacin Propsito

Diseoantes o al inicio de la ejecucin del programa o proyecto.

retroalimenta la gestin en lo que concierne a la consistencia interna del programa o proyecto, en especfico sobre la relacin horizontal y la relacin vertical de la Matriz del Marco lgico del programa o proyecto.

procesosDurante el primer periodo de operacin.

retroalimenta la gestin al analizar si el programa lleva a cabo sus procesos operativos de manera eficiente y eficaz para el logro de los resultados buscados.

impactoDespus de un tiempo razonable de maduracin y/o al final del proyecto o programa.

Mide y analiza los resultados e impacto alcanzados y atribuibles a la intervencin.

1.2 Mtodos de evaluacin de impacto

En trminos generales, los mtodos cuantitativos para evaluar impactos pueden dividirse en dos grupos: experimental y cuasi experimental. los mtodos experimentales permiten eliminar el efecto del sesgo de seleccin sobre los resultados del programa o proyecto debido a que la asignacin de los beneficios (o tratamientos) del programa o proyecto se llevan a cabo de manera aleatoria sobre la poblacin potencial de tal forma que las unidades no tratadas constituyen un grupo de control contra quien contrastar la situacin de los beneficiarios o unidades tratadas. sin embargo, la asignacin aleatoria de los beneficios de un programa o proyecto no es por lo general una prctica

CuaDro 1. tipOs DE Evaluacin a lO largO DEl ciclO DEl prOyEctO


4

comn debido, entre otras cosas, a que puede resultar inviable2. Dado entonces que los mtodos experimentales son por lo general la excepcin, los mtodos cuasiexperimentales permiten conformar un grupo de comparacin a partir de los no beneficiarios (unidades no tratadas) del programa o proyecto con quienes se compara a las unidades de anlisis de la poblacin beneficiaria. considerando lo anterior, a continuacin se presenta uno de los principales mtodos cuasiexperimentales.

1.2.1 Mtodo de la propensin de participacincomo ya se mencionaba previamente, los mtodos cuasi-experimentales pueden ser usados para realizar una evaluacin de impactos cuando no es posible construir grupos de tratamiento y control de manera aleatoria. Mediante estas tcnicas, los grupos de comparacin se forman con base en ciertas covariantes que son comunes a las de los integrantes del grupo de tratamiento o de beneficiarios. una vez formados ambos grupos, los beneficiarios se comparan con sus respectivos pares en el conjunto de los no beneficiarios que, habiendo sido elegibles para el programa o proyecto, por alguna razn no inherente e ellos no tuvieron participacin en dicho programa o proyecto. Entre otras de las ventajas de esta tcnica es que mediante ella es posible hacer frente a la ausencia de una lnea de base del programa o proyecto.

tpicamente, los mtodos de pareo parean participantes y no participantes del programa o proyecto a partir de caractersticas observables similares entre ellos y el impacto del programa o proyecto se estima por la diferencia en el valor del indicador del fin del programa; como por ejemplo, el ingreso, el nivel de educacin, etc. sin embargo, dado el nmero de caractersticas observables requeridas, establecer grupos de comparacin estadsticamente equivalentes podra ser inviable3.

la dificultad anterior se soluciona utilizando el mtodo del pareo de la propensin a participar (ppp) o pareo de la puntuacin de la propensin, mediante el cual se parea cada beneficiario con un no beneficiario tomando como variable de comparacin la probabilidad de participar en el programa o proyecto. considerando que el tratamiento es independiente de los resultados potenciales de la intervencin dado el vector de covariantes, entonces tambin es el caso que una funcin (de dimensin menor) de dicho vector sea independiente. Es decir, en lugar de parear el conjunto de covariantes se parea una sola variable: la probabilidad condicional del tratamiento, dadas las covariantes.

la propensin a participar se estima economtricamente para cada una de las unidades de anlisis, tratadas y no tratadas, mediante un modelo logit, con el cual se obtienen medidas de comparabilidad de las unidades pertenecientes al grupo de comparacin con respecto a las unidades del grupo de tratamiento en trminos de la probabilidad de acceso al programa o proyecto, para lo cual el modelo incluye como variable dependiente a una variable binaria a la que le corresponde el valor de 1 si la unidad fue beneficiaria del tratamiento y el valor de 0 si no lo fue. como variables independientes se tienen a las listadas en el vector de covariantes.

donde p(x) es la probabilidad de recibir los beneficios del programa o proyecto T dado el vector de covariantes X y P es el operador funcional de probabilidad. Esta funcin es tambin la esperanza condicionada de T dado X:

2 cuando un beneficiario potencial es excluido de los beneficios de un programa o proyecto, siendo elegible para ello, puede resultar no tico, amn de las consecuencias polticas que ello pueda tener.

3 Este procedimiento se vuelve inviable ya que se reduce el nmero de candidatos no beneficiarios para pareo con aqullos que son beneficiarios. por ejemplo, una variable observable sera el sexo, por lo que el grupo de no beneficiarios quedara reducido prcticamente a la mitad. Dado que parear por sexo no sera suficiente para establecer grupos estadsticamente significativos, se requerira de otra variable que haga a los grupos ms especficos para efectos de comparacin, por ejemplo, la educacin. al incorporar esta segunda variable, el grupo de no beneficiarios se reduce an ms. al repetir este procedimiento de manera sucesiva se podra agotar el nmero de posibles candidatos no beneficiarios antes de que se alcance la equivalencia estadstica entre beneficiarios y no beneficiarios.

p(x)=P(T=1|X=x),

E[T |X=x]=1P(T=1|X=x)+0 P(T= 0|X=x)=P(T=1|X=x)=p(x)

5Evaluacin

De esta manera, las observaciones del grupo de tratamiento y las del grupo de comparacin seleccionadas para tener los mismos valores de p(x) tendrn la misma distribucin de X; es decir, T y X son condicionalmente independientes dada p(x). En otras palabras, dado p(x), X deber tener la misma distribucin tanto en el grupo de tratamiento como en el grupo de comparacin, por lo que el pareo semeja un tratamiento aleatorio al balancear la distribucin de las covariantes en el grupo de tratamiento y en el de comparacin.

por lo tanto, una de las maneras de proceder es formar los grupos de beneficiarios y no beneficiarios con base en la probabilidad de que un determinado individuo se encuentre en el grupo de comparacin o en el de tratamiento pues dicha probabilidad depende de las caractersticas de los individuos, observables y no observables, de participar en el programa o proyecto.

una vez estimada la propensin de participacin para cada unidad de anlisis, el paso siguiente es determinar la zona de soporte comn, la cual est dada por el empalme de la distribucin de p(x) de las unidades del grupo de tratamiento y la distribucin de las unidades de grupo de comparacin (figura 2). En otras palabras, se trata de la regin en la que las propensiones a participar estimadas para las unidades de anlisis de un grupo se traslapan con las propensiones de las unidades del otro grupo.

una vez establecida la zona de soporte comn, se desechan todas aquellas observaciones de las unidades para las cuales la propensin de participacin es menor al mnimo del puntaje que presentan las unidades tratadas y mayor al mximo del puntaje que obtuvieron las unidades no tratadas, de manera que se eliminan todas las observaciones, tanto de unidades tratadas como no tratadas, que caen fuera de la zona de soporte comn.

cuando ya se ha determinado la zona de soporte comn, el paso siguiente es realizar el pareo entre unidades beneficiarias y unidades no beneficiarias a partir de las unidades que caen dentro de la zona de empalme o traslape (soporte comn). El pareo se hace, entonces, seleccionando individuos que presentan probabilidad de haber pertenecido al grupo de tratamiento similar a la de aqullos que de hecho lo fueron. Esto es lo que se conoce como el pareo de la puntuacin de la propensin a participar. Es decir, el pareo de los individuos con base en las caractersticas observables y no

Densidad de probabilidad

Puntuacin de la propensin

Ps Mnimo Ps Mximo

Grupo de no beneficiarios

Grupo de no beneficiarios

Zona de pareo

Regin de soporte comn

0

fIGura 2. ZOna DE sOpOrtE cOMn para El parEO


6

observables se hace de manera indirecta mediante el pareo de la probabilidad o propensin a participar en el programa o proyecto, lo cual es posible bajo el supuesto de que los individuos en el grupo de tratamiento y aqullos en el grupo de comparacin tienen, en principio, la misma distribucin de las variables de pareo4, tanto en lo que se refiere a las observables como a las no observables.

Debe notarse, por lo tanto, que las estimaciones de impactos mediante el pareo sern confiables si a) el grupo de participantes y el de comparacin tienen la misma distribucin de las caractersticas no observables5, b) las caractersticas observadas tienen la misma distribucin en ambos grupos, c) el mismo instrumento para la obtencin de informacin es aplicado tanto a beneficiarios como a no beneficiarios, d) los beneficiarios y los no beneficiarios pertenecen al mismo entorno. En la ausencia de estas condiciones, la estimacin de los impactos sera sesgada6.

para realizar el pareo de la propensin a participar (ppp) es necesario contar con dos muestras, una correspondiente a los participantes o beneficiarios y otra correspondiente a los no participantes o no beneficiarios. De la muestra de los no participantes se extrae una submuestra que contenga al grupo de comparacin que permita identificar a los vecinos ms cercanos de los participantes. En este caso, las variables que definen a los vecinos ms cercanos son las covariantes X.

una vez obtenidas ambas muestras, la estimacin del efecto del programa o proyecto se lleva a cabo mediante la suma de las diferencias:

donde Yi (1) es el valor observado en el indicador del impacto que se busca mediante la implementacin del programa o proyecto y Yi (0) el valor del mismo indicador pero en ausencia del tratamiento que representa el programa o proyecto.

los mtodos cuasiexperimentales, como ya se mencionaba anteriormente, tienen el inconveniente del cuasi. Es decir, al no ser asignaciones aleatorias de los tratamientos y mantener un grupo de control tambin igualmente aleatorio, se presenta el problema del sesgo de seleccin en la evaluacin de impactos. Este sesgo de seleccin est dado por las caractersticas no observables7 que afecten la decisin de participar en el programa o proyecto. por ejemplo, los participantes del programa pueden ser los individuos que tienen la mayor posibilidad de beneficiarse de un programa particular y por lo tanto son motivados para participar en las actividades del programa. as, los cambios en el indicador de impactos observados entre estos grupos seleccionados de manera no aleatoria indicaran el impacto del programa en participantes motivados, pero podra no ser el reflejo del impacto del programa sobre el promedio de la poblacin objetivo. El sesgo de seleccin podra tambin mostrar efectos a la inversa; es decir, que los individuos pueden optar por participar en el programa o proyecto debido a un sentimiento de vulnerabilidad, situacin en la cual los efectos del programa no muestran los resultados que se habran obtenido en ausencia de dicho sesgo. Debe tomarse nota que el sesgo puede provenir tambin del hecho que los beneficiarios se encuentren en ambientes geogrficos distintos.

El problema del sesgo de seleccin se presenta, por lo tanto, debido a datos faltantes sobre los factores comunes que afectan la participacin en el programa o proyecto y los resultados que de ello se obtienen. Es importante notar que, en contraste con el problema estndar de variables omitidas en estimaciones economtricas, el problema de sesgo de seleccin se deriva de la falta de datos en alguna de las variables dependientes del anlisis. Es decir, no faltan variables, sino observaciones. El sesgo de seleccin tambin est presente en las asignaciones aleatorias; sin embargo, las diferencias con respecto a la media se cancelan entre s dada la aleatoriedad de las mismas.

4 rosenbaum paul, rubin Donald. 1985. constructing control group using Multivariate Matched sampling Methods that incorporate the propensity score. the american statistician, vol. 39, no. 1.

5 cuando dicha distribucin es diferente se tiene entonces un problema de seleccin.

6 Jalan Jyotsna y ravaillon Martn. 1998. income gains from Workfare: Estimates for argentinas trabaJar program. Washington, D.c. Development research group. banco Mundial.

7 tales como motivacin, capacidad organizativa, capacidad empresarial; o bien, pesimismo, vulnerabilidad, etc.

7Evaluacin

En diseos cuasi-experimentales existen diversas tcnicas economtricas que se utilizan para modelar los procesos de la participacin en un programa o proyecto y para llegar una estimacin del impacto de la intervencin. El principio central es comparar a los participantes con los no participantes del programa o proyecto.

Es de suma importancia mencionar que no hay mtodo perfecto, por lo que es deseable triangular los mtodos de evaluacin y hacer un anlisis de los resultados a la luz de un modelo terico sobre los resultados esperados y de la teora del cambio. algunos de los mtodos posibles para triangular son los siguientes:

i) pareo simple de la puntuacin de la propensin del vecino ms cercano. pareo utilizando los n vecinos con la puntuacin de la propensin ms cercanos, en donde n=1 define el pareo del vecino ms cercano, el cual es el estimador convencional. tambin se consideran versiones del estimador del vecino ms cercano que promedian los resultados de los cinco o diez vecinos ms cercanos.

ii) pareo de Mahalanobis dentro de calibradores de propensin de la puntuacin. En este mtodo primero se restringe el conjunto de posibles pares a individuos que se encuentren dentro de un rango especfico de la puntuacin de la propensin y, posteriormente, dentro de dicho rango se escoge al individuo ms cercano utilizando la mtrica de Mahalanobis como pareo. si no existiera un individuo dentro de la banda, se selecciona a aqul con la puntuacin de la propensin ms cercana como pareo. Heckman, ichimura y todd

(1997)8 utilizan un ancho de calibre igual a

, donde son las varianzas de la

puntuacin de la propensin dentro de los grupos de tratamiento y de comparacin. tambin prueban anchos de calibre iguales a la distancia de la n-sima puntuacin de la propensin ms cercana, n=5 y n=10. anchos de calibre variables garantizan un conjunto de pareos potenciales dentro de un rango.

iii) correspondencia de puntuacin de la propensin lineal local. Esta forma un promedio ponderado sobre los resultados del grupo de comparacin utilizando ponderadores de regresiones lineales locales con anchos de banda iguales a 0.04 y 0.06.

iv) Distancia de Mahalanobis suavizada de pareo entre calibradores. se utilizan anchos de calibres de n=5 y n=10, con lo que se limita el conjunto de posibles pares. posteriormente, se construye una estimacin

ponderada promedio de utilizando regresiones lineales locales y suavizando la mtrica de Mahalanobis. un ancho de banda igual a la distancia del n-simo ms cercano de acuerdo a la mtrica

de Mahalanobis asegura que todas las observaciones dentro del ancho del calibrador sean utilizadas en la suavizacin.

v) pareo ajustado por regresiones locales lineales. utiliza datos de individuos que no solicitaron entrar al programa (D=0):

,

donde es estimada de manera no paramtrica por regresiones locales lineales. los resultados de los participantes ajustados por X, son pareados con los resultados ajustados de los no participantes, . los ponderadores de regresiones lineales locales son utilizados para construir los resultados pareados.

adems de los mtodos cuantitativos, tambin se utilizan metodologas cualitativas, de forma complementaria, para evaluar el impacto de un programa o proyecto. Estas tcnicas proporcionan informacin sobre cmo perciben los beneficiarios el proyecto y cmo se ven afectados por ste. se utilizan en conjunto con las tcnicas cuantitativas para triangular la informacin y darle mayor solidez y sentido a los resultados.

algunos de los mtodos cualitativos son: Evaluacin rural participativa, conjunto de tcnicas que ponen nfasis en el conocimiento local y motiva a las personas a realizar sus propios anlisis y planeaciones; sarar9, enfoque participativo

8 Heckman, J., ichimura, H., todd, p. 1997. Matching as an econometric evaluation estimator: Evidence from evaluating a job training programme. review of Economic studies 64(4).

9 sarar es un acrnimo que resulta de las iniciales en ingls de cuatro cualidades humanas: self-esteem (autoestima), associative strength (fuerza asociativa), resourcefulness (recursos), action planning (planificacin de la accin) y responsibility for follow through (responsabilidad del seguimiento).


8

a travs del cual se fortalecen las capacidades de facilitadores locales en la construccin de conocimiento, evaluacin, priorizacin, planeacin y organizacin; consulta sistemtica del cliente, mtodo grupal utilizado para fortalecer la comunicacin entre beneficiarios y otros agentes de gobierno, financiadores, etc.; y la Evaluacin social, investigacin sistemtica del proceso social y factores que afectan el impacto y los resultados de desarrollo.

El uso exclusivo de mtodos cualitativos en una evaluacin de impacto no es suficiente, ya que el anlisis carece de un grupo de comparacin y de la solidez estadstica como la que aporta un diseo experimental o cuasi experimental.

Cmo elaborar una evaluacin de impacto

antes de llevar a cabo una evaluacin de impactos es pertinente saber si sta es factible de realizar, es decir, tomar en cuenta el tiempo de maduracin de la intervencin, as como el costo que implica llevarla a cabo. por lo tanto, es recomendable tener en consideracin los siguientes puntos:

Debido a la complejidad y el costo que conlleva realizar una evaluacin de impacto es preciso determinar si es necesario realizar una evaluacin de este tipo y si es factible de llevarla a cabo.

para efectos metodolgicos, es necesario tener en cuenta si el programa o proyecto focaliza sobre un grupo de la poblacin potencial o si es de cobertura universal.

Estado de avance del programa o proyecto de manera que sea posible valorar y medir sus resultados.

Disponibilidad de informacin y tipo de sta sobre los beneficiarios y no beneficiarios del programa o proyecto.

Disponibilidad de recursos financieros y humanos para realizar la evaluacin.

al considerar los puntos antes mencionados, y partiendo de la premisa que el programa o proyecto se ajusta a las buenas prcticas de diseo e implementacin referidas en Mdulos previos, es conveniente formularse preguntas tales como:

se cuenta con una lnea de base para el programa o proyecto?

la cobertura del programa o proyecto fue tal que es posible contar con una poblacin de tratamiento o factual?

se cuenta con una poblacin de no beneficiarios del programa o proyectos, pero igualmente elegibles, que haga posible establecerla como poblacin de comparacin, de control o contrafactual?

se cuenta con informacin socioeconmica de beneficiarios y no beneficiarios referida al inicio y trmino del programa o proyecto para efectos de pareo y comparacin?

la seleccin de los beneficiarios fue aleatoria o por autoseleccin?

se cuenta con informacin del monitoreo de los indicadores del programa o proyecto y es sta accesible?

se cuenta con informacin, y es sta accesible, sobre los resultados de evaluaciones previas, tales como diseo, procesos, etc.?

cules son los montos y las fuentes para el financiamiento de la evaluacin?

una vez que se ha decidido la factibilidad de la evaluacin de impactos, se procede al diseo de sta, para lo cual es importante establecer el objetivo de realizarla, los temas de evaluacin que comprende, el enfoque de evaluacin que se adoptar, la metodologa que se seguir para la evaluacin, as como las fuentes de informacin que se utilizarn.

9Evaluacin

Objetivos de la evaluacin

El objetivo general de la evaluacin tiene que ver con proveer informacin a las partes interesadas sobre el logro o no del fin del programa o proyecto, no slo en trminos de lo alcanzado, sino tambin en trminos de las razones por las cuales se alcanz o no dicho fin. adems, el objetivo de la evaluacin es aprender sobre la causalidad de los resultados, por lo que ello debe quedar tambin claro al establecer el objetivo de la evaluacin.

En ese sentido, el uso del Marco lgico del programa o proyecto resulta de utilidad para establecer los objetivos de la evaluacin, pues es en donde se establecen el propsito y fin del programa o proyecto. tambin, dado que la evaluacin presenta informacin sistematizada sobre los resultados e impactos, ello permite aprender ms sobre el programa o proyecto por lo que resulta conveniente incluir objetivos especficos al respecto. Otros objetivos especficos que conviene plantear para la evaluacin son aqullos relacionados con la rendicin de cuentas a las partes interesadas.

los objetivos de evaluacin, claramente establecidos, permiten tambin definir la metodologa aplicable de evaluacin, as como las fuentes idneas de informacin. con respecto a esto ltimo, sin embargo, en el Marco lgico del programa o proyecto se especifican ya los medios de verificacin para cada nivel del resumen narrativo.

Temas de evaluacin

si bien los temas de evaluacin estn especificados o son inferibles de la MMl del programa o proyecto al nivel de propsito y fin, es conveniente especificar qu es lo que se estar evaluando en trminos de los resultados e impactos, por ejemplo, si existe inters en profundizar sobre la causalidad de los impactos o bien referir los impactos a un segmento especfico de la poblacin objetivo. tambin, es posible que el programa o proyecto haya tenido resultados no intencionales, ya sean estos positivos o negativos, lo cual tambin correspondera a uno de los temas de evaluacin a considerar.

En ocasiones las partes interesadas requieren de informacin ms detallada a nivel de componentes pues ello enriquece la comprensin del programa o proyecto, por lo que en dichos casos habra que ampliar el espectro de temas para incluir este nivel ms especfico de resultados.

En todo caso, el objetivo de evaluacin debe guiar la especificacin de los temas de evaluacin a considerar.

Enfoque de la evaluacin

una vez especificados y delimitados los temas de evaluacin, el paso siguiente es establecer cmo se enfocar la evaluacin. al establecer el enfoque de la evaluacin es conveniente tomar en cuenta quines son los usuarios de dicha evaluacin, de manera que sta pueda acomodarse a las necesidades de dicha audiencia. por ejemplo, si los usuarios son los tomadores de decisiones, la evaluacin habr de contener elementos de juicio para la toma de decisiones; si la evaluacin tiene por objeto la rendicin de cuentas, entonces sta habr de proveer informacin comprensible para las partes interesadas.

como parte de enfoque de la evaluacin se establece tambin si el mtodo para llevarla a cabo ser cuantitativo, cualitativo o mtodos mixtos.

Metodologa de evaluacin

El establecimiento claro de los objetivos, los temas y el enfoque de la evaluacin permiten establecer con claridad la metodologa a utilizar, para lo cual tambin es importante el conocimiento pleno del programa o proyecto y sus


10

respectivos objetivos. la informacin de que se dispone es tambin un criterio importante al momento de seleccionar la metodologa de evaluacin. En ese sentido, la concurrencia de estos criterios permitir determinar el mtodo, ya sea experimental o cuasiexperimental. En el caso de los mtodos cuasiexperimentales, la disponibilidad de datos para llevar a cabo la evaluacin es un determinante en la seleccin del mtodo cuasiexperimental, entre los que se encuentran los mtodos de pareo, los de diferencias en diferencias, los de variables instrumentales y el de las comparaciones reflexivas, entre los ms comunes.

Fuentes de informacin

las fuentes de informacin son aqullas que se especificaron en los medios de verificacin de la MMl del programa o proyecto, las cuales por lo general incluyen lneas de base, encuestas, censos e informacin documental del programa, de las cuales se puede obtener datos para el clculo de los indicadores, tambin especificados en la Matriz del Marco lgico del programa.

la recopilacin y anlisis de datos constituye una de las actividades ms sustantivas de la evaluacin de impactos. a este respecto, es importante asegurarse que al menos se cuenta con la informacin pertinente y suficiente para los indicadores de propsito.

asimismo, al tratarse de mtodos cuasiexperimentales de evaluacin, es importante contar con datos sobre variables que influyen en la participacin o no en el programa o proyecto siendo evaluado.

pa r a M s i n f O r M a c i n :

Baker Judy (2000). Evaluacin de impacto de los proyectos de desarrollo en la pobreza. Manual para profesionales. banco Mundial. Washington, D.c.

Bryson, alex, richard Dorsett y susan Purdon (2002). The use of propensity score matching in the evaluation of active labour market policies. Working paper 4. policy studies institute and national centre for social research.

Campbell, D. T. y stanley, J. C. (1963). Experimental and quasi-experimental designs for research. chicago: rand Mcnally.

Cook Thomas, Campbell Donald (1979). Quasi-Expermientation. Design & analysis Issues for field settings., ed. Houghton Mifflin company.

Dehejia, r. y Wahba, s. (2002). Propensity score matching methods for non-experimental causal studies. review of Economics and statistics 84(1)

raajeev, H. Dehejia y sadek Wahba (2002). Propensity score matching methods for non-experimental causal studies. review of Economics and statistics (84)1: 151-161.

ravaillon, M. The Mystery of Vanishing Benefits: Ms. speddy analysts Introduction to Evaluation. the World bank. Washington, D.c.

rosenbaum, P. y rubin, D. (1985). Constructing Control Group using Multivariate Matched sampling Methods that Incorporate the Propensity score. the american statistician, vol. 39, no. 1.

11Evaluacin

Captulo 2Caso prctico: Evaluacin de impactos de un programa de mejoramiento gentico

En este captulo se presenta el caso de la evaluacin de impactos del programa de Mejoramiento gentico ganadero de la secretara de agricultura, ganadera, Desarrollo rural, pesca y alimentacin (sagarpa) de Mxico, la cual se llev a cabo por el proyecto de Evaluacin y anlisis de polticas en el marco de la cooperacin tcnica faO-sagarpa.

la evaluacin tena como objetivo medir el impacto del programa en la zona de los altos de Jalisco, Mxico, la cual comprende 19 municipios y es considerada un clster de la industria pecuaria, particularmente la lechera.

2.1 Descripcin del Programa que se busc evaluar

El programa de Mejoramiento gentico ganadero (pMgg) apoya la mejora de razas de ganado y tiene como objetivo incrementar la produccin de carne y leche por unidad animal, as como apoyar el crecimiento del inventario ganadero, haciendo accesible a todo tipo de productores la adquisicin de sementales y vientres nacionales e importados con y sin registro, para su incorporacin al hato ganadero comercial, fomentando con ello la produccin de ganado de alta calidad gentica por parte de los criadores.

para el logro de su objetivo, el programa otorga sementales, vientres, dosis de semen, embriones implantados y termos criognicos. cada beneficiario puede recibir uno o una mezcla de dichos apoyos.

las razas que normalmente son demandadas en las dosis de semen son en su mayora Holstein frisiam y en algunos casos suizo americano. los sementales que ms son demandados por los beneficiarios del programa son de razas suizo americano (leche) en 20 por ciento, suizo Europeo (doble propsito) en 20 por ciento, simmental (doble propsito) en 20 por ciento, charolais (carne) en 20 por ciento, bramahan (carne) en 20 por ciento y otras razas en porcentajes muy pequeos.

El programa no focaliza a la poblacin potencial y los apoyos son otorgados a los solicitantes que cumplen con los requisitos para ser elegidos sobre la base del primero en llegar primero en derecho. cabe mencionar que el programa inici sus operaciones sin antes haber levantado una lnea de base.

El perfil de los beneficiarios del programa lo constituyen dos grupos principales de productores: uno conformado por ganaderos especializados que cuentan con un ingreso relativamente alto, un tamao de hato considerable, acceso a informacin sobre los apoyos y buen nivel tecnolgico. El otro grupo se integra por productores de menores ingresos, con explotaciones rsticas, que combinan agricultura con ganadera.

como resultado de la ejecucin del programa se beneficiaron 1,399 ganaderos, otorgndose 5,047 cabezas de ganado, 6,610 dosis de semen, 35 termos criognicos y 20 embriones. la entrega de los apoyos se realiz principalmente por medio de ferias o tianguis ganaderos.

2.2 Metodologa de muestreo

la unidad de anlisis fue la unidad de produccin ganadera, la cual comprende al conjunto formado por los predios, terrenos o parcelas destinados a la actividad agrcola, ganadera y forestal; los animales criados por su carne, leche,


12

huevo, piel, miel o para trabajo que se posean, independientemente de su ubicacin, as como los elementos de produccin disponibles para estas actividades, siempre que en el ao agrcola de anlisis todo esto se haya manejado bajo una misma administracin.

El marco muestral para obtener la muestra de beneficiarios se obtuvo del listado de beneficiarios del programa. por su parte, para la conformacin del marco muestral se busc tambin la colaboracin de las asociaciones ganaderas (ag) locales, de las cuales se cuenta con una de ellas en cada uno de los 19 municipios que conforman la regin de los altos. las ag proporcionaron la informacin referente a los nombres de los ganaderos y al nmero de cabezas que poseen, lo cual permiti focalizar la bsqueda de no beneficiarios del programa.

El levantamiento de la informacin para la evaluacin se llev a cabo en dos rondas. En la primera de ellas se levant una muestra aleatoria de un tamao de 249 unidades muestrales, la cual estuvo compuesta por 126 beneficiarios y 123 no beneficiarios. con la informacin obtenida de la primera ronda de la muestra se determin la precisin deseada; se establecieron los tamaos de las unidades primarias de muestreo; se conjetur la varianza de la variable de inters, que en el caso del estudio fue la extensin en hectreas y las cabezas equivalentes; se determin el tamao muestral para lograr la precisin deseada y se repiti el proceso hasta que el tamao de la muestra fuera factible de realizarse (cuadro 2).

Grupo 0- N e n calculada

beneficiarios 420.12 180 7% 126

no beneficiarios 420.12 40715 7% 415

Total 541

En la segunda ronda se encuest a 292 unidades, las cuales correspondieron solamente a no beneficiarios del programa con el objeto de ampliar el nmero de candidatos a pareo con los beneficiarios del programa encuestados previamente. Este segundo muestreo se hizo por cuotas de acuerdo a la distribucin de la muestra de cabezas de bovinos de beneficiarios que se obtuvo en la primera ronda del levantamiento con el objeto de que los nuevos encuestados fueran lo ms cercanos en caractersticas a los beneficiarios ya encuestados. En algunos municipios, y con la gua de las asociaciones locales, se les indicaba a los encuestadores las localidades, ejidos o rancheras donde podran encontrar cierto estrato de productores. los encuestadores se dirigan a estos lugares y recorran las localidades entrevistando a cada uno de los habitantes segn se los indicaran las cuotas de la muestra. En otros casos los encuestadores se ubicaban en puntos donde los productores se congregan, tales como termos enfriadores adonde acuden a entregar la leche y all se les abordaba, se les preguntaba por el nmero de cabezas de su hato y si cumplan con los requerimientos de la muestra se les hacia la encuesta. En otros lugares, se acudi a las autoridades municipales y a las oficinas locales del Ministerio de agricultura en donde se citaba a los productores ganaderos. una importante caracterstica de este operativo de campo es que se trataba de una bsqueda focalizada de pares de los beneficiarios del programa, dado que se contaba con ms informacin que en la primera ronda del muestreo.

Durante la entrevistas a los productores ganaderos se les pregunt por el total de tierras y animales en posesin de la unidad de produccin, de los recursos destinados por dicha unidad para su manejo y explotacin, as como algunas caractersticas sociodemogrficas de la familia. la herramienta 1 de este Mdulo presenta el cuestionario aplicado en esta encuesta.

CuaDro 2. cOMpOsicin DE la MuEstra para El lEvantaMiEntO DE DatOs

13Evaluacin

2.3 Metodologa de evaluacin

los impactos fueron estimados mediante un diseo cuasi-experimental que utiliza la puntuacin de la propensin, la cual equivale a la probabilidad de participacin en el programa con base en caractersticas observables, y la distancia de Mahalanobis.

donde X es el vector de covariantes y es la matriz de covarianzas formada por la muestra de beneficiarios.

una vez obtenidas estas medidas se buscaron los diez pares ms cercanos para cada beneficiario entre una muestra de productores pecuarios que no fueron beneficiarios del programa de mejoramiento gentico.

2.4 Determinantes de la participacin en el Programa

uno de los problemas que se enfrenta al utilizar mtodos no experimentales es la presencia del sesgo de seleccin dado por caractersticas no observables de los individuos, tales como habilidad, voluntad a participar en el programa y otros aspectos subjetivos. un ejemplo de caractersticas no observables para el caso es que la zona de los altos de Jalisco es tradicionalmente ganadera en la cual la actividad se hereda a travs de generaciones. Observar diferencias en las tradiciones familiares respecto a la produccin pecuaria, y cmo stas influyen en su participacin en el programa sera algo difcil de determinar. Esta dificultad se super mediante el uso de la puntuacin de la propensin y su empleo para parear beneficiarios con no beneficiarios de manera que se pudieran observar las diferencias en las caractersticas de ambos con respecto a la variable que representa los impactos esperados del programa.

una importante particularidad del programa es que la participacin en ste es voluntaria, aunque para poder participar se requiere ser elegible, tener conocimiento del programa, solicitar el apoyo, ser aceptado, contar con los recursos suficientes para hacer la aportacin correspondiente y, finalmente, ingresar como beneficiario; adems, es importante tener en cuenta que el programa de Mejoramiento gentico buscaba inducir un cambio tecnolgico por medio de la introduccin o transferencia de tecnologas ms avanzadas. Esta informacin se utiliz directamente en el clculo de la puntuacin de propensin de la participacin del programa, la cual se estim a travs de una regresin logartmica calculada mediante un modelo logit:

Donde p(x) es la probabilidad de que la unidad de produccin reciba el beneficio del programa, T, dado el vector de covariantes, X, y P es el operador funcional de probabilidad. El modelo incluye como variable dependiente a una variable binaria a la que le corresponde el valor de 1 si fue beneficiario del programa y el valor de 0 si no lo fue. Esta funcin es tambin la esperanza condicionada de T (el tratamiento) dado X (el vector de covariantes):

como variables independientes se probaron un conjunto de variables que en general pueden ser clasificadas en tres grupos: a) variables sociodemogrficas; b) variables agropecuarias que incluyen variables tecnolgicas y variables econmicas; y c) variables de conocimiento del programa.

a partir del clculo de distintas puntuaciones de propensin combinando las distintas variables de diversa manera, se busc la mejor opcin para calcular impactos de manera no sesgada. la decisin sobre cul era la mejor puntuacin de la propensin fue guiada por la minimizacin de la distancia promedio entre los pares, la maximizacin del nmero de individuos dentro del rea de soporte comn, la minimizacin del sesgo mediante un procedimiento de bootstrapping y la construccin de un modelo terico sobre la participacin en el programa.

|| Xi-Xj || =(Xi-Xj)-1(Xi-Xj)

p(x) =P(T=1| X = x)

E[T |X=x]=1P(T=1|X=x)+0 P(T= 0|X=x)=P(T=1|X=x)=p(x)


14

uno de los problemas que se enfrent en un primer momento fue el colapso del rea de soporte comn y, por lo tanto, de una gran distancia entre pares10. El problema para este estudio consista en que las variables de conocimiento y previa participacin en el programa, as como la participacin en otros programas gubernamentales afines, tales como las campaas sanitarias, hacan una perfecta prediccin de la participacin en el pMgg, ocasionando dicho colapso. sin embargo, al eliminar las variables que predecan perfectamente fue posible encontrar un rea de soporte comn.

al resolver este primer problema se pudo evidenciar un segundo problema, el cual a su vez consista en que la puntuacin de la propensin presentaba una distribucin tipo chi-cuadrada. la distribucin de esta forma era ocasionada por algunas de las variables que componen el vector de covariantes de dicha puntuacin, tales como la superficie de tierra o la cantidad de activos productivos, las cuales tienen ellas mismas una distribucin tipo chi-cuadrada. uno de los problemas de dicha distribucin es que cuando las covariantes no se distribuyen de manera elipsoidal, los mtodos de la puntuacin de la propensin y de la distancia de Mahalanobis pueden presentar limitaciones en cuanto a su eficiencia y pueden estar violando la propiedad de reduccin de sesgo en iguales porcentajes11.

sin embargo, la eliminacin de las variables superficie de tierra (en hectreas equivalentes) y el valor de los activos productivos del clculo de la puntuacin de la propensin poda implicar sesgos en el clculo de los impactos debido a que ello le restaba realismo al modelo terico sobre la participacin en el programa, por lo que se decidi incluirlas no obstante su distribucin.

finalmente, tras una estimacin del sesgo, el clculo de la distancia promedio entre pares y del poder de prediccin del logit, se encontr un vector que responda mejor a los tres criterios y que era tericamente slido, quedando el vector de covariantes X conformado por las siguientes variables:

1) tamao de la familia

2) nmero total de hombres adultos en la familia

3) nmero total de mujeres adultas en la familia

4) nmero total de nias menores de 15 aos en la familia

5) nmero total de nios menores de 15 aos en la familia

6) gnero del beneficiario o jefe de familia

7) Edad del beneficiario o jefe de familia

8) Escolaridad del beneficiario o jefe de familia

9) Experiencia migratoria en la unidad de produccin

10) superficie total de riego

11) superficie total de temporal

12) superficie total de agostadero

13) principal cultivo en primavera-verano

14) ndice de tecnologa agrcola (mecanizacin, fertilizacin, riego, semillas)

10 En los estudios empricos de pareo, bajo el supuesto de independencia condicional, el colapso del rea de soporte comn puede resultar por dos fuentes: a) se estn incluyendo variables que predicen perfectamente la participacin; es decir, que conducen a una probabilidad de participacin estimada de 1 para algunas observaciones, y b) los valores estimados de la puntuacin de propensin son tales que simplemente no hay pares en la muestra. lechner Michael. 2000. a note on the common support problem in applied evaluation studies, swiss institute for international Economics and applied Economic research, university of st. gallen.

11 Diamond alexis, sekhon Jasjeet. 2005. genetic Matching for Estimating causal Effects: a new Method of achieving balance in Observational studies. paper prepared for presentation at the 63th annual Meeting of the Midwest political science association. chicago, illinois, abril 7-10, 2005.

15Evaluacin

15) ndice de tecnologa pecuaria (alimentacin de los animales)

16) valor de los activos

17) recepcin de transferencias directas a los productores agrcolas

18) recepcin de transferencias del programa de Desarrollo Humano existente en el pas

19) participacin en una organizacin de apoyo a las actividades agropecuarias

incluyendo todas estas variables en el clculo de la puntuacin se encontr un rea de soporte comn (figura 3).

2.5 Pareo y estimacin de impactos

una vez seleccionado el vector de covariantes ms adecuado se procedi a realizar el pareo utilizando tres mtodos distintos y para cada uno de ellos se estimaron los impactos por unidad de produccin para las variables de inters. los mtodos de pareo utilizados fueron los siguientes:

a) El vecino ms cercano con base en el pareo de la propensin a participar (ppp)

b) pareo de Mahalanobis dentro de un calibrador de puntuacin de la propensin

c) Kernel de pareo

al utilizar los tres mtodos se encontr que las estimaciones de impacto varan de forma significativa dependiendo de qu tipo de pareo se utilice. El cuadro 3 presenta los impactos promedio estimados, de acuerdo al mtodo de pareo empleado, para las unidades de produccin participantes en el programa.

El primer problema encontrado es que la Zona de soporte comn (Zsc) es distinta, tanto en tamao como composicin, para cada uno de los casos. por lo que se refiere al orden de los beneficiarios con respecto a los no beneficiarios, se puede asegurar que si se ordenan con respecto a su puntuacin de la propensin, stos siempre guardan el mismo orden si se utiliza el mismo vector de covariantes. Es decir, es posible generar una sola lista para todos los beneficiarios y no beneficiarios, lo que permite incluso graficar la distribucin del Zsc.

la distancia para el caso de los mtodos del vecino ms cercano (ppp) y kernel es la simple diferencia del valor de la puntuacin de la propensin, escogindose a los diez pares cuya diferencia sea la menor. con la distancia de

0.019766 0.999231

0.372168

trat=0

fraccin

0.019766 0.999231

0.372168

trat=1

fIGura 3. rEa DE sOpOrtE cOMn


16

Mahalanobis esto no es posible debido a que sta se mide con respecto a una observacin determinada; es decir, se calcula dicha distancia con respecto a cada beneficiario y a partir de ese orden se escogen los diez no beneficiarios ms cercanos para cada beneficiario; por lo tanto, si se buscara una lista ordenada de las observaciones habra tantos rankings como beneficiarios en la Zsc. la puntuacin de la propensin, por otro lado, no depende de la posicin relativa de las observaciones, sino que es independiente de qu tan lejos o cerca estn unos de otros y se define slo con base en las caractersticas observables de cada unidad de anlisis.

Otra importante diferencia entre los mtodos que utilizan la puntuacin de la propensin para medir distancias (ppp y kernel) y el que utiliza la distancia de Mahalanobis se debe a que los pares que se seleccionan para medir impactos son distintos, dependiendo de la medida utilizada. Es decir, la puntuacin de la propensin y la distancia de Mahalanobis, al ser medidas distintas, no coinciden en la definicin de cules son los pares ms cercanos a los beneficiarios dentro de la Zsc. El problema fundamental de ello es la manera de definir la distancia en el espacio de caractersticas observables, ya que al ser un espacio multidimensional las medidas de distancia no convergen, de tal manera que utilizando la puntuacin de la propensin puede parecer que los ms cercanos son unos individuos mientras que utilizando la distancia de Mahalanobis esos mismos individuos se encuentran ms distantes que otros que no se consideraban cercanos mediante la puntuacin de la propensin. En otras palabras, si se pusiera en una recta numrica a las unidades de anlisis con base en su distancia medida por la puntuacin de la propensin y se le sobrepusiera una recta con la posicin de las mismas unidades pero con base en la distancia de Mahalanobis (guardando la escala correspondiente entre ambas medidas), se observara que las unidades no se encuentran en el mismo lugar y que su orden es distinto12, lo que da como resultado estimaciones de impacto diferentes (cuadro 3).

Distancia de Mahalanobis

Vecino ms cercano segn la puntuacin de la

propensin

Kernel de pareo

Ingreso pecuario neto MX 23,746.3 MX 40,893.5 MX 45,297.7

Costos pecuarios MX 71,392.3 MX 58,854.6 MX 36,832.0

Cabezas vendidas en pie 2.58 2.8 2.6

Ingreso lechero neto MX 35,815.7 MX 31,742.5 MX 48,075.5

Valor produccin lechera MX 117,754.2 MX 70,591.5 MX 76,972.8

Costos de la produccin lechera MX 81,938.5 MX 38,849.0 MX 28,897.2

Produccin de litros de leche 19,083.7 9,568.7 12,674.2

Productividad de leche por cabeza de ganado lt 158.2 lt 343.4 lt 187.6

finalmente, se obtuvo una estimacin del sesgo haciendo el bootstrapping sobre el impacto promedio de las unidades de produccin tratadas. la idea bsica del bootstrap es simplemente emplear la funcin de distribucin inducida

12 Este fenmeno se corrobor utilizando los comandos de stata mahapick y matchnum desarrollados por David Kantor de John Hopkins university.

CuaDro 3. iMpactO prOMEDiO anual DEl prOgraMa DE MEJOraMiEntO gEnticO ganaDErO sObrE lOs bEnEficiariOs cOn trEs DistintOs

MtODOs DE parEO para inDicaDOrEs sElEcciOnaDOs

17Evaluacin

por los datos para estimar alguna caracterstica de la poblacin, en este caso el impacto del programa. En general es aceptado que cuando el sesgo estimado es menos del 25% del error estndar, el sesgo no tiene relevancia. las estimaciones de sesgo y error estndar se obtuvieron haciendo un bootstrapping de 200 replicaciones y se encontr que el sesgo vara dependiendo del indicador que se estudia; por ejemplo, mientras que para el ingreso pecuario neto, indicador que incluye a todos los productores (lecheros, carne y doble propsito), el sesgo de las estimaciones del pareo con la distancia de Mahalanobis es considerablemente menor, para el ingreso lechero neto no es as. El ingreso lechero es un indicador que slo considera a los productores de leche y de doble propsito. con base en el anlisis del sesgo como porcentaje del error estndar se encontr que el mtodo de Mahalanobis promedia 38%, mientras que el de vecinos ms cercanos segn la puntuacin de la propensin promedia 20% y el de kernel de pareo 17% (cuadro 4). En este sentido, los estimadores ms confiables son el de vecinos ms cercanos y el de kernel de pareo. Es importante aclarar que las estimaciones de impacto de los tres mtodos tienen el mismo signo y slo varan en magnitud.

Distancia de Mahalanobis

Vecino ms cercano segn la puntuacin de la

propensin

Kernel de pareo

Ingreso pecuario neto 18.3 73.3 46.2

Costos pecuarios 42.4 4.4 12.1

Cabezas vendidas en pie 11.9 27.6 12.3

Ingreso lechero neto 53.9 44.6 52.8

Valor de la produccin lechera 80.8 38.6 38.6

Costos de la produccin lechera 66.2 1.0 7.9

Produccin de litros de leche 87.7 39.8 41.8

Productividad de leche por cabeza de ganado 23.2 10.3 25.9

PorCEnTaJE ProMEDIo 48.05 29.95 29.7

* El sesgo y el error estndar se estimaron mediante un bootstraping del impacto promedio sobre los tratados.

2.6 Anlisis de resultados

En esta seccin se presenta un anlisis de impacto utilizando las estimaciones del mtodo de vecinos ms cercanos.

2.6.1 Ingresoal analizar el impacto del programa de Mejoramiento gentico ganadero sobre los productores pecuarios (de carne y de leche) beneficiarios de la zona de los altos de Jalisco se encontr que el ingreso pecuario anual neto, definido como

CuaDro 4. sEsgO DEl iMpactO EstiMaDO cOMO pOrcEntaJE DEl ErrOr EstnDar*


18

los ingreso por venta de cabezas en pie ms el ingreso por venta de leche menos los costos, tuvo un valor promedio de MX 111,152 por unidad de produccin. De dicho ingreso MX 40,893 pueden ser atribuibles a la participacin en el programa, lo que equivale a un incremento en el ingreso del 58% con respecto a las unidades de produccin no participantes en el programa.

El costo total de la produccin pecuaria incluye los jornales contratados para estas actividades, el costo total de los alimentos y medicamentos de los animales, los costos de veterinario, as como el costo por el uso de agua para la actividad pecuaria. De acuerdo a las estimaciones, el costo de produccin fue 25% mayor para aqullos que participaron en el programa con respecto a los no participantes, alcanzando un monto de MX 271,374.

considerando solamente a los productores lecheros, el valor promedio de la produccin de leche fue de MX 323,664 para los participantes en el programa, 27% por arriba del ingreso de los no participantes. por su parte, los costos aumentaron 16% en el caso de los beneficiarios, alcanzando un monto de MX 280,325, lo cual se deriva de que el mejoramiento gentico conlleva la adopcin de un paquete tecnolgico ms costoso, sobre todo en lo que a manejo, medicinas y alimentos se refiere.

2.6.2 Produccin y productividadEl impacto positivo del programa sobre el ingreso se explica por una mayor productividad, una menor tasa de mortalidad y una mayor tasa de natalidad. los hatos de los productores beneficiarios produjeron en promedio 98,445 litros de leche anuales, equivalente a una produccin 10% mayor que si no hubieran participado en el programa.

En cuanto al nmero promedio de cabezas de los beneficiarios del programa, ste es de 56 animales en promedio, 6.8 cabezas de ganado ms que en el caso de los no participantes del programa. Ello se debe, entre otros factores, a que los hatos de los beneficiarios del programa presentan una menor tasa de mortalidad y una mayor tasa de natalidad pues, en promedio, los hatos de los beneficiarios presentaron una tasa de sobrevivencia anual del 37%, 6.5% mayor a las unidades de produccin no participantes.

R e s u m e nla vida de un programa o proyecto culmina con la evaluacin de los resultados obtenidos y del impacto generado, ya sea positivo o negativo, en la poblacin objetivo o rea de enfoque. Este tipo de evaluacin presume la estimacin de un escenario contrafactual que se compara con el escenario que fue intervenido, utilizando mtodos cuantitativos, experimentales o cuasiexperimental, y mtodos cualitativos.

aunque cada evaluacin de impacto tiene caractersticas nicas que requieren enfoques metodolgicos diferentes, resulta ideal combinar mtodos cuantitativos y cualitativos, ya que de esta manera se obtiene un resultado cuantificable slido apoyado con una percepcin cualitativa de los mismos beneficiarios sobre el proyecto.

para el diseo de una evaluacin de impacto deber considerarse la disponibilidad de datos, as como verificar que haya pasado un tiempo suficiente que permita observar los efectos del programa o proyecto. De la misma manera, los aspectos de tiempo, recursos humanos y financieros sern determinantes en la definicin de los mtodos utilizados.

De la evaluacin de impacto se extrae informacin que permite valorar la eficacia de un programa o proyecto, pero tambin se extraen lecciones aprendidas y recomendaciones que pueden ser utilizadas en el diseo y operacin de programas y proyectos similares, para asegurar, de esta manera, que la poltica pblica cumple con su cometido.

19Evaluacin

Her

ram

ien

ta

Cu

esti

onar

io p

ara

la e

valu

aci

n d

e im

pac

tos

del

Pro

gram

a d

e M

ejor

amie

nto

Gen

tic

o

fech

a de

ent

revi

sta

Da

Mes

ao

nu

MEr

O D

E c

uEs

tiO

na

riO

nom

bre

del e

ncue

stad

or__

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

___

nom

bre

del s

uper

viso

r___

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

____

___


20

iNiC

io d

E L

a E

NCu

ESTa

al

Co

MEn

Zar

CaD

a E

nCu

EsTa

, El

En

CuEsTa

Do

r D

EBEr

l

EEr

TE

XTu

alM

EnTE

El

sIG

uIE

nTE

Pr

rafo

:

bue

nos

das

/ tar

des/

noc

hes,

mi n

ombr

e es

___

____

____

y tr

abaj

o pa

ra la

Org

aniz

aci

n de

nac

ione

s u

nida

s pa

ra la

alim

enta

cin

y la

agr

icul

tura

. no

pert

enez

co

al g

obie

rno

y le

pid

o po

r fa

vor

que

me

dedi

que

un p

oco

de s

u tie

mpo

par

a re

spon

der

algu

nas

preg

unta

s. a

ctua

lmen

te r

ealiz

amos

una

enc

uest

a pa

ra la

eva

luac

in

del p

rogr

ama

de M

ejor

amie

nto

gen

tic

o. u

sted

fue

ele

gido

por

que

su s

ituac

in

y la

de

su f

amili

a re

pres

enta

n la

rea

lidad

de

muc

hos

ciud

adan

os d

e es

te p

as.

su

part

icip

aci

n es

de

sum

a im

port

anci

a, p

ues

la in

form

aci

n qu

e no

s br

inde

ayu

dar

a t

omar

med

idas

que

mej

oren

los

apoy

os.

la in

form

aci

n qu

e us

ted

brin

de e

s co

nfid

enci

al y

ser

ut

iliza

da e

n be

nefic

io d

e us

ted

y ot

ros

prod

ucto

res.

I. M

D

ulo

DEM

oG

rf

ICo

nom

bre

del b

enef

icia

rio e

ncue

stad

o:

ape

llido

pat

erno

ape

llido

Mat

erno

prim

er n

ombr

e

segu

ndo

nom

bre

Dom

icili

o:

cal

le y

nm

ero

21Evaluacin

pob

laci

n

Mun

icip

io

Esta

do

cd

igo

pos

tal

1. M

iem

bros

del

hog

ar: pe

rson

as q

ue v

iven

baj

o el

mis

mo

tech

o y

com

en d

el m

ism

o ga

sto.

no.

nom

bre

del m

iem

bro

de la

fam

ilia1

Circ

ule

si e

s ho

mbr

e o

muj

erP

aren

tesc

o2Ed

ad3

(ao

s cu

mpl

idos

)

Esc

olar

idad

(ao

s cu

rsad

os

empe

zand

o po

r la

prim

aria

)

leng

uas

que

habl

a el

jefe

de

fam

ilia

Trab

aja

en la

uni

dad

de

prod

ucci

n f

amili

ar(c

ircu

le s

egn

cor

resp

onda

)E

spa

olo

tra4

HM

sn

os

n

o

11

21

10

10

21

21

0

31

21

0

41

21

0

51

21

0

61

21

0

71

21

0

81

21

0

91

21

0

101

21

0

111

21

0

121

21

0

not

as:

1/ c

omie

nce

la li

sta

con

el n

ombr

e de

l ben

efic

iario

.2

/ ind

ique

el c

dig

o de

par

ente

sco

seg

n la

tabl

a de

cd

igos

pro

vist

a.3/

lis

tar

los

mie

mbr

os d

e m

ayor

a m

enor

.4

/ ind

ique

el c

dig

o de

leng

ua: v

er ta

bla

de c

dig

os p

ropo

rcio

nada

.


22

II. M

D

ulo

DE

MIG

raC

In

2.

alg

una

vez

uste

d o

alg

n m

iem

bro

de la

fam

ilia

ha e

mig

rado

par

a tr

abaj

ar e

n ot

ra p

arte

; es

dec

ir, h

a tr

abaj

ado

por

un p

erio

do m

ayor

a u

n m

es f

uera

de

su

com

unid

ad?

s: 1

no:

0

si la

res

pues

ta e

s ne

gativ

a pa

sar

a la

pre

gunt

a 4.

3. E

n ca

so a

firm

ativ

o lis

te a

tod

as la

s pe

rson

as m

ayor

es d

e di

ez a

os

que

haya

n em

igra

do, em

peza

ndo

por

uste

d (e

l ent

revi

stad

o),

y el

prim

ero

y l

timo

de lo

s lu

gare

s en

los

que

estu

vier

on.

no.

nom

bre

del

mie

mbr

o de

la

fam

ilia

a d

nde

ha

mig

rado

par

a tr

abaj

ar?

E

n qu

a

o em

igr

por

pr

imer

a ve

z?

En

qu

ao

emig

r la

l

tima

vez?

Em

igra

cad

a a

o?(in

diqu

e se

gn

dest

ino)

Can

tidad

de

din

ero

que

envi

du

rant

e el

lti

mo

ao

de

emig

rado

4M

EX

2Eu

aO

tro3

____

ME

X2

Eua

Otr

o3

____

ME

X2

Eua

Otr

o3

____

ME

X2

Eua

Otr

o3

____

11

01

01

01

01

01

0

21

01

01

01

01

01

0

31

01

01

01

01

01

0

41

01

01

01

01

01

0

51

01

01

01

01

01

0

61

01

01

01

01

01

0

71

01

01

01

01

01

0

81

01

01

01

01

01

0

91

01

01

01

01

01

0

101

01

01

01

01

01

0

1/ a

note

seg

n e

l nm

ero

que

corr

espo

nda

a la

per

sona

en

la p

regu

nta

1.2

/ se

refie

re a

que

si h

a em

igra

do a

otr

a pa

rte

de la

rep

blic

a M

exic

ana.

3/ E

spec

ifiqu

e el

pa

s de

des

tino.

4/ p

regu

ntar

la c

antid

ad e

n pe

sos.

23Evaluacin

4. s

i alg

n m

iem

bro

del h

ogar

, cu

alqu

iera

de

ello

s, t

uvie

ra la

nec

esid

ad d

e bu

scar

tra

bajo

en

otra

par

te, c

onta

ra c

on a

lgn

apo

yo p

ara

ello

?

no.

opc

ione

s

Circ

ule

la r

espu

esta

a t

odas

las

opci

ones

que

cor

resp

onda

n

ME

XEu

aO

tro1

____

____

____

____

____

sn

os

no

sn

o

Par

a tr

abaj

ar e

n (p

as)

:1

01

01

0

1ti

ene

un a

mig

o(a)

en

la c

iuda

d en

don

de ir

a a

trab

ajar

10

10

10

2ti

ene

un fa

mili

ar e

n la

ciu

dad

en d

onde

ira

a tr

abaj

ar1

01

01

0

3se

ira

por

su

cuen

ta s

in te

ner

cono

cido

s 1

01

01

0

4ya

lo c

onoc

en e

n el

trab

ajo

al q

ue ll

egar

a1

01

01

0

5O

tro

(indi

que)

:1

01

01

0

not

a:1/

Esp

ecifi

que

pas

de

dest

ino.

III. M

D

ulo

DE

TEn

EnCI

a Y

uso

DE

la

TIE

rr

a

5.

Cu

l es

el r

gim

en d

e pr

opie

dad

y us

o de

la t

ierr

a qu

e us

ted

trab

aj

dura

nte

los

aos

indi

cado

s?

no.

rg

imen

de

hum

edad

y u

sor

iego

Tem

pora

l de

uso

agrc

ola

ago

stad

ero

o m

onte

Bos

que

otr

oTo

tal

Tipo

de

tene

ncia

Varia

bles

( 1

)(

2 )

( 3

)(

4 )

( 5

)(

6 )

20##

620

##20

##6

20##

20##

620

##20

##6

20##

20##

620

##20

##6

20##

1Ej

idal

supe

rfic

ie (

Ha)

valo

r ($

/ha)

1

ren

ta ($

/ha/

ao)

2

2p

ropi

edad

co

mun

al

supe

rfic

ie (

Ha)

valo

r ($

/ha)

1

ren

ta ($

/ha/

ao)

2


24

3p

ropi

edad

pr

ivad

a

supe

rfic

ie (

Ha)

valo

r ($

/ha)

1

ren

ta ($

/ha/

ao)

2

4to

mad

a al

terc

io

o a

med

ias3

supe

rfic

ie (

Ha)

ren

ta ($

/ha/

ao)

2

5to

mad

a en

re

nta4

supe

rfic

ie (

Ha)

ren

ta ($

/ha/

ao)

6O

tra

form

a de

po

sesi

n5

supe

rfic

ie (

Ha)

valo

r ($

/ha)

1

ren

ta ($

/ha/

ao)

2

not

as:

1/ E

l val

or q

ue d

ebe

regi

stra

rse

corr

espo

nde

slo

al d

e la

tier

ra, s

in in

clui

r lo

que

est

pl

anta

do e

n el

la.

2/

indi

que

lo q

ue r

ecib

ira

si r

enta

ra la

tier

ra.

3/ E

n ca

so d

e te

ner

tierr

as a

med

ias

o al

terc

io o

baj

o ot

ra fo

rma

de p

oses

in,

indi

que

cun

to p

agar

a p

or h

ect

rea

si u

sted

las

tom

ara

en r

enta

.4

/ in

diqu

e cu

nto

pag

a de

ren

ta p

or u

na h

ect

rea.

5/ O

tra

form

a de

pos

esi

n se

ref

iere

a ti

erra

s pr

esta

das,

terr

enos

nac

iona

les

u ot

ra fo

rma

que

perm

ite a

l pro

duct

or te

ner

acce

so a

l usu

fruc

a-i4237s

Documents