Identifying constraints to agricultural productivity for smallholder farmers

DIME Impact Evaluation WorkshopInnovations for Agriculture16-20 June 2014, Kigali, RwandaPROJET DACTIONS COMMUNAUTAIRES POUR LA RESILIENCE CLIMATIQUE (PACRC)NIGERImpact Evaluation WorkshopInnovations for Agriculture16 20 June 2014Kigali, RwandaIntervention SummaryObjectif: Amliorer la protection des populations et des systmes de production contre la modification et la variabilit du climat dans les Communes Cibles.Composantes:COMPOSANTE 1: Intgrer la rsilience et les connaissances climatiques dans les politiques sectorielles et localesCOMPOSANTE 2: Amliorer la rsilience des systmes agro-sylvo-pastoraux et des populations locales COMPOSANTE 3: Assurer la coordination institutionnelle du projet et la coordination stratgique du PSRC

3SITUATION DES SOUS PROJETS MIS EN OEUVRE

Type de sous projets

Sous projets excuts au 31 dcembre 2013

Sous projets excuts ou en cours au 30 avril 2014Sous projets agricoles65102Sous projets pastoraux3646Sous projets GDT 3244Sous projets filets sociaux93100Sous projets infrastructures5475Total280367Questions dvaluationLes pratiques agro-sylvo-pastoraux sont-elles rellement rsilientes aux effets des changements climatiques: la rduction des dficits cralier et fourrager prsume t- elle dune rsilience de ces systmes? Si oui quel degr?La rhabilitation des infrastructures et les mesures de protection sociale ont elle entrain une rsilience des populations bnficiaires? Si oui quel degr?La combinaison des 2 pratiques naurait elle pas plus dimpact?

Les mesures des impacts ralises sur lensemble du territoire communal et sans groupes tmoins permettent t- elles dapprcier objectivement les impacts dus aux interventions du projet?

5Evaluation DesignRamener le niveau dvaluation au niveau de villages au lieu de communesUtilisation de lapproche de double diffrence (suivre les villages de traitement et contrle avant et aprs le projet)Phase alatoire (choix de villages de traitement faon alatoire par anne)

6Sample and data1900 villages seront touchs par les interventions du projet sur 3 ans1/3 de villages (633) seront touchs chaque anne (groupe de traitement) et les autres villages non touchs constitueront le groupe de contrleCollecte de donnes de base des villages de traitement et de contrleCollecte, traitement et analyse de donnes dvaluation

7TimelineActivitsPriodeActeursRenforcement des comptences des acteurs nationaux et dveloppement du plan dvaluationAot 2014DIME, World Bank NigerSituation de base des villages bnficiairesSeptembre 2014Projet et DIMEChoix de villages de traitement Novembre 2014Projet, communes et DIMECollecte, traitement et analyse de donnesChaque anneProjet, communes et DIMEUtilisation et dissmination des rsultatsProjet, communes, DIME, World Bank Niger

8ConclusionATOUTS DU PACRC POUR UNE COLLABORATION AVEC DIMELe PACRC est un projet pilote du CIF (PPCR)Le projet est en restructuration, donc possibilit dintroduire EILe dispositif de suivi-valuation du projet est entrain dtre renforc: 8 Assistants suivi-valuation au niveau rgionalSpcialiste suivi-valuation de la Banque Mondiale 9Presentation ends here

DIME Impact Evaluation WorkshopInnovations for Agriculture16-20 June 2014, Kigali, RwandaAgriculture Investment and Market Development ProjectCameroonImpact Evaluation WorkshopInnovations for Agriculture16 20 June 2014Kigali, Rwanda12Intervention SummaryObjective: To support the transformation of the low-productivity, subsistence-oriented cassava, maize, and sorghum subsectors into commercially-oriented and competitive value chains in four agro-ecological areas.Focus on two technical components

Supporting:Production + Processing + MarketingPartnerships (producers & buyers)Sub-projects (cooperatives)Public infrastructureFinanceSupporting:Public services + technology transferSeeds (production & certification)Public-private partnershipsTechnology transfer

13Results ChainValue chainProductionPost-HarvestMarketHigher yieldsHigher QualityAdded valueLess wasteHigher salesHigher premiumsResults chain- Inputs (e.g. seeds)- Technology- Cooperatives- Processing- Storage- Access- Price (through contracts)Intervention areas14Evaluation QuestionsHow does access to matching grants affect producers capacity to produce, sell and generate profits?

15Evaluation DesignWe use a difference-in-differences approach to measure the impact of matching grants:Agri-businesses will select potential partner cooperativesCooperatives will compete for the contractsA sub-set of cooperatives will be contracted

The impact evaluation will be based on a comparison between cooperatives that are contracted (treatment) with those that are not (control)

16Sample and dataThe survey respondents will be randomly selected from the roster of cooperative membersFarmers in both the treatment and the control group will be interviewedDetailed data collection on household-plot-crop level will be collected in order to allow for accurate measurements of agricultural productivity, sales and costs (to calculate the price premium)Additional information on household level socio-economic characteristics will be collected17TimelineBaseline data collection: Data collection will follow a gradual approach following the demand from agri-businesses Baseline data collection commences as early as beginning 2015Evaluation period will vary between one to three seasons depending on the contract signing dateTotal project length is 5 years until Sept 201918Thank you for your attention

??!!!!!!!19

DIME Impact Evaluation WorkshopInnovations for Agriculture16-20 June 2014, Kigali, RwandaRenforcement des Services Publics Agricoles (RESEPAG)HAITI

Impact Evaluation WorkshopInnovations for Agriculture16 20 June 2014Kigali, RwandaIntervention SummaryObjective:Renforcer les services publics agricoles pour un accompagnement efficace du monde ruralComponents:-Appui aux services locaux de vulgarisation et innovation agricole travers le renforcement des organisations dagriculteurs;-Appui aux femmes membres des organisations dagriculteurs

22Evaluation QuestionsLa vulgarisation et linnovation agricoles conduisent-elles une amlioration des conditions de production et une augmentation de la quantit produite?Le renforcement de la capacit des femmes (en matire de gestion dentreprises et dans le domaine de la nutrition) peut-il induire un revenu plus substantiel et une amlioration de la situation nutritionnelle dans les familles?

23Indicateurs dimpact 1Aspect vulgarisation et innovation:-Lamlioration du revenu des producteurs par laugmentation de la production, du rendement et de la productivit -Le renforcement des capacits des rseaux de producteurs (Plus de rseaux organiss)-La baisse de lInscurit Alimentaire en milieu rural

24Indicateurs dimpact 2Aspect genre:-La frquence de la consommation (nombre de repas consomm par jour)-Laugementation de la diversit ou lamlioration de la dite alimentaire (Les aliments consomms au cours des sept jours prcdant lenqute)-Le revenu des femmes.

Evaluation DesignDifficult:Nombre dassociations ligibles et, donc, les futures bnficiaires prsentement ne sont pas connusInexistence de la population cible, donc difficult de randomisation du choix des groupes de traitement et de contrle ce niveau (Mthode exprimentale non appliquable ici)

26Evaluation DesignAspect Vulgarisation et innovation:Choix de la mthode quasi exprimentale (appariement) avec un plan dchantillonnage systmatique deux degrs:Selection du groupe de traitement dans lchantillon dassociations ligibles, chantillon pralablement slectionn suivant un plan systmatique Selection du groupe de contrle parmi les membres dassociations non bnficiaires du projet suivant la la mthode dappariement (variables utiliser: taille de lexploitation, cultures produites, revenu)Evaluation DesignAspect Genre: Selection des groupesRandomisation lchelle des associations pr slectionnes Echantillonnage:Si, dans une association bnficiaire, leffectif est faible, toutes les femmes seront slectionnesSi, en revanche, leffectif est lev, X% ( determiner) de femmes seront selectionns alatoirement.

Oprationnalisation (pour les 2 mthodologies)Etablissement dune ligne de base (situation de rference) partir dune enqute auprs des groupes de traitement et de contrleEvaluation de limpact en milieu et aprs limplmentation du projet (encore partir denqute)Mthode de double diffrence dans lanalyse des donnes (avant-aprs / avec-sans)

29

DIME Impact Evaluation WorkshopInnovations for Agriculture16-20 June 2014, Kigali, RwandaProgramme de Productivit Agricole en Afrique de lOuestPPAAO/WAAPPSenegalImpact Evaluation WorkshopInnovations for Agriculture16 20 June 2014Kigali, RwandaPPAAO/WAAPP Objectif:Lobjectif est de contribuer laugmentation de la productivit agricole dans les filires, par le dveloppement, la diffusion et ladoption de technologies dans les filires prioritaires nationales et rgionales.

ComposantesConditions propices la cooprations rgionale en matire de dveloppement et de dissmination et adoption de technologiesCentre National de Spcialisation sur les systmes de cultures base de crales sches (mil, mas, sorgho, fonio) et les cultures associes (arachide, nib et ssame) Financement la demande du dveloppement, de la diffusion et de ladoption des technologies amlioresCoordination, Gestion et Suivi & Evaluation du programme

susceptibles daccroitre le taux de croissance agricole des pays participants pour lamener 6%32Projet : Diffusion de lincorporation des farines de cereales locales (mil, mas sorgho) dans la panification et les viennoiseriesObjectif:Lobjectif spcifique du projet est dassurer lincorporation et la promotion des farines de mil, de mas et de sorgho dans la panification et les viennoiseries des boulangeries

Composantes:Renforcement des capacits des organisations de producteursRenforcement des capacits des transformateursRenforcement des capacits des BoulangersCommunication

33Questions dvaluationQUESTION GENERALE Le projet a t-il eu un impact sur les revenus/chiffres daffaire des acteurs bnficiaires (producteurs et leurs organisations, transformateurs, boulangers) ?

QUESTIONS SPECIFIQUES: aucune possibilit de les valuer avec une mthode rigoureuse

34Mthode dvaluationProposition : Double diffrence + appariementProducteurs:Groupe traitement = les 2500 producteurs membres des 4 OP faitires impliques dans le projet ayant bnfici de linterventionGroupe de contrle = dautres producteurs (non membres des 4 OP faitires) ayant les mmes caractristiques suivant les critres de choix et dautres critres qui peuvent influer sur le revenu 35Mthode dvaluationTransformateurs:Groupe traitement = les 15 units de transformation impliques dans le projetGroupe de contrle = dautres units de transformation ayant les mmes caractristiques suivant les critres de choix et dautres critres qui peuvent influer sur le chiffre daffaire Boulangers :Groupe traitement = les 230 boulangeries de la FNBS impliques dans le projetGroupe de contrle = dautres boulangeries ayant les mmes caractristiques suivant les critres de choix et dautres critres qui peuvent influer sur le chiffre daffaire36Echantillon et donnesIndicateurs:Revenu des producteursChiffre daffaire des transformateursChiffre daffaire des boulangersGroupes traitement:230 boulangeries15 units de transformationProducteurs: 2500 bnficiairesBudgetCalculs de puissance statistiqueGroupe de contrle: calculs de puissance statistique

37CalendrierJuin 2013-Juin 2014: mise en place des quipements des producteurs, des transformateurs et des boulangersA partir de Septembre 2013: communicationOctobre 2014-Dcembre 2014: formation des OP et de leurs membres, des transformateurs et des boulangersNovembre 2014 : Enqute de base auprs des producteurs, transformateurs et boulangersA partir de Dcembre 2014: Livraison des crales aux transformateurs et de la farine aux boulangeries et production de pains et viennoiseries Novembre 2015: 1ire Enqute de suivi auprs des producteurs, des transformateurs et des boulangersNovembre 2016: 2ire Enqute de suivi auprs des producteurs, des transformateurs et des boulangers

Demarrage des activits:ProducteursEnqute de base : Enqute de suivi un an aprsEnqute finale deux aprsBoulangersEnqute de base :Enqute finale : 38

DIME Impact Evaluation WorkshopInnovations for Agriculture16-20 June 2014, Kigali, RwandaContexte et ProblmesBaisse de productivite et rentabilite du caf Vieillissement du verger caficole (les cafiers produisent moins & valorisent moins les engrais)Pas dutilistion de bonnes pratiques agricoles Ces problmes sont amplifis par la volatilit des cours mondiaux du prix du caf

Il y a des technologies innovantes qui permettent ladaptation & lattnuataion des effets ngatifsLes caficulteurs ne les utilisent pas soit parce que (i) manque dinformation & capacit technique; (ii) difficults financieres; et (iii) les deux

40Resum du projet Objectif: Tester des pratiques des gestion durable dans les zones caficoles qui amliorent la productivit et le bien-tre socio-conomique des caficulteurs

ComposantesAppui la gestion durable des zones caficolesLutte contre les sources de pollution dans les stations de lavage de cafDiversification des moyens de subsistance

41Questions d valuationQuelles sont les meilleures stratgies pour amliorer la productivit du secteur caf et le bien-tre du cafeiculteur?

1. Lamelioration des services de vulgarisation (e.g., formation et encadrement) conduit-elle lutilisation des nouvelles technologies et contribue-t-elle accrotre la productivite? --Si oui, les effects sont-ils le rsultat de la formation ou de lencadrement?

2. Loctroi des subventions incite-il lutilisation des innovations technologigues et contribue-t-il a accrotre la productivite? --Si oui, l efficacit de subventions depent-t-elle du niveau de contribution des beneficiaries?

3. La combinaison des deux stratgies prcedentes condurait-elle davantage lutilisation des innovations technologigues ainsi qu accrotre la productivite?

4. Comment amliorer la productivit des femmes cafeicultrices?

42Une question principale et 4 sous-questions 42Stratgies et innovations testerL valuation teste les effects de 4 stratgies (et sous-stratgies)Strategie 1: Formation et encadrement techniqueFormation seulement Formation + Encadrement technique

Strategie 2: Octroi des subventions pour lachat des technologies innovativesContribution a 15 %Contribution a 30%

Strategie 4: combinaison de Stratgie 1 et Stratgie 2

Stratgie 4: (seulement pour femmes caficultrices)Bons dappui pour attnuer les contraintes & tches mnagresOctroi des telephone mobiles pour faciliter l accs aux conseillers agricoles

43Indicateurs de rsultatsAdoption et utilisation des technologies innovantes

Productivit et niveau de production (quantit et qualit)

Diversification agricole

Superficie consacre la caficulture

Niveau de revenus et profits

Nouveaux investements

Epargne et consommation

Achat de nouveaux quipements

Securit alimentaire et nutritionelle

44Methode d evaluation45SynthseMthode exprimentale sera utilise pour identifier les effets des diffrentes stratgies sur les rsultatsL vidence pour questions 1-3 sera fournie par:Assignation alatoire des stratgies 1-3 diffrentes unitsLe project ciblera 120 collines et donc 30 pour chacune des trois strategies principales et 30 pour un groupe de controlFormation/Encadrement: OUI

Formation/EncadrementNO

Octroi des subventions: OUIStrategie 3 (30 sous-collines)Strategie 2 (30 sous-collines)Octroi des subventions: NOStrategie 1(30 sous-collines)Groupe de contrle (30 sous-collines)Mthode d evaluationLvidence des sous-strategies 1A et 1B: des collines qui recoivent strategie 1 sera assigne alatoirement sous strategie A et lautre a sous-strategy B (15 collines chacune)

Lvidence des sous-strategies 2A et 2B: des collines qui recoivent strategie 2 sera assigne alatoirement a sous strategie A et lautre a sous-strategie (15 collines chacune)

Lvidence des 2 sous-stratgies relative au genre: 50% des femmes dans les collines cibles par les strategies 1 et 2 recevront un bon dappui (25%) pour attnuer les contraintes mnagres soit un telephone cellulaire (25%)

Lautre 50% ne recevra pas dappui suplementaire

46EchantillonageLe projet bnficiera 10,000 15,000 cafeiculteurs dans les sous-collines cibles

Un chantilonnage reprsentatif (10-20 mnages par colline) sera slectionn pour faire lobjet des enqutes de base et de suivi

Nous essayerons de cibler les memes mnages/caficulteurs pour les enqutes de base et pour les enqutes de suivi

Lenqute des mnages sera complte par une enqute des institutions et infrastructures communautaires et celle des chefs de sous-collines

47Etapes suivantes Enqute de base:Juillet-Septembe 2014

Dbut des activities: Septembe-Dcembre 2014

Enqute mi-parcours: Dcembre-2015

Enqute finale: Dcembre 2016

48Questions rsoudre Revoir/modifier lEI en cours

Allongement des dlais avant Mise en oeuvre des activits

Cots suplmentaires

49