Table des matières
Florent Bédécarrats, Isabelle Guérin et François Roubaud
Introduction générale
Les controverses sur les expérimentations aléatoires dans le domaine du développementÉpistémologie, éthique et politique
- Les arguments du débat : épistémologie, politique et éthique
- L’épistémologie des RCT dans le domaine du développement
- Les RCT et le « développement »
- Éthique et RCT
- Quel est le champ d’application des RCT ?
- Biens privés, marchands et humanitaires
- Évaluer l’impact ou tester le comportement ?
- Mesurer versus expliquer
- Pourquoi une controverse scientifique est‑elle nécessaire et pourquoi n’a‑t‑elle pas eu lieu ?
- Éviter la controverse tout en écoutant et en s’adaptant
- La controverse peut-elle vraiment être évitée compte tenu des effets d’éviction ?
- Quelles sont les alternatives de recherche ?
- Grandes lignes de l’ouvrage
Angus Deaton
Prologue
La randomisation sous les tropiques revisitéeUn thème et onze variations
- Les RCT sont-elles le meilleur moyen pour apprendre et accumuler des connaissances utiles ?
- L’inférence statistique est plus simple avec les RCT qu’avec d’autres méthodes
- Les RCT sont rigoureuses et scientifiques
- Validité externe
- Pré-enregistrement des essais
- Expérimentation : donnez un coup de pied et vous verrez
- RCT et autres méthodes
- Petits versus grands effets
- Modèles
- Causalité
- Éthique
- Remerciements
Partie 1 – Que peuvent les RCT ?
Martin Ravallion
Chapitre 1
Les randomistas doivent‑ils (continuer à) faire la loi ?- Introduction
- Fondements de l’évaluation d’impact
- L’influence des randomistas sur la recherche pour le développement
- Pourquoi les randomistas ont-ils autant d’influence ?
- L’influence des randomistas est-elle justifiée ?
- Prendre les objections éthiques au sérieux
- Pertinence pour l’élaboration des politiques publiques
- Paramètres pertinents
- Validité externe
- Lacunes en matière de connaissances
- Adapter les efforts de recherche aux défis des politiques publiques
- Conclusion
Lant Pritchett
Chapitre 2
Randomiser le développementMéthode ou pure folie ?
- Introduction
- Développement national et bien‑être humain
- Le développement national : une transformation des pays dans quatre dimensions
- Développement économique
- Développement administratif
- Développement politique
- Développement social
- Les niveaux de revenu médian/consommation médiane expliquent pleinement la pauvreté
- Le développement national et les indicateurs plus larges du progrès social
- Le développement national permet d’éradiquer la pauvreté et d’atteindre des niveaux élevés de bien-être humain
- Les RCT en développement en tant que méthode pour améliorer le bien-être humain
- Allégation largement admise numéro 1 : l’ampleur des gains issus du développement national est beaucoup plus importante que celle des programmes ciblés
- Allégation largement admise numéro 2 : les études RCT ne répondent pas à la problématique du développement national
- Allégation nécessaire, mais fausse numéro 1 : l’impact de toute recherche (RCT ou autre) sur le développement national (ou des réformes sectorielles) est infime
- Allégation nécessaire, mais fausse numéro 2 : l’évaluation du bien-être humain relève du « fétichisme »
- L’introspection
- La règle d’or
- Allégation nécessaire, mais fausse numéro 3 : les RCT peuvent apporter des preuves fiables permettant d’améliorer les programmes ciblés destinés aux objectifs de développement « fétichistes » (agrégés ou spécifiques)
- Allégation nécessaire, mais (probablement) fausse numéro 4 : les connaissances que les RCT peuvent produire constituent une contrainte essentielle pour l’adoption et la mise en œuvre de meilleurs programmes ciblés
- Conclusion
Jonathan Morduch
Chapitre 3
Le pouvoir subversif des expérimentations aléatoires- Introduction
- Étendre les connaissances en créant des variations
- L’omniprésence de la sous-optimalité et le potentiel d’innovation
- Pourquoi les RCT ?
- Trois exemples
- Les contrats de microcrédit
- Les taux d’intérêt du microcrédit
- Pauvreté, migration et argent mobile
- Défaillance du marché et biens privés
- Conclusion
Timothy Ogden
Chapitre 4
Les expérimentations aléatoires dans l’économie du développement, leurs détracteurs et leur évolution- Introduction
- Les critiques des RCT
- Les critiques « rien de magique »
- Les critiques « boîte noire »
- Les critiques « validité externe »
- Les critiques « signification négligeable »
- Les critiques « saucisse politique »
- Les critiques « éthique »
- Les critiques « trop »
- Le défi de répondre aux critiques
- Qu’est-ce qu’un randomista ?
- L’argumentation derrière les arguments
- L’évolution du « mouvement »
- Adaptation itérative pour la résolution des problèmes
- Premier principe : résoudre des problèmes de performance localement identifiés et définis
- Deuxième principe : instaurer un « environnement favorable » à la prise de décision qui encourage la « déviance positive » et l’expérimentation
- Troisième principe : inscrire cette expérimentation dans des boucles de rétroaction étroites qui facilitent un apprentissage expérientiel rapide
- Quatrième principe : engager activement de larges groupes d’agents pour s’assurer que les réformes sont viables, légitimes, pertinentes et soutenables
- Évolution et critiques des RCT fondées sur la PDIA
- Rien de magique
- Boîte noire
- Validité externe
- Signification négligeable
- Saucisse politique
- Les critiques éthiques
- Trop : la dernière critique
- Conclusion
Partie 2 – Perspectives sectorielles
Andres Garchitorena, Megan B. Murray, Bethany Hedt-Gauthier et al.
Chapitre 5
Réduire le déficit des connaissances dans la prestation de soins de santé à l’échelle mondialeApports et limites des expérimentations aléatoires
- Contexte : les expérimentations aléatoires dans le domaine de la médecine et de la santé mondiale
- Les apports en matière de politiques et de pratiques
- Des conséquences inattendues : un écart croissant en matière de preuves empiriques et de financement dans des secteurs clés de la santé
- Défis et limites
- Au-delà des RCT pour les ODD : des cadres d’évaluation observationnelle pour le renforcement des systèmes de santé et la CSU
- Conclusion
Dean Spears, Radu Ban et Oliver Cumming
Chapitre 6
Essais et tribulationsL’essor et le déclin des expérimentations aléatoires dans le secteur de l’eau, de l’assainissement et de l’hygiène
- Introduction : le besoin de réflexion
- Contexte : les preuves empiriques récentes en matière d’assainissement et de santé infantile
- Les enseignements tirés d’une série d’études
- Les RCT à faible impact
- Les études observationnelles à faible impact
- Les études observationnelles à fort impact
- Les preuves empiriques récentes issues de RCT de grande qualité
- L’étalon-or ? Les défis des RCT dans le secteur de l’assainissement
- L’hétérogénéité des paramètres : des RCT différentes dans le secteur WASH devraient donner des réponses différentes
- Type de WASH
- Type d’assainissement
- Effet communautaire ou propre au foyer
- Densité de population, contexte urbain/rural et autres environnements
- Contexte sanitaire et comportements des populations en matière de santé
- Facteurs culturels et sociaux
- Les erreurs de type 3, les premiers stades faibles et les traitements qui ne traitent pas
- Les sujets importants qui ne seront pas randomisés
- Les questions négligées qui pourraient progresser grâce aux RCT (ou à des études d’intervention ne relevant pas de RCT)
- Conclusion : la bonne utilisation de bonnes preuves empiriques est la seule norme applicable
Florent Bédécarrats, Isabelle Guérin et François Roubaud
Chapitre 7
Les expérimentations aléatoires en microfinanceMiracle ou mirage ?
- Introduction
- RCT et microcrédit : un produit phare en désuétude ?
- Gros plan sur la conception du numéro spécial de l’AEJ:AE
- Exploration détaillée du numéro spécial de l’AEJ:AE : principaux résultats
- Validité et portée du numéro spécial : évaluation critique
- Validité interne
- Le cas emblématique de la RCT marocaine
- Distorsion du protocole : ajustement du produit et de l’échantillonnage
- Mauvaise qualité des données et erreurs de mesure
- Au-delà de la RCT marocaine : évaluation générale
- Validité externe
- Résultats : des biais statistiques aux biais interprétatifs
- Faire table rase des recherches antérieures
- Adhésion
- Microcrédit, travail indépendant et liberté de choix
- Microcrédit, dépenses sociales, transferts sociaux et autosuffisance
- Microcrédit et surendettement
- Conclusion et discussion
- S’affranchir d’une « culture de la donnée »
- Ignorer les critiques
- Contourner l’éthique scientifique
- Que reste-t-il du numéro spécial ?
Partie 3 – Économies politiques
Agnès Labrousse
Chapitre 8
La supériorité rhétorique de Poor Economics- Poor Economics : un succès frappant, une rhétorique persuasive
- Cadre théorique : rhétorique ordinaire, communautés épistémiques et analyse de discours
- Méthodologie et plan
- Hard numbers : la rhétorique du chiffre, le chiffre comme figure rhétorique
- Quantifier et disqualifier
- 99 cents, synecdoque pour la vie des pauvres
- Représentations graphiques : récit incarné et métaphorique, cadrage cognitif
- Qu’est-ce que le monde de Kennedy ? Représenter et réduire le champ des possibilités à deux diagrammes
- La métaphore filée de la courbe en S : quand Ibu Tina tomba dans le piège à pauvreté
- Une saisissante profusion d’anecdotes
- La doctrine : les données des RCT, antidotes à des anecdotes fallacieuses
- La pratique des anecdotes : un foisonnement paradoxal
- Des anecdotes obéissant aux principes du marketing social et du storytelling
- Anecdotes et efficacité caritative : un effet démontré expérimentalement
- Des anecdotes témoignant de l’ethos des auteurs : proximité, familiarité, crédibilité
- Anecdotes, didacticité et distinction
- La discrète fonction heuristique des anecdotes
- Deux schémas rhétoriques aux puissants effets épistémiques et persuasifs
- La voie médiane entre deux extrêmes : bon sens, objectivité et cadrage manipulatoire
- Petites causes, grands effets : des oxymores en défense du « tout micro »
- Remarques finales : des récits persuasifs, mais pauvres
- Une combinaison originale des trois piliers de la rhétorique
- La capacité à réunir différents publics autour d’un contenu commun
- Des narrations pauvres
Robert Picciotto
Chapitre 9
Les randomistas sont‑ils des évaluateurs ?- Introduction
- Éluder les dures leçons de l’histoire de l’évaluation
- Un engagement fondé sur la foi
- Des fondements philosophiques fragiles
- Une loyauté à toute épreuve
- Des conceptions évolutives de l’évaluation
- Retour vers le futur ?
- Les micro-économistes entrent dans la mêlée sur l’efficacité de l’aide
- L’expérimentalisme nouvelle formule
- De la recherche en sciences sociales à l’évaluation
- Le potentiel et les limites des méthodes expérimentales
- Les limites des RCT
- Préoccupations éthiques
- Effets imprévus
- Il existe des alternatives
- Analyse de régression et analyse factorielle
- Modèles quasi expérimentaux
- Modélisation statistique multivariée
- Approches participatives
- Enquêtes et échantillonnage
- Méthode d’élimination générale
- Panels d’experts
- Étude comparative (benchmarking)
- Le marché actuel de l’évaluation favorise les RCT
- Les vagues de diffusion de l’évaluation
- Les sirènes de la recherche médicale
- Des incitations faussées
- Des contributions modestes aux connaissances sur le développement
- Un champ d’application étroit
- Une position paternaliste
- Des contributions limitées à la connaissance
- Les RCT ne sont qu’un outil parmi d’autres
- Dans quelle mesure les RCT sont‑elles évaluatives ?
- Manier les bons outils
- Conclusion
Partie 4 – Quelques pistes de réflexion (ciblées) : éthique et méthode
Michel Abramowicz et Ariane Szafarz
Chapitre 10
Expérimentations aléatoires et éthiqueLes économistes doivent-ils se soucier de l’équipoise ?
Eva Vivalt
Chapitre 11
Utilisation des a priori dans les protocoles expérimentauxQue laisse-t-on de côté en les ignorant ?
James J. Heckman
Épilogue
La randomisation et l’évaluation des politiques sociales revisitées- Préambule
- Le Premier Réveil
- Le Second Réveil
- Introduction
- Questions d’intérêt dans l’évaluation d’un prototype de programme social
- Le problème de l’évaluation
- Un modèle d’évaluation de programme
- Paramètres d’intérêt dans l’évaluation de programmes
- Arguments pour et contre les expérimentations sociales randomisées
- Preuves empiriques sur le biais de randomisation
- À quel stade la randomisation doit‑elle être mise en œuvre ?
- La tension entre les expérimentations sociales comme substitut aux modèles comportementaux et les expérimentations sociales comme source d’information supplémentaire
- Résumé du papier de 1992
- Postscript, 2019
Florent Bédécarrats, Isabelle Guérin et François Roubaud
Entretiens