La méthode expérimentale par assignation aléatoire: un instrument de recomposition de l'interaction entre sciences sociales et action publique en France?

The start of the XXIst century witnessed an unprecedented use of randomized controlled trials to assess public programs across the world. This scientific method has been championed as the most rigorous to assess the impact of public intervention. It has promoted the use of scientific evidence by policy makers through the evidence-based policy movement. Therefore, this method is to be understood as a social institution whose aim is to organize a joint learning between policy actorsand scientists. The study of this interaction is the core of this dissertation, which analyzes how stakeholders’ memberships to their respective strategic action fields drive this method's use in France. Through the execution of this method, we observe a range of different institutional sites. They are testimonies of the opposing practices, interests and learning patterns of theactors involved. This dissertation analyses 15 case studies of this method's implementation in France. It reveals the inherent tensions at work in its use on new social programs, and challenges this method's ability to produce a joint learning between policy actors and scientists.Depuis le début des années 2000, le recours à la méthode expérimentale par assignation aléatoire pour évaluer les dispositifs publics connait un essor mondial sans précédent. Cette méthode scientifique est présentée par ses promoteurs comme la plus rigoureuse pour estimer l’impactd’une intervention ainsi que la mieux à même de favoriser la prise en compte des preuves scientifiques par les décideurs politiques. Son utilisation dans le cadre de l’evidence-based policy nous amène à considérer cette méthode comme un instrument, une institution sociale, visant à organiser un apprentissage commun entre les acteurs de l’action publique et les acteurs scientifiques. L’observation de cette interaction constitue le coeur de ce travail de recherche. Ce dernier étudie comment l’inscription de ses parties prenantes dans leurs champs d’action stratégiques respectifs conditionne l’usage de cette méthode sur le territoire français. Celle-ci se décline alors, en une variété de sites institutionnels témoignant des oppositions entre les pratiques, les intérêts, et les modèles d’apprentissages des acteurs la composant. Notre analyse de 15 études de cas de son utilisation sur le territoire français, révèle les tensions inhérentes à l’application de cette méthode sur de nouveaux dispositifs d’intervention sociale, et questionne ses capacités à produire un apprentissage commun entre acteurs de l’action publique et acteurs scientifiques

L’expérimentation « telle qu’elle se fait » : leçons de trois expérimentations par assignation aléatoire

Les expérimentations sociales peuvent-elles construire une logique d’apprentissage commune entre les acteurs de l’action publique et les chercheurs participant à leur évaluation ? A partir des expérimentations évaluées par la méthode expérimentale par assignation aléatoire, cette contribution étudie la capacité de cette méthode à structurer les apprentissages des acteurs. Trois expérimentations, découpées en trois séquences d’interactions, révèlent les lignes de tensions et les conditions d’apprentissage propres à la conduite de cette méthode.Can experiments lead to a joint learning process between policy actors and scientists conducting their evaluation ? Grounded on experimental projects assessed by randomized controlled trials, this article studies this method ability to structure learning among its stakeholders. Three experiments, divided in three interaction sequences, reveal the tensions and the conditions of learning carried by this method of evaluation.Kann aus sozialen Experimenten eine Ausbildungslogik entstehen, die von den Akteuren der öffentlichen Hand und den an der Evaluierung beteiligte Forschern geteilt wird ? Ausgehend von den Experimenten, die mit der Experimentiermethode der Zufallsauswahl evaluiert wurden, soll dieser Beitrag die Möglichkeiten der Methode untersuchen, die Ausbildungen der Akteure zu strukturieren. Drei in drei Interaktionsabschnitte aufgeteilte Experimente zeigen die Spannungslinien und Ausbildungsbedingungen auf, die bei dieser Methode typisch sind.Las experimentaciones sociales ¿pueden construir una lógica de aprendizaje común entre los actores de la acción pública y los investigadores que participan en su evaluación ? A partir de experimentaciones evaluadas por el método experimental por asignación aleatoria, esta contribución estudia la capacidad de este método para estructurar los aprendizajes de los actores. Tres experimentaciones, recortadas en tres secuencias de interacciones, revelan las líneas de tensiones y las condiciones de aprendizaje propias de la aplicación de este método

L’évaluation « basée sur la théorie », entre rigueur scientifique et contexte politique

Cette contribution propose de revenir sur le courant de l’évaluation basée sur la théorie. Davantage une démarche évaluative qu’une méthode d’évaluation, il convient d’identifier ce qui unifie ce courant, comment il conçoit l’évaluation ainsi que sa définition de la théorie et son utilisation. S’appuyant sur les travaux de l’analyse des politiques publiques et de la sociologie de l’action publique, cette démarche propose une évaluation intégrée à son contexte politique prenant en compte son fonctionnement. La théorie peut alors devenir un outil structurant de l’évaluation contribuant à ouvrir la « boîte noire » des politiques publiques, fédérer l’apprentissage des acteurs publics, établir la causalité et même construire la transférabilité des résultats d’évaluation à d’autres contextes en s’inscrivant dans une épistémologie réaliste.This paper drives the attention of the reader to the stream of theory based evaluation. More an evaluative approach than an evaluation method, the author first identifies what unifies this stream, how it understands evaluation and its definition and use of theory. Grounded on academic work on public policy analysis and sociology of public action, this approach offers an evaluation integrated to its political context and taking into account its functioning. Hence, theory can become a structuring tool of evaluation contributing to open the “black box” of public policies, fostering learning from public actors, establishing causality and even building transferability of evaluation results to other contexts grounded on the realist epistemology

Chapitre 14- Comment évaluer les impacts des innovations en agronomie ?

Résumé. Depuis les années 2000, les chercheurs engagés dans une démarche d’innovation doivent répondre à des impératifs d’évaluation émanant de bailleurs de fonds, d’agences nationales de recherche et de développement, ou de la société civile. Afin de satisfaire cette demande, les chercheurs, dans le champ de l’agronomie, doivent mobiliser des méthodes et des outils leur permettant de rendre compte des effets de leurs propositions non seulement sur le plan agronomique, mais aussi sur les plans économique, social ou environnemental. Ce chapitre présente les différentes méthodes d’évaluation pouvant être mobilisées, ainsi que les arbitrages à effectuer afin de choisir l’approche la plus adaptée à l’innovation étudiée ainsi qu’aux questions posées par l’évaluation. Deux études de cas portant sur l’utilisation de méthodes d’évaluation de l’impact de la recherche, conduites dans le cadre des projets ImpresS et Impresa, sont présentées et discutées

Comprendre la contribution de la recherche à l'innovation collective par l'exploration de mécanismes de renforcement de capacité

Le renforcement des capacités à innover apparaît comme un nouveau moyen pour assurer un développement durable dans les pays du Sud. Dans le secteur de l'agriculture, l'innovation est essentiellement collective, ce qui appelle les chercheurs à sortir de leur rôle de producteurs de connaissances pour s'engager auprès des acteurs en situation d'innovation. Si une diversité de pratiques de recherche engagée sont apparues, il n'existe cependant pas aujourd'hui une vision claire des différentes façons dont les chercheurs contribuent à l'innovation. L'objectif de cet article est d'identifier les différentes modalités de contribution des chercheurs au renforcement des capacités à innover. Pour cela, les auteurs ont développé un cadre d'analyse ex post qui met en perspective deux corpus de littérature, sur l'apprentissage et le management de l'innovation. Ce cadre permet de caractériser des séquences de situations d'apprentissage et une diversité de postures des chercheurs aux différentes étapes de l'innovation pour rendre compte de leurs contributions. À partir d'une étude approfondie de treize cas d'innovation dans lesquels le Centre de coopération internationale en recherche agronomique pour le développement (CIRAD) s'est engagé avec ses partenaires de recherche du Sud, quatre types de contribution des chercheurs au renforcement des capacités à innover ont été identifiés : faciliter des apprentissages de façon non supervisée, planifier et encadrer des apprentissages, créer des besoins d'apprentissage et y répondre pas à pas, se laisser guider par l'exploration et les besoins des utilisateurs. Nos résultats suggèrent qu'une gestion stratégique des processus d'innovation par les organismes de recherche pourrait être rendue possible par le suivi et l'évaluation des situations d'apprentissage, d'une part de façon à renforcer les capacités à innover des chercheurs eux-mêmes et d'autre part pour agencer au mieux les compétences et ressources disponibles, faire évoluer les mandats des chercheurs et rationaliser leurs investissements. (Résumé d'auteur