Cet article est écrit par Stephen Fraser, directeur général adjoint de la Education Endowment Foundation (EFF), qui fait partie du réseau britannique What Works.

«Nous avons tellement de temps et si peu à faire. Frappez cela, inversez-le.
- Roald Dahl

Pour le décideur politique éclairé par des preuves, le temps peut sembler le méchant. Trop souvent, le monde conspire pour nous priver du temps dont nous avons besoin pour définir le problème politique, susciter l'adhésion des citoyens et des parties prenantes, rassembler les preuves, tester le contrefactuel, surveiller l'impact, reproduire les conclusions - tout ce qui pourrait être nécessaire pour construire la confiance nécessaire pour conseiller et agir.

Mais peut-être que le problème n'est pas le temps mais le modèle linéaire décrit ci-dessus. Après tout, il est peu probable que les gouvernements aient souvent, voire jamais, le temps de planifier pour répondre à des questions qu'ils n'ont pas encore prévu de poser.

Alors, comment un fonctionnaire attentif et responsable peut-il trouver le meilleur équilibre entre la rigueur et l'urgence? Y a-t-il un retourneur de temps pour les preuves?

L'humilité d'abord

"Il n'y a pas de limite à ce qui peut être réalisé, tant que vous ne vous souciez pas de qui obtient le crédit"
- crédité à beaucoup

Peut-être que la première étape consiste à agir avec humilité et à vouloir apprendre des autres. Tout comme l'avènement de la médecine factuelle au cours du dernier demi-siècle a donné naissance à des ressources telles que la bibliothèque Cochrane , un éventail aussi varié de domaines, y compris le développement international et les sciences sociales, ont commencé à bénéficier d'investissements dans des dépôts de preuves accessibles. qui nous permettent de commencer avec ce que nous savons.

Jack Martin de la Early Intervention Foundation (EIF) a brièvement décrit l'éventail des référentiels de preuves disponibles via le What Works Network du Royaume-Uni, soulignant la nécessité de prendre en compte les questions de qualité, de pertinence et de rentabilité des preuves dans le processus décisionnel.

Comment restons-nous fidèles à l'évidence, tout en l'adaptant intelligemment à notre contexte?

Ces ressources résument de grandes quantités de résultats de recherche et nous aident à déterminer si un programme ou une approche est susceptible d'être un bon pari pour résoudre notre défi spécifique en matière de politiques ou de pratiques. Ils nous aident simultanément à éviter le risque de trop s'appuyer sur une seule étude, nous permettent de comprendre dans quelle mesure la faisabilité d'une approche a été testée dans des conditions réelles et nous aident à contourner le temps habituellement nécessaire pour générer et synthétiser des résultats de recherche complexes.

La boîte à outils d'enseignement et d'apprentissage de l' Education Endowment Foundation, par exemple, peut donner aux décideurs une réponse toute faite à la question de savoir si les élèves qui n'atteignent pas un niveau d'apprentissage donné à la fin de chaque année devraient être tenus de répéter cette année (il y a est une preuve moyennement bonne qu'elle est susceptible d'entraîner un impact négatif sur l'apprentissage et d'être très coûteuse à mettre en œuvre).

Demandez «comment» plutôt que «quoi»

"Ça ne marchera jamais ici."
- à peu près tout le monde à un moment donné

Mais bien sûr, l'utilisation de ces référentiels n'offre aucune garantie de succès. Ils décrivent ce qui a fonctionné, plutôt que ce qui fonctionnera. La question devient donc rapidement une question de généralisabilité. Si les preuves existantes offrent des promesses sans garantie, comment pouvons-nous maximiser les chances de succès? Comment pouvons-nous rester fidèles à l'adoption de la preuve, tout en l'adaptant intelligemment à notre contexte?

Mary Ann Bates et Rachel Glennerster offrent un cadre utile en quatre étapes pour déterminer la probabilité que les résultats de recherche existants sur un programme ou une approche puissent être généralisés à un nouveau contexte. Ils demandent:

  1. Quelle est la théorie désagrégée derrière le programme?
  2. Les conditions locales s'appliquent-elles à cette théorie?
  3. Quelle est la force des preuves du changement de comportement général requis?
  4. Quelles sont les preuves que le processus de mise en œuvre peut être bien mené?

Ces questions nous portent au-delà de «ce qui fonctionne?», Et même au-delà de «ce qui fonctionne, pour qui et dans quelles circonstances?» et nous amener à des questions sur la façon dont une approche semble fonctionner ou non, reliant le contexte, le mécanisme et le résultat.

Intégrer les attentes en matière de preuves dans le tissu de la prise de décision publique

Ce n'est pas le fait de répéter une année qui est intrinsèquement préjudiciable à l'apprentissage des élèves. En effet, certaines études ont montré des avantages. Mais lorsque nous demandons comment la répétition d'une année conduit généralement à des impacts négatifs, nous commençons à voir que la répétition d'une année peut affecter l'estime de soi des élèves, peut risquer l'isolement social et le désengagement, risque une exposition répétée au même programme et une baisse des attentes qui le rythme des progrès d'apprentissage correspondra à celui des pairs.

Equipés d'une compréhension non seulement de ce qui fonctionne mais aussi de la manière, nous pouvons commencer à nous engager avec les mécanismes comportementaux, cognitifs ou physiques par lesquels l'apprentissage est affecté, et commencer à nous demander s'il s'applique dans nos circonstances.

Venez préparé

L'opportunité frappe mais une fois
- Proverbe

C'est un ministre rare qui est heureux ou capable d'attendre plus de quelques jours pour une réponse politique; comme la crise de Covid-19 l'a mis en évidence avec des conséquences tragiques, quelques semaines sont parfois les meilleures que nous puissions espérer et nous aurons rarement une seconde chance de répondre à la même question. Et donc l'impératif doit être préparé.

Changer les attentes culturelles quant à la façon dont les preuves sont appliquées

Intégrez les attentes en matière de politique fondée sur des données probantes dans le tissu de la prise de décision publique - dans le recrutement, l'initiation et l'apprentissage professionnel continu pour les équipes politiques, dans les modèles de mémoires du Cabinet et de décisions budgétaires, dans la communication publique de la justification des politiques. Trompez le temps en investissant dans une infrastructure de preuves à long terme (le financement de l'équivalent d'une approche What Works est un excellent point de départ) et, finalement, changez les attentes culturelles quant à la façon dont les preuves sont appliquées.

C'est une chose de convaincre un ministre de la nécessité de preuves; un autre exemple si le ministre attend dès le départ des conseils fondés sur des données probantes. Plus les dirigeants du secteur public peuvent intégrer l'utilisation des données probantes dans la culture et la pratique, plus nous avons de chances de répondre aux demandes de questions de politique publique toujours plus complexes, en constante évolution et toujours urgentes.

Et enfin, nous pouvons apprendre de l'exemple de Pedro Cunho, l'ancien directeur général adjoint portugais de l'éducation, qui a littéralement porté les preuves avec lui - une copie imprimée de la boîte à outils de l'enseignement et de l'apprentissage de l' EEF , prête à déposer le moment où la discussion a appelé à preuve. Pedro a gardé ses preuves tourneur de temps dans sa poche. - Stephen Fraser

(Crédit photo: Unsplash)

N'oubliez pas de partager vos propres réflexions avec l'auteur en laissant un commentaire ci-dessous