Évaluation par les pairs : comment les organismes de financement de la recherche évaluent la qualité scientifique des travaux

Qu'est-ce que l'évaluation par les pairs ?

L'évaluation par les pairs consiste en l'examen de propositions de recherche par des experts indépendants spécialisés dans le domaine concerné. Ces évaluateurs examinent la qualité scientifique, la faisabilité et l'intérêt des projets, et leur avis détermine quels projets un bailleur de fonds doit soutenir. C'est le mécanisme qui confère une crédibilité scientifique aux décisions d'octroi de financements à la recherche.

Sa caractéristique principale réside dans l'expertise. Une évaluation générale permet de déterminer si une proposition est bien rédigée ou si elle s'inscrit dans le cadre d'un programme ; seul un expert en la matière est en mesure d'apprécier si les fondements scientifiques sont solides, novateurs et réalisables, ce qui est précisément ce qui détermine les décisions en matière de financement de la recherche.

‍

En quoi l'évaluation par les pairs diffère-t-elle de la notation des candidatures ?

L'évaluation par les pairs est une forme spécialisée d'évaluation par des experts ; elle ne doit pas être confondue avec la notation générale des candidatures. Cette dernière consiste à attribuer des notes aux candidatures selon une grille commune que tout évaluateur formé est en mesure d'appliquer ; l'évaluation par les pairs, quant à elle, fait appel à des experts indépendants capables d'évaluer le fond de la recherche elle-même.

Ces deux aspects peuvent aller de pair : les évaluateurs par les pairs notent souvent les propositions en fonction de critères définis. Mais ce qui fait la différence, c'est qui procède à l'évaluation et sur quelle base : une expertise approfondie du domaine appliquée au mérite scientifique, plutôt qu'une grille d'évaluation générique portant sur la présentation et l'adéquation du projet.

‍

Qu'est-ce qui rend la mise en œuvre de l'évaluation par les pairs si difficile ?

L'évaluation par les pairs pose des défis en matière de coordination et d'intégrité que la notation générale ne présente pas. Il faut recruter les évaluateurs au sein d'un groupe restreint d'experts, gérer leur charge de travail et regrouper leurs notes de manière équitable, souvent pour un grand nombre de propositions et avec plusieurs évaluateurs par proposition.

Étant donné que les experts sont généralement issus de la même communauté que les candidats, le conflit d'intérêts constitue un risque structurel plutôt qu'occasionnel. Une gestion rigoureuse des déclarations et des récusations est essentielle pour garantir la crédibilité et la légitimité de l'évaluation par les pairs.

‍

Coordination de l'évaluation par les pairs au sein d'une plateforme

Une plateforme de gestion des subventions de recherche prend en charge les aspects techniques de l'évaluation par les pairs : attribution des propositions aux évaluateurs, gestion des conflits d'intérêts et des récusations, collecte des notes attribuées en fonction des critères, et consolidation de ces notes en vue d'une décision de financement, afin que ce processus d'expertise exigeant reste organisé et vérifiable.