Revue systématique

Les revues systématiques demandent un investissement conséquent en temps et force de travail lorsque c'est la première fois que la question de synthèse est formulée. Par contre, leur grande traçabilité et l'archivage de toutes les étapes permettent par la suite une mise à jour plus facile, en fonction de l'avancement des connaissances.

Les revues systématiques permettent :

• d'identifier des lacunes dans un ensemble de preuves : manque de recherche, recherches ayant utilisé des méthodes très différentes, faiblesses dans les méthodes des études, ...
• ...ou au contraire de mettre en avant lorsque des recherches supplémentaires ne semblent pas nécessaires lorsque les résultats sont bien établis et cohérents.
• de synthétiser un ensemble de preuves ce qui peut réduire le temps requis pour lire chaque étude individuelle
• d'examiner des résultats conflictuels ou des querelles d'experts ou de chapelles... de manière objective, en essayant de savoir d'où provient la variabilité des résultats. Les méta-analyses, analyses de sensibilité, la possibilité de regarder l'influence de variables confondantes (y compris la source du financement des études prises en compte) permet d'aller plus loin que bien des revues de littératures classiques ;
• d'apporter des arguments robustes pour la décision et la négociation ;
• d'élever des garde-fous vis-à-vis de tentatives d'influencer les résultats, ceci grâce à la transparence de la méthode, à la relecture par les pairs du protocole et du rapport final, à la publication du protocole de la revue avant sa conduite et à la surveillance des garants (Collaborations) par leur implication ou les journaux qui publient des revues avec tous leurs documents connexes.

Certains programmes de doctorat européens acceptent que la thèse de doctorat soit fondée entièrement ou en partie sur une revue systématique [2].

1. Identification d'une question de recherche jugée importante, d'une incertitude
2. Sélection des auteurs et des parties impliquées dans la réalisation (consommateurs, politiciens, bibliothécaires, statisticiens, patients, experts du domaine, chercheurs, etc.) avec possible gestion des conflits d'intérêts (ex : exclusion des personnes ayant un intérêt dans les résultats)
3. Formulation d'une question de recherche
   1. En santé et en travail social l'acronyme PICO décrivant des éléments pertinents à inclure dans cette question est souvent utilisé, PICO signifie Population/Perspective/Problème, Intervention [ou exposition], Comparaison, Outcomes/résultats. La Temporalité et les Studies/études sont parfois ajoutés.
4. Établissement des critères d'inclusion et d'exclusion prédéfinis indiquant quelles études seront incluses ou non
5. Réalisation d'un plan d'étude (protocole) suivant les normes de bonne pratique (ex: normes PRISMA, PRISMA-P ou MECIR)
   1. Création d'éventuels formulaires d'extraction des données (ex : tableau avec des espaces pour le titre de l'étude, son année de publication, etc.)
6. Enregistrement et publication du protocole de l'étude et de son titre (ce qui évite les doublons et réduit le risque de ne pas publier des analyses planifiées ou de rajouter des analyses non planifiées*) dans un registre spécialisé (ex: Prospero)
7. Recherche des études pertinentes dans la littérature scientifique (publiée ou non, en cours ou terminées) et dans la littérature grise
8. Sélection des études jugées pertinentes après lecture complète des articles, exclusions
9. Traduction des études en langue étrangère (si nécessaire)
10. Extraction des données (ex: titre de l'étude, année de publication, participants, interventions, comparateurs, résultats)
11. Évaluation du risque de biais des études incluses (par exemple avec l'outil d'évaluation du risque de biais Cochrane)
12. Présentation des résultats (ex: tableaux de "Résumé des résultats")
13. Analyse des données, évaluation de la certitude des preuves et éventuelle(s) synthèses statistiques (méta-analyse(s))
14. Présentation des modifications réalisées au plan d'étude (si présentes)
15. Écriture des conclusions
16. Révision et relecture par des pairs avant publication
17. Dissémination des résultats (ex: conférences, vidéos, flyers, billets de blog, traductions, présentations, articles)
18. Mises à jour (soit planifiées, dès l'apparition de nouvelles preuves ou selon les demandes existantes, par ex : demande de l'OMS durant une épidémie)

Des logiciels spécialisés, parfois gratuits, facilitant la réalisation des revues systématiques existent (ex: RevMan, RevManHal, GRADEpro, RobotReviewer, Covidence, EPPI-Reviewer, Abstrackr, SUMARI, CReMS, etc.) et ont été regroupés sur un site web spécialisé.

A but comparatif, une revue systématique Cochrane complète nécessite environ 2 ans de travaux depuis la réalisation du plan d'étude avant que celle-ci ne soit publiée et l'équivalent de 1100 heures de travail [5].

*les revues systématiques étant souvent rétrospectives (focalisées sur des études déjà publiées), la protection contre ce risque peut être limitée [6]

• De nombreuses revues systématiques ne sont jamais mises à jour [5].
• Réaliser une revue systématique peut prendre un temps considérable (souvent plus de 6 mois). Il est ainsi possible que de nouvelles preuves modifiant les conclusions d'une revue systématique soient publiées durant sa réalisation mais ne soient pas incluses dans celle-ci.Il est également possible que la revue systématique soit publiée trop tard pour ses utilisateurs-cible (par ex : après qu'une épidémie soit terminée).
• L'exhaustivité d'une revue systématique n'est pas garantie : il reste très souvent possible que des preuves (publiées ou non) n'aient pas été découvertes (par ex : articles dans une base de données n'ayant pas été parcourue par manque d'accès, articles manqués par erreur, articles en langue étrangère, articles payants inaccessibles)
• Une revue systématique dépend des preuves existantes et accessibles. Lorsque celles-ci sont absentes, insuffisamment rapportées, biaisées (ex : preuves en faveur d'une intervention toutes publiées contre une minorité des preuves en défaveur) ou de très mauvaise qualité, il est possible qu'une revue systématique ne soit pas en mesure d'établir des conclusions ou que ses conclusions soient peu fiables.
• Lorsque plusieurs revues systématiques sur un même thème présentent des conclusions différentes, cela peut introduire une confusion.
• Une revue systématique peut être mal réalisée (ex : les auteurs ne suivent pas leur plan d'étude et n'indiquent pas pourquoi) et sa publication n'implique pas forcément une modification des pratiques des parties intéressées. En 2017, Page et al. ont estimé que seulement 6% des protocoles de revues systématiques incluses dans le registre PROSPERO décrivent avec suffisamment de détails les résultats (outcomes) les intéressant [8].

Des outils spécifiques ont été développés pour évaluer la qualité de la réalisation (qualité méthodologique) d'une revue systématique, tels que l'outil AMSTAR II. L'outil CASP permet également d'évaluer l'applicabilité des résultats. L'outil AMSTAR II [9] implique par exemple d'évaluer 16 points dont :

• a) dans quelle mesure la revue systématique a suivi un protocole préalablement publié (ont-ils suivi leur plan?)
• b) si l'extraction des données a été réalisée par deux auteurs de manière indépendante
• c) si les études exclues après lecture complète de l'article ont été rapportées avec leurs motifs d'exclusion (expliquent-ils les exclusions?)
• et d) si la recherche des études pertinentes était suffisamment exhaustive (ont-ils trouvé toutes les preuves pertinentes?)

Certains outils [9] recommandent spécifiquement de ne PAS calculer un score total lors de l'évaluation critique (ex : X points sur 16) car ceux-ci prédisent mal la fiabilité de l'étude. Par exemple une revue systématique bien conçue obtenant un bon score total (ex : 15 points sur 16) mais perdant un point car ses auteurs ont inclus toutes les études identifiées sans juger de leur qualité risque d'être peu fiable (les résultats pourraient être basés sur des études très mal réalisées) mais aurait obtenu un bon score total.

Liste d'outils d'évaluation d'une revue systématique dans le domaine :

• Education : Modèle:Missing information
• Sciences sociales : Modèle:Missing information
• Soins infirmiers : Echelle du Joana Briggs Institute (JBI)
• Sciences sociales et de la santé : AMSTAR II [9], l'outil CASP, l'outil du Center for Evidence Based Medicine (CEBM), l'outil ROBIS portant sur le risque de biais
• Management : Echelle du Center for Evidence-Based Management (CEBMa)
• Autre : l'outil de l'Autorité européenne de sécurité des aliments (EFSA) [10]

• Les revues systématiques "vivantes" ou "actualisées" (living systematic reviews) sont des revues systématiques régulièrement mises à jour (tous les 6 mois ou moins) ayant pour objectif d'incorporer les nouvelles preuves au fur et à mesure que celles-ci apparaissent dans la littérature [11]. L'objectif étant en partie d'éviter qu'une revue systématique ne soit déjà obsolète quelques mois après sa publication [12]. Il est notamment recommandé de réaliser celles-ci lorsque des incertitudes persistent quant à une question jugée importante et lorsqu'il est jugé probable que de nouvelles preuves soient publiées dans un futur proche [13]. Les revues systématiques vivantes nécessitent qu'une revue systématique "standard" soit préalablement réalisée [13]. Certains auteurs sont préoccupés par le risque augmenté que des erreurs s'introduisent lors des multiples mises à jour et par les possibles difficultés que pourraient rencontrer les professionnels de la santé pour rester à jour face à ces documents régulièrement modifiés [12].
• Les revues rapides (rapid reviews) sont des revues de la littérature s'inspirant des méthodes de réalisation des revues systématiques mais abrégeant celles-ci de manière à obtenir des résultats dans des délais plus courts (habituellement <3 mois) [14]. Leur comparabilité face aux revues systématiques "standard" reste mal établie [14], bien qu'une comparaison ait montré que les conclusions de recherches systématiques ou abrégées peuvent être très similaires [15].
• Les aperçus d'un ensemble de revues systématiques (umbrella reviews ou systematic review overviews) sont des revues systématiques synthétisant d'autres revues systématiques de manière à regrouper un ensemble de résultats [16]^,[17]. Ceux-ci permettent de mettre en avant les points communs et les différences entre les différents résultats observés. Il n'existe actuellement que peu de guides pour leur réalisation dans le domaine de la santé [17].
• Certains développeurs travaillent sur des outils permettant d'envoyer automatiquement les tableaux de résultats des revues systématiques jusqu'à Wikipédia lorsque ceux-ci sont publiés [18].
• Le récent réseau LATITUDES (LATITUDES Network) vise à regrouper et à faciliter la découverte et l'utilisation des meilleurs outils d'évaluation de la qualité ou du risque de biais qu'il est possible d'utiliser dans les revues systématiques [19].
• Cochrane Crowd et TaskExchange permettent à des volontaires provenant du monde entier de participer à la réalisation des revues systématiques Cochrane.Il est également possible de traduire bénévolement les revues systématiques Cochrane de l'anglais jusqu'au Français.

Il existe dans le monde trois Collaborations visant à développer la méthodologie des revues systématiques, ses outils, et d'en garantir les standards de qualité :

1. la Collaboration Cochrane [20] s'occupe de revues systématiques en médecine ;
2. la Collaboration Campbell [21], produit des revues systématiques en sciences humaines et sociales (éducation, pauvreté, criminologie...) ;
3. la Collaboration for Environmental Evidence[22] produit et publie des revues systématiques pour la gestion de l'environnement et la conservation de la biodiversité, des habitats et des services écosystémiques.

Ces trois Collaborations travaillent ensemble sur des questions mixant les différentes problématiques (ex: santé environnementale qui associe biodiversité et santé dans une approche One health maintenant promue par l'ONU).

Celles-ci fournissent des directives et des guides de bonne pratique pour la bonne conduite des revues systématiques (par ex: le Cochrane Handbook for Systematic Reviews of Interventions).

Des formations portant sur la réalisation d'une revue systématique sont disponibles en français :

• Au travers du BEST, un centre en collaboration avec le Joana Briggs Institute (JBI) à Lausanne, hôpital du CHUV, en Suisse
• Au travers du centre Cochrane Suisse situé à Lausanne et via le centre Cochrane France situé à Paris
• A l'université de Genève, en Suisse
• Au travers de vidéos mises en ligne

• Durach, C.F., Kembro, J. & Wieland, A. (2017). A New Paradigm for Systematic Literature Reviews in Supply Chain Management. Journal of Supply Chain Management, 53 (4). DOI:10.1111/jscm.12145
• Higgins JPT, Green S (editors). Cochrane Handbook for Systematic Reviews of Interventions Version 5.1.0 [updated March 2011]. The Cochrane Collaboration, 2011. Available from http://training.cochrane.org/handbook

• Portail des sciences de l’information et des bibliothèques