Lecture critique d’une méta-analyse

Présentation au sujet: "Lecture critique d’une méta-analyse"— Transcription de la présentation:

1 Lecture critique d’une méta-analyse
Catherine Hill Biostatistique et Epidemiologie Institut de cancérologie Gustave Roussy Membre de nombreux comités de surveillance d’essais dont, dans le SIDA : PENTA, DART, ESPRIT, MDP,.. Lecture critique d’une méta-analyse

2 Définition Méta-analyse : synthèse quantitative exhaustive des résultats des études étudiant la même question Indispensable pour aboutir à une conclusion unique, aussi argumentée que possible. Une méta-analyse est plus qu’une revue systématique, qui fait la même chose sans la synthèse quantitative

3 Pourquoi faire une méta-analyse ?
Supposez que vous vouliez étudier les relations entre - circoncision et - infection par le VIH chez les homosexuels masculins

4 17 études de la relation entre circoncision et infection par le VIH chez les homosexuels masculins
9 ne trouvent pas de différence significative 5 concluent que la circoncision est significativement protectrice 1 conclut que la circoncision est presque significativement protectrice 1 conclut que la circoncision augmente significativement le risque 1 ne trouve pas de différence globale mais un effet protecteur en cas de rapport anal actif

5 Quelle conclusion tirer de l’ensemble de ces études ?
Les résultats sont-ils cohérents : plus de la moitié ne montrent pas d’effet protecteur de la circoncision : est-ce seulement parce que l’effet n’est pas très important et que ces études sont trop petites ? Si les résultats sont significativement hétérogènes, pouvons nous expliquer l’hétérogénéité par une ou plusieurs caractéristiques des études ou des sujets ?

6 Méta-analyse de Millett et al. JAMA 2008, erratum 27 mars 2009
Circumcision status and risk of HIV and sexually transmitted infections among men who have sex with men, a meta-analysis. Objectif : Evaluer l’association entre circoncision et risque d’infection par le VIH ou autres infections sexuellement transmises chez les homosexuels masculins

7 Comment faire une méta-analyse
Définir la question à étudier Le risque d’infection à VIH est-il plus bas chez les homosexuels circoncis que chez les non circoncis ? Chercher systématiquement les études dans : Bases de publications Medline, Science direct,… jusqu’en fév. 2008, études contenant les mots clés circoncision (ou circoncis) et homosexuel (ou gay, MSM,…). Plus dans références d’articles pertinents, compte rendu de congrès,…

8 Comment faire une méta-analyse, suite
Définir les critères de sélection des études, Dans la méta-analyse de Millett, étude devant inclure des homosexuels masculins dans la population étudiée avoir la circoncision comme variable étudiée donner une information quantitative (valeur ou p) sur l’association entre circoncision et prévalence du VIH

9 Millett et al. JAMA 2008

10 Processus de sélection des études, méta-analyse de Millett
4337 références -4304 ne parlent pas des homosexuels masculins 33 pertinentes -15 exclues : 3 commentaires, 8 sans étude du risque d’infections 4 sans séparation des homo et des hétérosexuels 18 études mesurant l’association entre circoncision et risque d’infection (VIH ou infections sexuellement transmissibles) chez des homosexuels masculins - 3 études : 1 avec seulement des homosexuels VIH sans envoi de données complémentaires ou envoi non interprétable

11 Résultats d’une méta-analyse
Description des études sélectionnées Études du risque d’infection VIH 8 VIH et sex. transmises 6 Sexuellement transmises 1 Total 15

12 Référence Type étude* Effectif %circoncis %VIH+
Bartholow (USA+..) Prosp % 7% Begley (USA) Transv % 13% Buchbinder (USA) Prosp % Buchbinder (USA) Prosp % 4% Calzavara (Canada) Cas/tém 15 73% Kreiss (USA) Transv % 63% Kumta (Inde) Transv % 17% Lai (Taiwan) Transv % 6% Millett (USA black) Transv % 52% Millett (USA latino) Transv % 36% Mor (USA) Transv % 72% Reid (UK) Transv % 5% Sanchez (Perou+Equ) Transv % 11% Tabet (Perou) Transv 440 8% 19% Templeton (Australie) Prosp % 3% Total * Étude Prospective (suivi de 6 mois), Transversale, Cas-témoin Information déclarée versus vérifiée

13 Référence Circoncis Non circoncis
VIH+/Total (%) VIH+/Total (%) Bartholow (USA+..) 315/ % 47/709 7% Begley (USA) 81/ % 19/126 15% Buchbinder (USA) ? ? Buchbinder (USA) 52/999 5% 28/788 4% Calzavara (Canada) 2/11 18% 2/4 50% Kreiss (USA) 254/422 60% 59/77 77% Kumta (Inde) 2/27 7% 19/95 20% Lai (Taiwan) 5/154 3% 28/402 7% Millett (USA black) 425/794 54% 138/285 48% Millett (USA latino) 116/317 37% 232/640 36% Mor (USA) 8 942/ % 5 960/ % Reid (UK) 188/3089 6% 538/ % Sanchez (Perou+Equ) 13/123 11% 301/ % Tabet (Perou) ? ? Templeton (Australie) 29/938 3% 13/488 3%

14 Référence Nb sujets OR(IC95%) Bartholow (USA+..) 5090 1.09 (.79-1.50)
OR et IC95% Référence Nb sujets OR(IC95%) Bartholow (USA+..) ( ) Begley (USA) ( ) Buchbinder (USA) ( ) Buchbinder (USA) ( ) Calzavara (Canada) ( ) Kreiss (USA) ( ) Kumta (Inde) ( ) Lai (Taiwan) ( ) Millett (USA black) ( ) Millett (USA latino) ( ) Mor (USA) ( ) Reid (UK) ( ) Sanchez (Perou + Equat) ( ) Tabet (Perou) ( ) Templeton (Australie) ( ) Total ( ) OR: odds ratio ≈rapport risque d’infection circoncis/non circoncis

15 Référence Nb sujets OR(IC95%) Bartholow (USA+..) 5090 1.09 (.79-1.50)
OR et IC95% Référence Nb sujets OR(IC95%) Bartholow (USA+..) ( ) Begley (USA) ( ) Buchbinder (USA) ( ) Buchbinder (USA) ( ) Calzavara (Canada) ( ) Kreiss (USA) ( ) Kumta (Inde) ( ) Lai (Taiwan) ( ) Millett (USA black) ( ) Millett (USA latino) ( ) Mor (USA) ( ) Reid (UK) ( ) Sanchez (Perou + Equat) ( ) Tabet (Perou) ( ) Templeton (Australie) ( ) Total ( ) OR: odds ratio ≈rapport risque d’infection circoncis/non circoncis Test d’hétérogénéité : 142=34,7 p=0,002 0.1 1.0 3.0

16 Exploration de l’hétérogénéité
Les résultats sont hétérogènes. Pour explorer l’hétérogénéité, en fonction d’une caractéristique, par exemple la qualité des études, on regroupe les résultats des études en fonction de leur qualité et on compare les résultats dans les études les mieux faites et dans les autres études.

17 Circoncision moins bien
Sous groupes Odds Ratio Test d’hétérogénéité (a) Circoncision p = 0.48 Déclarée Examinée (b) Statut HIV p = 0.60 Déclaré Testé (c) Etude Prospective p = 0.50 Transversale (d) Pays p = 0.58 USA Autre développé En développement (e) HAART p = 0.001 Avant HAART Après HAART (f) Qualité de l’étude p = 0.70 Meilleure Moins bonne 0.25 1.00 4.00 Circoncision mieux | Circoncision moins bien

18 Grille de lecture d’une méta-analyse
Est-ce que les résultats sont valides ? Objectif bien défini Critère de sélection des études adéquat Quels sont les résultats Résultat global Précision de ce résultat Utilité du résultat en pratique

19 Grille de lecture d’une méta-analyse
Est-ce que les résultats sont valides ? Oui dans les limites des études réalisées Objectif bien défini Oui Critère de sélection des études adéquat Oui Quels sont les résultats Résultat global Pas de réduction du risque Précision de ce résultat Insuffisante pour conclure Utilité du résultat en pratique A discuter

20 Grille de lecture d’une méta-analyse
Est-ce que les résultats sont valides ? Oui dans les limites des études réalisées Objectif bien défini Oui Critère de sélection des études adéquat Oui Probabilité études importantes manquent Non Qualité des études évaluée Oui Évaluation des études reproductible Oui Résultats des différentes études similaires Oui Quels sont les résultats Résultat global Pas de réduction du risque Précision de ce résultat Insuffisante pour conclure Utilité du résultat en pratique A discuter

21 Discussion du problème
Toutes ces données sont des données d’observation On dispose des données de trois essais randomisés, certes dans le contexte de la transmission essentiellement hétérosexuelle, mais … J’aurais tendance à considérer l’ensemble de ces données

22 Méta-analyses des trois essais randomisés de circoncision
HIV + / Total Essai Circoncision Témoin O-E Variance Odds Ratio OR [95% CI] Auvert 20/1582 49/1546 -5.6 11.2 0.61 [0.34;0.77] Bailey 22/1391 47/1393 -11.5 12.5 0.40 [0.23;0.68] 0.49 [0.28;0.84] Gray 22/2474 45/2522 -8.8 12.3 0.49 [0.35;0.68] Total 64/5447 141/5461 -25.8 36.1 Test d’hétérogénéité : 2 0.25 1.00 4.00 = 1.06 p = 0.59 2 Circoncision mieux | Pas de circoncision mieux Effet de la circoncision p < Calcul et graphique : Charlotte Baey, équipe de méta-analyse de l’Institut Gustave Roussy

23 Quelques erreurs à éviter
Additionner chacune des 4 colonnes de données (HIV+/- × Circoncis Oui/non), il faut faire la synthèse des comparaisons intra études. Exemple van Howe corrigé par O’Farrell 2000) Odds ratio ( ) versus 1.67 ( ) ! Erreur de calcul : Millett 2008

24 Les questions essentielles en fonction du type d’étude
Évaluation thérapeutique L’attribution des traitements a t’elle été faite par tirage au sort Tous les patients inclus dans l’essai sont-ils pris en compte dans l’analyse principale Étude diagnostique Y a t’il comparaison à l’aveugle avec un outil diagnostique de référence La population étudiée inclut-elle tous les types de sujets auxquels le test va s’appliquer

25 Les questions essentielles en fonction du type d’étude
Étude de risque Les groupes étudiés étaient-ils bien identifiés et comparables pour les autres déterminants du risque que celui étudié L’exposition et le risque étaient-ils mesurés de la même façon dans les groupes comparés Étude pronostique La population de patients est-elle bien définie Le suivi est-il assez long et complet

26 Bibliographie Greenhalgh T. How to read a paper. Papers that summarise other papers (systematic reviews and meta- analyses. BMJ 1997 Oxman et coll. Users’guide to the medical literature: How to use an overview. JAMA 1994