Μπεττίνα Χάιδιτς Επίκουρη Καθηγήτρια Ιατρικής Σχολής ΑΠΘ haidich@med.auth.gr
Εισαγωγή Κεντρικό ρόλο στην αποδεικτική ιατρική Μέθοδος συνολικής εποπτείας των αποδείξεων για κλινικά προβλήματα Απαραίτητη με την εκθετική αύξηση των πληροφοριών στην ιατρική PUBMED Meta-analysis 65.655 άρθρα! Meta-analysis and diabetes 3.267 άρθρα!
Αριθμός εργασιών Μ-Α στο χρόνο
Ιεράρχηση των ενδείξεων
Citation impact Patsopoulos et al, JAMA 2005
Μετα-ανάλυση
Σκοπός Η ποσοτική σύνθεση δεδομένων από πολλές διαφορετικές μελέτες που ασχολούνται με το ίδιο θέμα Υπολογισμός ενός συνολικού/συνοπτικού αποτελέσματος από όλες τις μελέτες (pooled effect) Διεξοδική ανίχνευση συστηματικών σφαλμάτων και υπολογισμός διαφορών (ετερογένεια)
Aνασκόπηση (Review) Παρουσιάζει συνολικά τα δεδομένα αλλά χωρίς να τα συνθέτει Η παρουσία των δεδομένων είναι υποκειμενική Δεν μπορεί να καλύψει πεδία με μεγάλα ποσά πληροφορίας Μετα-ανάλυση με αντικειμενικές ποσοτικές μαθηματικές μεθόδους για τη σύνοψη δεδομένων
Πότε μπορεί να εφαρμοστεί η Μ-Α? Εμπειρικές παρά θεωρητικές Ποσοτικά αποτελέσματα Εξετάζουν τις ίδιες σχέσεις Ίδιο συγκριτικό στατιστικό δείκτη (π.χ. λόγος αναλογιών [odds ratios]) Είναι συγκρίσιμες ως προς το κύριο ερώτημα
Ποιες μελέτες θα συμπεριληφθούν? Σαφή κριτήρια επιλογής και αποκλεισμού μελετών Όσο πιο ευρύ το ερευνητικό πεδίο τόσο πιο λεπτομερής θα είναι τα κριτήρια Αυστηρά κριτήρια Πρόβλημα γενίκευσης των αποτελεσμάτων Χαλαρά κριτήρια Πρόβλημα αξιοπιστίας των αποτελεσμάτων
Πιθανά κριτήρια επιλογής μελετών Σχεδιασμός μελετών (τυχαιοποιημένες ή όχι ) Έτος έναρξης και έτος λήξης Στοιχεία της ποιότητας της μελέτης (τυφλός σχεδιασμός, απόκρυψη διανομής κ.ο.κ) Γλώσσα δημοσίευσης Πληρότητα διαθέσιμων πληροφοριών Διάρκεια παρακολούθησης Είδος μελετούμενων πληθυσμών Ομοιότητα θεραπειών Ετερογένεια
Πηγές δεδομένων Ηλεκτρονικές βάσεις δεδομένων (MEDLINE, EMBASE, CENTRAL, AIDSLINE, CANCERLIT, Google Scholar) Clinical Trial Registration (ClinicalTrials.gov, WHO International Clinical Trials Registry Platform, Current Controlled Trials and Australian New Zealand Clinical Trials Registry, EU Clinical Trials Registry) Ειδικοί επί του θέματος Αρχεία περιλήψεων από σημαντικά συνέδρια, διατριβές Αναφορές και βιβλιογραφία σχετικών δημοσιεύσεων Ιδιωτικοί και κρατικοί οργανισμοί έρευνας Φαρμακοβιομηχανίες
Ηλεκτρονικές βάσεις δεδομένων Αλλάζουν συνεχώς Δεν επαρκεί η αναζήτηση σε 1-2 βάσεις < 2/3 στην αναγνώριση των κατάλληλων μελετών, σύμφωνα με τη Cochrane Σχολαστικός αλγόριθμος αναζήτησης Χρήση χαρακτήρων μπαλαντέρ (*) (π.χ. random*)
Strategies in PubMed format Robinson K A, Dickersin K Int. J. Epidemiol. 2002;31:150-153 International Epidemiological Association 2002
Cochrane Collaboration Παγκόσμια Βιβλιοθήκη Συστηματικών Ανασκοπήσεων και Μετα-αναλύσεων http://www.cochrane.org/ Ενημερώνεται ανά τακτά χρονικά διαστήματα (τρίμηνο) για πολλά από τα θέματα που αφορούν την ιατρική φροντίδα Συμμετέχουν εθελοντικά οι καλύτεροι ερευνητές στον κόσμο για την πρόοδο της αποδεικτικής ιατρικής πράξης
Εξαγωγή δεδομένων Συμμετοχή 2 ανεξάρτητων ερευνητών Εκτίμηση συμφωνίας με το συντελεστή συμφωνίας Cohen s κ Επίλυση διαφωνιών από έναν 3ο ερευνητή Καμιά φορά συμμετοχή ερευνητών της πρωτογενούς μελέτης για διόρθωση λαθών
Ανάλυση δεδομένων Σταθερές επιδράσεις (fixed effects) Αποτελέσματα των διαφορετικών μελετών διαφέρουν μεταξύ τους μόνο από τύχη Ισχύει αν δεν υπάρχει σημαντική ετερογένεια Στάθμιση w=1/v Ακρίβεια Μέθοδος κατά Mantel-Haenszel, Peto, Αντίστροφης διακύμανσης (Inverse variance)
Ανάλυση δεδομένων Τυχαίες επιδράσεις (random effects) Τα αποτελέσματα δεν είναι ομοιογενή αλλά προέρχονται με τυχαίο τρόπο από ένα μεγαλύτερο πληθυσμό αποτελεσμάτων Συνυπολογίζει στις εκτιμήσεις την ετερογένεια τ 2 Στάθμιση w=1/τ 2 +v Μέθοδος κατά DerSimonian & Laird
Ετερογένεια Ελέγχεται με τη δοκιμασία Cochran Q και υπάρχει σημαντική ετερογένεια αν P<0.10 Εκτιμάται και με το δείκτη ασυνέπειας Ι 2 (0 100%) Higgins et al. BMJ 2003 Ι 2 = 25% μικρή Ι 2 = 50% μέτρια Ι 2 = 75% μεγάλη Τα αποτελέσματα των 2 μοντέλων συμπίπτουν όταν δεν υπάρχει σημαντική ετερογένεια
Παρουσίαση δεδομένων Διάγραμμα ροής (flow-diagram) Δενδρόγραμμα (Forest plot): Γραφική απεικόνιση των αποτελεσμάτων των επιμέρους μελετών και του συνοπτικού αποτελέσματος από την Μ-Α Δημογραφικά στοιχεία κάθε μελέτης (π.χ. φύλο, ηλικία, φυλή, διάρκεια, κ.ο.κ.)
Διάγραμμα ροής Preferred reporting items for systematic reviews and meta-analyses the PRISMA statement. BMJ 2009
Ανάγκη μετάγγισης αίματος μετά από καρδιοχειρουργική επέμβαση Study or Subgroup 1.3.1 CABG MECC Control Odds Ratio Odds Ratio Events Total Events Total Weight M-H, Random, 95% CI Year M-H, Random, 95% CI Beghi 2006 3 30 8 30 8.5% 0.31 [0.07, 1.29] 2006 Huybregts 2007 2 25 9 24 6.4% 0.14 [0.03, 0.77] 2007 Schottler 2008 18 30 23 30 13.9% 0.46 [0.15, 1.40] 2008 Sakwa 2009 16 102 49 97 36.0% 0.18 [0.09, 0.35] 2009 Bauer 2010 Subtotal (95% CI) 8 18 205 14 22 203 10.9% 75.7% 0.46 [0.13, 1.63] 0.25 [0.16, 0.40] 2010 Total events 47 103 Heterogeneity: Tau² = 0.00; Chi² = 3.33, df = 4 (P = 0.50); I² = 0% Test for overall effect: Z = 5.74 (P < 0.00001) 1.3.2 AVR Remadi 2004 4 50 8 50 10.9% 0.46 [0.13, 1.63] 2004 Castiglioni 2009 Subtotal (95% CI) 4 60 110 24 60 110 13.4% 24.3% 0.11 [0.03, 0.33] 0.21 [0.05, 0.89] 2009 Total events 8 32 Heterogeneity: Tau² = 0.68; Chi² = 2.79, df = 1 (P = 0.09); I² = 64% Test for overall effect: Z = 2.12 (P = 0.03) Total (95% CI) 315 313 100.0% 0.24 [0.16, 0.37] Total events 55 135 Heterogeneity: Tau² = 0.02; Chi² = 6.30, df = 6 (P = 0.39); I² = 5% Test for overall effect: Z = 6.50 (P < 0.00001) Test for subgroup differences: Not applicable 0.05 0.2 1 5 20 Favours MECC Favours Control
Lancet Infect Dis 2011
Δεν είναι αποτελεσματική
Αλλά ούτε και ασφαλές
Προληπτική αντιβίωση Ioannidis et al, Clin Infect Dis 1999
Fixed vs. random effects model
Τυπικά σφάλματα Μ-Α Σφάλμα δημοσίευσης (publication bias) Σφάλμα χρονικής καθυστέρησης (time lag bias) Σφάλμα γλώσσας (language bias) Σφάλμα επιλεκτικής παρουσίασης (selective reporting bias) Σφάλμα τοποθεσίας (location bias) Σφάλμα αναφοράς (citation bias) Σφάλμα πολλαπλής δημοσίευσης (multiple [duplicate] publication bias)
Σφάλμα δημοσίευσης Συστηματική επιλογή μελετών προς δημοσίευση ανάλογα με το αποτέλεσμα Συνήθως δημοσιεύονται οι μελέτες με θετικά αποτελέσματα Μικρές αρνητικές μελέτες δεν δημοσιεύονται Ανίχνευση με το διάγραμμα ανεστραμμένου χωνιού (funnel plot)
Funnel plot Συμμετρικό άρα δεν υπάρχει σφάλμα δημοσίευσης Ασυμμετρία λείπουν οι μικρές αρνητικές μελέτες
Πηγές ασυμμετρίας Σφάλματα αναφοράς (Reporting biases) Σφάλμα δημοσίευσης Σφάλμα χρονικής καθυστέρησης Σφάλμα τοποθεσίας (σφάλμα γλώσσας, πολλαπλών δημοσιεύσεων) Επιλεκτική αναφορά έκβασης και αποτελεσμάτων Κακή ποιότητα μελετών Λανθασμένος σχεδιασμός Ανεπαρκής ανάλυση Νοθεία Πραγματική ετερογένεια Ανάλογα με το μέγεθος της μελέτης αλλάζουν και οι επιδράσεις Τεχνητός Λόγω δειγματοληπτικής μεταβλητότητας Τύχη Χρήση δοκιμασιών ασυμμετρίας (Begg, Egger, Harbord, Rücker)
Σφάλμα δημοσίευσης Hopewell et al., Cochrane Database Syst Rev. 2009
Σφάλμα χρονικής καθυστέρησης Καθυστέρηση στην ολοκλήρωση μιας μελέτης Καθυστέρηση από την ολοκλήρωση μιας μελέτης μέχρι την κατάθεση για δημοσίευση Καθυστέρηση από την κατάθεση της μελέτης μέχρι τη δημοσίευση
Οι θετικές μελέτες δημοσιεύονται πιο γρήγορα από τις αρνητικές Θετικές με υψηλή πρώιμη εγγραφή Αρνητικές με χαμηλή πρώιμη εγγραφή Haidich & Ioannidis. AJE 2001;154:873-880
Σφάλμα γλώσσας Συστηματικό αποκλεισμό δεδομένων που δεν δημοσιεύονται σε αγγλική γλώσσα Αγγλόφωνα περιοδικά εντυπωσιακά στατιστικά σημαντικά αποτελέσματα Δυσεύρετα τοπικά περιοδικά άλλης χώρας μη σημαντικά ευρήματα Αξίζει η ανάσυρση δεδομένων από περιοδικά τρίτης ποιότητας? Έλλειψη στατιστικής σημαντικότητας έλλειψη πραγματικής αξίας Ανάστροφο σφάλμα του πύργου της Βαβέλ Κινέζικη και ρώσικη βιβλιογραφία και βελονισμός!
Σφάλμα επιλεκτικής παρουσίασης Ατελής δημοσίευση των σημαντικών δεδομένων μελέτης και η εσφαλμένη, παραφθαρμένη διατύπωση τους, π.χ. σε πρακτικά συνεδρίων Σε πολλές περιπτώσεις διαφέρουν τα αποτελέσματα από τα πρακτικά συνεδρίων με τις τελικές δημοσιεύσεις Αποκλεισμός από το πρωτόκολλο της Μ-Α ή επικοινωνία με τον ερευνητή
Ποιότητα των δεδομένων Σκουπίδια μπαίνουν, σκουπίδια βγαίνουν (garbage-in, garbage-out) Aξιολόγηση της ποιότητας και του κινδύνου σφάλματος στις μελέτες Προτιμούνται οι τυχαιοποιημένες μελέτες (ΤΚΔ/RCT) από τις περιγραφικές μελέτες (observational)
Σύγκριση αποτελεσμάτων από τυχαιοποιημένες και μη τυχαιοποιημένες μελέτες Ioannidis, Haidich, et al, JAMA 2001
Πλεονεκτήματα Μ-Α Αυξάνει τη στατιστική ισχύ Μειώνει την αβεβαιότητα για το μέγεθος ενός αποτελέσματος Πρωτογενής μελέτη (original research article) Ποσοτικοποιεί την ετερογένεια Αναγνωρίζει αν υπάρχει αρκετή τεκμηρίωση ή ότι υπάρχει ανάγκη για περισσότερη απόδειξη Ανιχνεύει τις πηγές συστηματικών σφαλμάτων
Μειονεκτήματα Μ-Α Απαιτεί χρόνο και πολύ κόπο Σύγκριση μήλα με πορτοκάλια Συνεχή απειλή του σφάλματος επιλογής Αρνητικές και μη σημαντικές μελέτες που δεν βρέθηκαν Αποτελέσματα μελετών με αρνητικά και μη σημαντικά αποτελέσματα που δεν αναφέρθηκαν
Βιβλιογραφία Liberati A, et al. The PRISMA statement for reporting systematic reviews and meta-analyses of studies that evaluate healthcare interventions: explanation and elaboration. BMJ, J Clin Epidem, Ann Int Med, PLOS Medicine 2009 Moher D, et al. Preferred reporting items for systematic reviews and meta-analyses: the PRISMA statement. BMJ, J Clin Epidem, Ann Int Med, PLOS Medicine 2009 Stroup DF et al. Meta-analysis of observational studies in epidemiology (MOOSE). A proposal of reporting. JAMA 2000;283:2008-2012. http://www.cochrane-handbook.org/ http://www.equator-network.org/ (Enhancing the Quality and Transparency of health Research)
Στατιστικά προγράμματα RevMan (Cochrane) STATA (metan) SPSS/PASW (με τη χρήση macros) R (meta) Comprehensive meta-analysis Meta-analyst
BMJ 2010
Από 499 Μ-Α το 2010 >80% ήταν περιορισμένης ατζέντας Περίπου το 50% αναφερόταν σε συγκεκριμένες δραστικές ουσίες και το 15% σε μόνο μια δραστική ουσία Οι Μ-Α ατομικών δεδομένων (IPD) συνήθως αναφερόταν σε συγκεκριμένες δραστικές ουσίες και στην πλειοψηφία χρηματοδοτούταν από τη βιομηχανία
Tελευταίες εξελίξεις Μετα-ανάλυση πολλαπλών παρεμβάσεων (multipletreatments meta-analysis [MTM], network metaanalysis) Μετα-επιδημιολογική μελέτη (meta-epidemiological study)
Network meta-analysis