PLoS One: Intra-Ξεχώρισαν και Inter-Ξεχώρισαν αξιοπιστία του ιατρικού φακέλου Αφαίρεση Μελέτη για τη μετάβαση της φροντίδας μετά την παιδική ηλικία Cancer


Αφηρημένο

Ιστορικό

Η άντληση των δεδομένων από ιατρικά αρχεία είναι ένα διαδεδομένη πρακτική στην επιδημιολογική έρευνα. Ωστόσο, μελέτες που χρησιμοποιούν αυτό το μέσο για τη συλλογή δεδομένων σπάνια αναφέρουν την αξιοπιστία. Εντός της μετάβασης μετά την παιδική ηλικία Μελέτη του Καρκίνου (TaCC), η οποία βασίζεται σε μια ιατρική αφαίρεση ρεκόρ, πραγματοποιήσαμε μια δεύτερη ανεξάρτητη άντληση δεδομένων, με σκοπό να εκτιμήσει α) την αξιοπιστία ενδο-αξιολογητών ενός Ξεχώρισαν σε δύο χρονικά σημεία? β) οι πιθανές επιπτώσεις της μάθησης μεταξύ των δύο αυτών χρονικών σημείων σε σύγκριση με ένα χρυσό πρότυπο? και γ) την αξιοπιστία μεταξύ των αξιολογητών.

Μέθοδος

Στο πλαίσιο της μελέτης TaCC πραγματοποιήσαμε μια συστηματική άντληση ιατρικό ιστορικό στις 9 ελβετική κλινικές με παιδιατρικές πτέρυγες ογκολογία. Σε μια δεύτερη φάση θα επιλέξει ένα επιμέρους δείγμα των ιατρικών αρχείων σε 3 κλινικές για τη διεξαγωγή μιας δεύτερης ανεξάρτητης αφαίρεσης. Στη συνέχεια αξιολογείται η αξιοπιστία ενδο-αξιολογητών σε δύο χρονικά σημεία, το αποτέλεσμα της μάθησης την πάροδο του χρόνου (συγκρίνοντας κάθε βαθμολογητή σε δύο χρονικά σημεία με ένα χρυσό πρότυπο) και η αξιοπιστία μεταξύ των αξιολογητών ενός επιλεγμένου αριθμού των μεταβλητών. Υπολογίσαμε το ποσοστό συμφωνίας και κάπα του Cohen

Ευρήματα

Για την αξιολόγηση της αξιοπιστίας ενδο-αξιολογητών συμπεριλάβαμε 154 εγγραφές (80 για Ξεχώρισαν 1? 74 για εκτιμητής 2).. Για την αξιοπιστία μεταξύ των αξιολογητών που θα μπορούσε να περιλαμβάνει 70 αρχεία. αξιοπιστία ενδο-αξιολογητών ήταν σημαντική για την εξαιρετική (Κοέν κάπα 0-6-0.8) με ένα παρατηρούμενο ποσοστό συμφωνίας 75% -95%. Σε όλες τις μεταβλητές παρατηρήθηκαν αποτελέσματα εκμάθησης. αξιοπιστία μεταξύ των αξιολογητών ήταν σημαντική για την εξαιρετική (kappa του Cohen 0,70 – 0,83) με υψηλή συμφωνία που κυμαίνονται από 86% έως 100%.

Συμπεράσματα

Η μελέτη μας έδειξε ότι τα δεδομένα που αντλείται από ιατρικά αρχεία είναι αξιόπιστα . Διερεύνηση ενδο-rater και η αξιοπιστία μεταξύ των αξιολογητών μπορεί να δώσει την εμπιστοσύνη για να εξαχθούν συμπεράσματα από τα αφαιρετικά στοιχεία και να αυξήσει την ποιότητα των δεδομένων, ελαχιστοποιώντας συστηματικά σφάλματα

Παράθεση:. Gianinazzi ME, Rueegg CS, Zimmerman Κ, Kuehni CE, Michel G , η Ελβετική Παιδιατρική Ογκολογική Ομάδα (SPOG) (2015) ενδο-Ξεχώρισαν και Inter-Ξεχώρισαν αξιοπιστία του ιατρικού φακέλου αφαίρεση Μελέτη για τη μετάβαση της φροντίδας μετά από καρκίνο της παιδικής ηλικίας. PLoS ONE 10 (5): e0124290. doi: 10.1371 /journal.pone.0124290

Ακαδημαϊκό Επιμέλεια: keitaro Matsuo, Kyushu University Σχολή της Ιατρικής Επιστήμης, ΙΑΠΩΝΙΑ

Ελήφθη: 2η Δεκεμβρίου 2014? Αποδεκτές: 5 Μαρ 2015? Δημοσιεύθηκε: 22η Μαΐου του 2015

Copyright: © 2015 Gianinazzi et al. Αυτό είναι ένα άρθρο ανοικτής πρόσβασης διανέμεται υπό τους όρους της άδειας χρήσης Creative Commons Attribution, το οποίο επιτρέπει απεριόριστη χρήση, τη διανομή και την αναπαραγωγή σε οποιοδήποτε μέσο, ​​με την προϋπόθεση το αρχικό συγγραφέα και την πηγή πιστώνονται

Δεδομένα Διαθεσιμότητα: Όλα τα σχετικά δεδομένα είναι εντός του χαρτιού

Χρηματοδότηση:. η εργασία αυτή χρηματοδοτήθηκε από την Ελβετική Εθνικό Ίδρυμα Επιστημών (επιχορήγηση Ambizione PZ00P3_121682 /1 και PZ00P3-141722 στην GM)? της Ελβετικής Cancer League (επιχορήγηση KLS-01605-10-2004, KLS-2215-02-2008, KFS-02631-08-2010, KLS-02783-02-2011)? Καρκίνο του Λιγκ Βέρνη? και Stiftung zur Krebsbekämpfung. Το έργο της Ελβετικής Childhood Cancer Registry υποστηρίζεται από την Ελβετική Παιδιατρικής Ογκολογικής Ομάδας (www.spog.ch), Schweizerische Konferenz der kantonalen Gesundheitsdirektorinnen und -direktoren (www.gdk-cds.ch), Swiss Cancer Research (www.krebsforschung. ch), Kinderkrebshilfe Schweiz (www.kinderkrebshilfe.ch), Ernst-Göhner Stiftung, Stiftung Domarena, και το Εθνικό Ινστιτούτο Καρκίνου Επιδημιολογίας και Καταγραφής (www.nicer.ch). Οι χρηματοδότες δεν είχε κανένα ρόλο στο σχεδιασμό της μελέτης, τη συλλογή και ανάλυση των δεδομένων, η απόφαση για τη δημοσίευση, ή την προετοιμασία του χειρογράφου

Αντικρουόμενα συμφέροντα:.. Οι συγγραφείς έχουν δηλώσει ότι δεν υπάρχουν ανταγωνιστικά συμφέροντα

Εισαγωγή

Η άντληση των δεδομένων από τα ιατρικά αρχεία των ασθενών (MR) είναι μια ευρέως διαδεδομένη πρακτική στην επιδημιολογική έρευνα, ιδιαίτερα στις αναδρομικές μελέτες [1-3]. Συχνά, ωστόσο, η αξιοπιστία και η εσωτερική εγκυρότητα των δεδομένων αυτών είναι αμφισβητήσιμη. Αυτό έχει διάφορους λόγους. Πρώτον, τα δεδομένα γραμμένα σε ΑΑ που δεν έχουν παραχθεί για ερευνητικούς σκοπούς και πρέπει να αντιμετωπιστεί [2], η καταλληλότητα αυτών των δεδομένων για την έρευνα ερώτηση της μελέτης. Δεύτερον, η κακή αξιοπιστία λόγω του δυναμικού εντός και μεταξύ των αξιολογητών διακύμανσης περιορίζει την εσωτερική εγκυρότητα των αποτελεσμάτων. Αυτό ισχύει ιδιαίτερα για τις πολυκεντρικές μελέτες στις οποίες εμπλέκονται πολλές βαθμολογητές, οι συνθήκες συλλογής δεδομένων ποικίλουν, μορφές MR διαφέρουν, τα στοιχεία προέρχονται από διαφορετικές χρονικές περιόδους και η συλλογή των δεδομένων αφήνει περιθώρια ερμηνείας [1]. Για τους λόγους αυτούς, είναι σημαντικό να αναφέρετε την αξιοπιστία των μελετών αυτών. Περαιτέρω, αυτό μπορεί να βοηθήσει στη βελτίωση της διαδικασίας συλλογής, να μειώσει και να διορθώσει τα προβλήματα ή διαφορές, και, αργότερα, να κερδίσει την εμπιστοσύνη στα συμπεράσματα που θα αντληθούν [4]. Παρά τη σημασία των εκθέσεων αυτών των μέτρων, μόνο λίγες μελέτες στην πραγματικότητα το κάνουν [2,4-8]. Σε γενικές γραμμές, η οποία δημοσιεύθηκε αναδρομική αξιολογήσεις διάγραμμα το οποίο αξιολογείται έκθεση αξιοπιστία καλά επίπεδα αξιοπιστίας για αφηρημένες δεδομένων τους, αλλά πρέπει να θυμόμαστε ότι η προκατάληψη η δημοσίευση θα μπορούσε να είναι ένα πρόβλημα σε αυτό το είδος της μελέτης με μόνο μελέτες με θετικά αποτελέσματα να δημοσιεύονται.

το έργο «μετάβαση μετά Childhood Cancer (TaCC)» έχει ως στόχο να αξιολογήσει τη μετάβαση από την παιδιατρική στην ενήλικη φροντίδα των επιζώντων του καρκίνου της παιδικής ηλικίας στην Ελβετία με τη συλλογή δεδομένων από το MR σε εννέα κλινικές και σε τρεις περιοχές γλώσσα. Επειδή καμία προηγούμενη μελέτη αξιολόγησε μετάβασης χρησιμοποιώντας μια συστηματική ανασκόπηση διαγραμμάτων για τη συλλογή δεδομένων που είχαμε για την ανάπτυξη και πιλοτική μια μορφή αφαίρεσης βασίζεται στην διαθέσιμη βιβλιογραφία και το έργο στοχεύει. Για τους λόγους αυτούς, βρήκαμε ότι είναι σημαντικό να αξιολογηθεί η αξιοπιστία των δεδομένων που συλλέγονται από τη διερεύνηση) ενδο-εκτιμητής της αξιοπιστίας των δύο βαθμολογητές σε δύο χρονικά σημεία? β) οι πιθανές επιπτώσεις εκμάθησης διαχρονικά συγκρίνοντας κάθε βαθμολογητή σε ένα χρυσό πρότυπο σε δύο χρονικά σημεία? και γ) την αξιοπιστία μεταξύ των αξιολογητών.

Μέθοδοι

Δήλωση Ηθικής

έγκρισης

Δεοντολογίας που παρέχονται μέσω του γενικού άδεια μητρώου καρκίνου του ελβετικού Childhood Cancer ΚΑΤΑΧΩΡΗΣΗΣ (η Ελβετική Ομοσπονδιακή Επιτροπή εμπειρογνωμόνων για το επαγγελματικό απόρρητο στις Ιατρικής Έρευνας) και μη δήλωση obstat ελήφθη από την επιτροπή δεοντολογίας του καντονίου της Βέρνης, δηλώνοντας ότι δεν υπάρχει πρόσθετος άδεια ηθικής και καμία πρόσθετη συγκατάθεση ήταν απαραίτητη. Όλες οι πληροφορίες σχετικά με τα άτομα έγινε ανώνυμα στους ερευνητές πριν από την ανάλυση.

πληθυσμός Μελέτη

Η «μετάβαση μετά Παιδικού Καρκίνου (TaCC)» μελέτη είναι μια αναδρομική πολυκεντρική μελέτη που πραγματοποιήθηκε στον πληθυσμό με βάση το ελβετικό Παιδικού Καρκίνου μητρώου (SCCR). Για σχεδόν τέσσερις δεκαετίες, η SCCR έχει τη συλλογή στοιχείων για όλους τους ασθενείς που έχουν διαγνωστεί με λευχαιμία, το λέμφωμα, το κεντρικό νευρικό σύστημα (ΚΝΣ) όγκοι, κακοήθεις συμπαγείς όγκους ή ιστιοκυττάρωση Langerhans πριν από την ηλικία των 21 ετών [9,10]. Η μελέτη TaCC περιελάμβανε ένα στρωματοποιημένο (από τη διάγνωση και τη θεραπεία της κλινικής) τυχαία επιλεγμένο δείγμα των ασθενών είναι νηολογημένα στην SCCR, που είχαν διαγνωστεί με καρκίνο της παιδικής ηλικίας σε μια ηλικία μεταξύ 0 και 15 ετών, ο οποίος επέζησε ≥ 5 χρόνια και ήταν ηλικίας ≥16 ετών ο χρόνος αυτής της μελέτης.

συλλογή αρχικά δεδομένα για τη μελέτη

TaCC

στο πλαίσιο της μελέτης TaCC πραγματοποιήσαμε μια συστηματική άντληση MR στις 9 κλινικές με παιδιατρικές πτέρυγες ογκολογίας σε όλη την Ελβετία (όλα τα ιατρεία ήταν συνδεδεμένες στην Παιδιατρική Ογκολογική Ομάδα της Ελβετίας). Η συλλογή δεδομένων ξεκίνησε το Μάρτιο του 2012 και ολοκληρώθηκε τον Απρίλιο του 2013. Για τη συλλογή των δεδομένων θα χρησιμοποιηθεί μια τυποποιημένη μορφή αφαίρεσης σε έντυπη μορφή, το οποίο αναπτύχθηκε με τη χρήση της διαθέσιμης βιβλιογραφίας σχετικά με τις αξιολογήσεις διάγραμμα [11]. Όπως προτείνεται από τις κατευθυντήριες γραμμές, εμείς πιλοτικά το έντυπο αφαίρεσης σε τρεις από τις εννέα κλινικές, πριν αρχίσει η πραγματική άντληση δεδομένων. Συλλέξαμε δεδομένα για τις ακόλουθες βασικές κατηγορίες: συχνότητα των επισκέψεων παρακολούθησης μετά την ηλικία των 16 ετών επαγγελματίες υγείας που εμπλέκονται, απαλλαγή (ασθενής απορρίπτονται από παιδιατρική ογκολογία, χωρίς να μεταφερθεί), την ημερομηνία της απαλλαγής, απαλλαγή προγραμματισμένη, ημερομηνία της προγραμματισμένης διάθεσης, μεταφοράς (ασθενής μεταφέρθηκε από την παιδιατρική ογκολογία σε μια επαγγελματική ιατρική ενηλίκων), τον προορισμό της μεταφοράς, την ημερομηνία της μεταβίβασης, έχασε ραντεβού παρακολούθησης (ο ασθενής δεν πάει σε μια επίσκεψη). Εμείς ψηφιακά φωτογραφηθεί όλα τα σχετικά έγγραφα ως «back up» και τους έσωσε σε ασφαλείς διακομιστές. Μετά τη συλλογή των δεδομένων, χρησιμοποιήσαμε Epidata 3.1 για να εισάγετε τα δεδομένα μας σε μια βάση δεδομένων. Όλα τα δημογραφικά ή κλινικές πληροφορίες άμεσα από τη βάση δεδομένων SCCR.

Δείγμα για

αξιολόγηση της αξιοπιστίας

Ο αριθμός των εκ νέου αφαιρέσεις που πραγματοποιούνται βασίστηκε στον αριθμό των ιατρικών διαγράμματα διαθέσιμες περιέχει πληροφορίες σχετικά με τις μεταβλητές που πρέπει να εξαχθεί καθώς και σχετικά με τις επίσημες υπολογισμούς μεγέθους δείγματος για την κάπα στατιστική [12]. Χρησιμοποιώντας άλφα και βήτα ποσοστά σφάλματος του 0,05 και 0,2, αντίστοιχα, όταν γίνεται έλεγχος για μια στατιστική διαφορά μεταξύ μέτρια (δηλαδή, 0.40) και υψηλή (δηλαδή, 0.75) κάππα τιμές, οι εκτιμήσεις μεγέθους δείγματος κυμαίνεται από 77 να 28 όταν ο επιπολασμός χαρακτηριστικό ήταν ποικίλη μεταξύ 10% και 50%. Έτσι, το μέγεθος των δειγμάτων μας για την αξιοπιστία του ενδο-αξιολογητών και δια-εκτιμητής παρέχεται η αναγκαία δύναμη για να ανιχνεύσει διαφορές. Έχουμε επιλέξει όλα τα ιατρικά αρχεία που δεν έχουν ελλείπουσες τιμές στις μεταβλητές υπό έρευνα. Πραγματοποιήσαμε την εκ νέου άντληση τα τρία πρώτα κλινικές της ίδιας περιοχής γλώσσα

Re-αφαίρεσης

Για την περαιτέρω αφαίρεση εστιάσαμε αποκλειστικά στις πιο σημαντικές μεταβλητές, και συγκεκριμένα:. Τις μεταβλητές «ακόμα στην παιδιατρική παρακολούθηση (ναι, όχι)», «μεταφέρονται (ναι, όχι)», «απορρίπτονται (ναι, όχι)», «προορισμός μεταφοράς» (γενικός ιατρός, ενηλίκων ογκολόγος, άλλες ειδικές), και η ημερομηνία μεταβλητές «ημερομηνία μεταβίβασης», «ημερομηνία λήξης του καθεστώτος» και «ημερομηνία της επόμενης επίσκεψης στην παιδιατρική ογκολογία» (Πίνακας 1).

Η

Ιατρική ρεκόρ

βαθμολογητές

Η

Τρεις βαθμολογητές μελέτη επιλέχθηκαν για τη διενέργεια της αφαίρεσης στις διάφορες κλινικές με βάση τις γλωσσικές γνώσεις τους (θα έπρεπε να είναι ικανός σε όλες τις εθνικές γλώσσες) και το επίπεδο εκπαίδευσής τους. Όλες οι βαθμολογητές που πραγματοποιήθηκε πτυχίο σε επίπεδο Μάστερ, ένα στην παιδαγωγική /ψυχολογία, η δεύτερη στις κοινωνικές επιστήμες και η τρίτη στη βιολογία. Κανένας από τους βαθμολογητές είχαν κλινική εμπειρία, την οποία πιστεύεται ότι δεν ήταν απαραίτητη για τους σκοπούς της παρούσας αφαίρεσης. Μία από αυτές τις τρεις βαθμολογητές (Μάστερ στη Βιολογία) είχαν ενταχθεί στην ερευνητική ομάδα αργότερα και, επομένως, αποκλείστηκε από τη μελέτη της αξιοπιστίας.

Και οι δύο βαθμολογητές που περιλαμβάνονται στη μελέτη αξιοπιστία εκπαιδεύτηκαν πριν από τη συλλογή δεδομένων για τις πιο σημαντικές έννοιες αξιολογηθεί στη μελέτη TaCC. Για τη μέτρηση της αξιοπιστίας ενδο-αξιολογητών οι 2 βαθμολογητές αντληθεί ένα επιλεγμένο δείγμα των ιατρικών αρχείων σε δύο χρονικά σημεία. Και οι δύο βαθμολογητές δεν είχε πρόσβαση στα αποτελέσματα που συλλέγονται κατά τη στιγμή 1.

Για να διερευνήσουν πιθανές επιπτώσεις της μάθησης μεταξύ χρονικό σημείο 1 και χρονικό σημείο 2, ο διαχειριστής του έργου (MEG) αντλείται επίσης τα στοιχεία των ίδιων των ασθενών. Τα στοιχεία αυτά θεωρούνται το χρυσό πρότυπο και τα αποτελέσματα των δύο βαθμολογητών σε χρονικό σημείο 1 και 2 ήταν ό, τι σε σχέση με το πρότυπο του χρυσού. Για να αξιολογηθεί η αξιοπιστία μεταξύ των 2 βαθμολογητές ανεξάρτητα αφηρημένη δεδομένα τα ίδια θέματα σπουδών στο χρονικό σημείο 2.

Η στατιστική ανάλυση

Πραγματοποιήσαμε όλες τις αναλύσεις με τη χρήση Stata 12.0 (StataCorp, College Station, TX ). Υπολογίσαμε την πρώτη συμφωνία των ποσοστών, δηλαδή το ποσοστό των εκτιμήσεων στις οποίες οι δύο παρατηρήσεις που συμφωνήθηκαν, κάπα του Cohen και Επικράτηση-Adjusted Bias-Προσαρμοσμένο Kappa (PABAK) για όλες τις μεταβλητές στην ενδο-rater και η σύγκριση μεταξύ των αξιολογητών [13]. Για την ανάλυση αξιοπιστίας ενδο-αξιολογητών παρουσιάζουμε τα αποτελέσματα ανά εκτιμητής όταν αυτό είναι δυνατόν. Να αξιολογήσει τις πιθανές επιδράσεις μεταξύ χρονικό σημείο 1 και σημείο στο χρόνο 2 εκμάθηση, υπολογίσαμε κάπα του Cohen μεταξύ των δεδομένων που συλλέγονται από κάθε βαθμολογητή στα δύο χρονικά σημεία και τα δεδομένα που συλλέγονται από τον διαχειριστή του έργου MEG (gold standard).

Kappa και Κοέν Προσαρμοσμένη Kappa

Kappa δείχνει μια αριθμητική βαθμολογία του βαθμού συμφωνίας μεταξύ δύο βαθμολογητών, λαμβάνοντας υπόψη το βαθμό συμφωνίας, η οποία θα πρέπει να αναμένεται από την τύχη. Ο υπολογισμός της κάπα Κοέν βασίζεται στη διαφορά μεταξύ της συμφωνίας που είναι πραγματικά παρόντες (Pr

α) και η συμφωνία που επιτεύχθηκε από τύχη και μόνο (Pr

ε) (Φόρμουλα 1) [14]. τιμές Κάππα κυμαίνονται 0-1 με 0 έννοια «λιγότερο από Συμφωνώ ευκαιρία» και 1 «σχεδόν τέλεια συμφωνία».

(Formula 1)

Formula 1, ωστόσο, δεν λαμβάνει υπόψη την πόλωση μεταξύ των παρατηρητών (η έκταση της διαφωνίας) ή η διανομή των δεδομένων σε όλες τις κατηγορίες που χρησιμοποιούνται (επιπολασμός). Το ακόλουθο παράδειγμα θα σας δείξει πώς πανομοιότυπο συμφωνίας μπορεί να οδηγήσει σε διαφορετικούς συντελεστές κάππα λόγω της διαφορετικής επικράτηση των δεδομένων σε όλες τις κατηγορίες

Και στις δύο πίνακες 2 και 3 υπάρχει ίση συμφωνίας (60 από ναι και όχι: 25. 35 και 45+ 15). Ωστόσο, αν εφαρμόσουμε Formula 1 για τον υπολογισμό κάπα του Cohen θα καταλήξουμε με διαφορετικά αποτελέσματα (Κ

1 = 0,1304 και Κ

2 = 0,2593). Αυτή η διαφορά στα αποτελέσματα προκύπτει εξαιτίας της διαφορετικής κατανομής των δεδομένων στα κύτταρα 2×2 (η λεγόμενη συχνότητα) [12].

Η

Η ερμηνεία της και μόνο κάπα χωρίς καμία ένδειξη της επικράτησης ή προκατάληψη μπορεί να είναι ανακριβής. Για να ξεπεραστεί αυτό το πρόβλημα έχει προταθεί μια εναλλακτική μορφή κάπα η οποία λαμβάνει υπόψη τόσο προκατάληψη και τον επιπολασμό [15]. Αυτό συνοψίζεται από την επικράτηση-Adjusted Bias-Προσαρμοσμένο Kappa (PABAK). PABAK δίνει το ποσοστό της συμφωνίας πέραν των αναμενόμενων συμφωνίας ευκαιρία ανεξάρτητα από την ασύμμετρη μοτίβα δεδομένων. Η ερμηνεία των PABAK είναι η ίδια όπως και για κάππα. Αν θεωρήσουμε ένα πίνακα 2×2, όπως αυτή στον Πίνακα 4, PABAK υπολογίζεται όπως στον Τύπο 2.

Η (Τύπος 2)

Ερμηνεία των Κοέν κάπα

Για να ερμηνεύσει αποτέλεσμα μας χρησιμοποιήσαμε ως σημείο αναφοράς το cut-off προτείνει η Landis και Koch [16], σύμφωνα με τους οποίους Κάππας Κοέν ≥ 0,80 αντιπροσωπεύουν άριστη συμφωνία, οι συντελεστές μεταξύ 0,61 και 0,80 αντιπροσωπεύουν ουσιαστική συμφωνία, οι συντελεστές μεταξύ 0,41 και 0,61 μέτρια συμφωνίας και & lt? 0,41 δίκαιο να φτωχή συμφωνίας.

Αποτελέσματα

Δείγμα

Η τελική ανάλυση περιλάμβανε 154 εγγραφές για την εκτίμηση της αξιοπιστίας ενδο-αξιολογητών. Από αυτούς, 80 είχαν προβληθεί από Ξεχώρισαν 1 και 74 από εκτιμητής 2. μέσος χρόνος μεταξύ της πρώτης (χρονικό σημείο 1) και το δεύτερο αφαίρεσης (χρονικό σημείο 2) ήταν 7,6 μήνες (SD = 2.2), το εύρος (02.01 – 10.03 μήνες ). Για την αξιολόγηση της αξιοπιστίας μεταξύ αξιολογητών συμπεριλάβαμε 70 εγγραφές (Σχήμα 1).

Το σχήμα 1 δείχνει το διάγραμμα ροής του πληθυσμού της μελέτης μας, ξεκινώντας από εκείνους που μπορούν με αυτά που περιλαμβάνονται στην ανάλυση.

Η

Intra-εκτιμητής της αξιοπιστίας

σε γενικές γραμμές, όλες οι μεταβλητές αξιολογήθηκαν είχαν σημαντική (Κοέν κάπα ≥ 0,6) με εξαιρετική συμφωνία (Κοέν κάπα ≥ 0,8) με ένα παρατηρούμενο ποσοστό συμφωνίας που κυμαίνονται από 75% (ημερομηνία της επόμενης επίσκεψης στο παιδιατρική ογκολογία) έως 95% (ημερομηνία μεταβίβασης) (Σχήμα 2).

το σχήμα 2 δείχνει τις τιμές των κάπα για ενδο-εκτιμητής (σκούρο μπλε) και για την ενδο-εκτιμητής (γαλάζιο) αξιοπιστία με την εμπιστοσύνη τους διαστήματα Τ για κάθε μεταβλητή υπό έρευνα

Η

Μετά λαμβάνοντας υπόψη τον επιπολασμό και την προκατάληψη, PABAK ήταν υψηλότερο για όλες τις μεταβλητές και κυμάνθηκε 0,64 έως 0,81 από τα μη προσαρμοσμένες τιμές κάππα (Πίνακας 5? Σχήμα 3)..

το σχήμα 3α και 3β δείχνουν τις τιμές των κάπα σε σύγκριση με τις τιμές που προκύπτουν από τον υπολογισμό της Επικράτηση προσαρμοσμένο Bias προσαρμοσμένο κάπα για την αξιοπιστία του ενδο-αξιολογητών (α) και η αξιοπιστία μεταξύ των αξιολογητών (β).

Η

Η μεταβλητή «στη συνέχεια» είχε το υψηλότερο Κοέν κάππα (k = 0,76), ενώ η μεταφορά και η απαλλαγή είχε το χαμηλότερο (k = 0.62 και k = 0,63) (Σχήμα 2).

μεταβλητών ημερομηνία είχε Κάππας Κοέν (ια) ανωτέρω 0.9, εκτός από «ημερομηνία της επόμενης επίσκεψης» ήταν k ήταν 0,7.

κατά την εξέταση των αποτελεσμάτων στρωματοποιημένη από τους δύο βαθμολογητές, θα μπορούσαμε να δούμε ότι Κοέν Κάππας ήταν σταθερά υψηλότερα για Ξεχώρισαν 1 ό, τι για Ξεχώρισαν 2. Ειδικά για τη μεταφορά μεταβλητές και Ξεχώρισαν απαλλαγή 2 είχαν Κάππας & lt Κοέν? 0.5 (Πίνακας 5).

Μαθαίνοντας αποτελέσματα

Όταν κοιτάζετε την εκμάθηση αποτελέσματα μεταξύ χρονικό σημείο 1 και σημείο στο χρόνο 2 εναντίον των δεδομένων που συλλέγονται από τον διαχειριστή του έργου MEG μπορούμε να δούμε ότι οι τιμές κάπα του βελτιωθεί σημαντικά και για τις δύο βαθμολογητές (όλα τα p

s & lt? 0.001). (Σχήμα 4)

Σχήμα 4α και 4β δείχνουν τη σύγκριση της αφαίρεσης σε δύο χρονικά σημεία των αξιολογητών 1 (α) και εκτιμητής 2 (β) σε σύγκριση με το επιλεγμένο χρυσό πρότυπο (αφαίρεση του διαχειριστή του έργου).

η

Inter-εκτιμητής της αξιοπιστίας

για τη μεταφορά μεταβλητών, απαλλαγή, στην παρακολούθηση και τον προορισμό της μεταφοράς η παρατηρούμενη συμφωνία υψηλό και κυμαίνεται από 86% έως 91% (Πίνακας 6)

η

Κάππας Κοέν έφτασε ουσιαστική ή εξαιρετική συμφωνία που κυμαίνονται από 0,70 (απαλλαγή) στο 0,83 (τον προορισμό της μεταφοράς) (Πίνακας 6? Εικ. 2). Μετά την προσαρμογή για την επικράτηση και την προκατάληψη, το πραγματικό ποσοστό της συμφωνίας (PABAK) ήταν υψηλότερη για όλες τις μεταβλητές και κυμάνθηκε 0,71 έως 0,84 (Πίνακας 6). Μεταξύ των κατηγορικές μεταβλητές, «υπό παρακολούθηση» είχε το υψηλότερο Κοέν κάππα (k = 0,76), ενώ η μεταφορά και η απαλλαγή είχε το χαμηλότερο (k = 0.62 και k = 0,63). Συμφωνία και κάπα ήταν τέλεια. (100%? K = 1) για τις τρεις μεταβλητές ημερομηνία αξιολογούνται

Συζήτηση

Τα αποτελέσματα της μελέτης μας έδειξαν ότι τόσο για ενδο-rater και δια-εκτιμητής είχαμε σημαντική για την εξαιρετική συμφωνία. Όπως ήταν αναμενόμενο, οι μεταβλητές για τις οποίες δεν ερμηνείας ήταν απαραίτητη (π.χ. μεταβλητές ημερομηνία), υψηλότερο και συχνά τέλεια συμφωνία ήταν παρούσα. Βρήκαμε ότι ένας εκτιμητής είχαν σταθερά χαμηλότερες συμφωνίας ενδο-εκτιμητής, αλλά περαιτέρω ανάλυση έδειξε βελτίωση της αποφάσεως μεταξύ χρονικό σημείο 1 και το χρονικό σημείο 2 και για τις δύο βαθμολογητές σε σύγκριση με το επιλεγμένο κανόνα χρυσού. Απροσδόκητα, Κάππας Κοέν ήταν υψηλότερες για την αξιοπιστία μεταξύ των αξιολογητών από ό, τι για την αξιοπιστία του ενδο-αξιολογητών.

Πλεονεκτήματα και Περιορισμοί

Αυτή είναι η πρώτη μελέτη για την αξιολόγηση της μετάβασης από την παιδιατρική στην ενήλικη φροντίδα με τα ιατρικά αρχεία που δοκιμάστηκε για την ενδο-rater και η αξιοπιστία μεταξύ των συλλεχθέντων δεδομένων. Επειδή οι μεταβλητές που αξιολογήθηκαν δεν ήταν πάντα εύκολο να βρείτε στα ιατρικά αρχεία, ούτε εύκολο να ρυθμό, τα αποτελέσματα αυτά μας δίνουν την αυτοπεποίθηση που χρειάζεται για να ερμηνεύσει τα δεδομένα που συλλέγονται. Επειδή η συλλογή δεδομένων ήταν ακόμα σε εξέλιξη, την αξιολόγηση της αξιοπιστίας μας έδωσε επίσης την ευκαιρία να εντοπίσει πιθανά προβλήματα που σχετίζονται με την κατανόηση του βαθμολογητή και να παρέμβει σε περίπτωση που είχαμε την εντύπωση συστηματικά λάθη συνέβαιναν. Για τα δεδομένα τα οποία είχαμε ήδη συλλεχθεί πραγματοποιήσαμε ένα διπλό έλεγχο για να βεβαιωθείτε ότι τα πιθανά λάθη της πρώτης φάσης θα μπορούσε να διορθωθεί.

Η μελέτη έχει όμως περιορισμούς. Πρώτον, το μέγεθος του δείγματος δεν επιτρέπουν την ανίχνευση των διαφορών μεταξύ νοσοκομείο ή διαφορές μεταξύ των διαφόρων τύπων των ιατρικών αρχείων (δηλαδή χαρτί versos μικρο φιλμ) ή περιόδους αρχειοθέτηση, η οποία θα μπορούσε ενδεχομένως να εξηγήσει μερικά από τη μεταβλητότητα των αξιολογητών. Συμπεριλάβαμε επίσης μόνο τρεις κλινικές, ενώ ολόκληρη η μελέτη διεξήχθη σε συνολικά εννέα, σε τρεις διαφορετικές περιοχές της γλώσσας. Προσοχή Ως εκ τούτου, απαιτείται η γενίκευση των αποτελεσμάτων. Στη μελέτη μας εξέτασε μόνο σε έγγραφα από παιδιατρική ογκολογία και, παρόλο που δεν περιέχουν αλληλογραφία με τους άλλους ειδικούς που εμπλέκονται στην παρακολούθηση, ήταν συχνά δύσκολο να κατανοήσουμε πλήρως το ιατρικό ιστορικό των ασθενών. Αυτό επιδεινώθηκε περαιτέρω από το γεγονός, ότι κανένας από τους βαθμολογητές είχαν εμπειρία στην κλινική πρακτική και ήταν εξοικειωμένοι με τα τοπικά συστήματα τεκμηρίωσης. Τέλος, κάπα έχει γνωστούς περιορισμούς που προσπαθήσαμε να ξεπεραστεί με την αναφορά του επιπολασμού προσαρμοσμένο προκατάληψη προσαρμοσμένο κάπα, όπως προτείνεται από διάφορους συγγραφείς [12,15].

Σύγκριση με άλλες μελέτες

Κανένα από οι μελέτες που εξέτασαν την αξιολόγηση της μετάβασης από την παιδιατρική στην ενήλικη φροντίδα έκανε τη διερεύνηση της αξιοπιστίας των αφηρημένων δεδομένων. Βρήκαμε αρκετές μελέτες αξιολόγησης ως επί το πλείστον μεταξύ εκτιμητής της αξιοπιστίας των διαγνωστικών εξετάσεων (προσυμπτωματικού ελέγχου και ανίχνευσης των ανεπιθύμητων ενεργειών) τα οποία δεν ήταν άμεσα συγκρίσιμα με τα δικά μας. Δύο μελέτες [4, 8] ήταν περισσότερο παρόμοια με τη μεθοδολογία και το πεδίο εφαρμογής με τη δική μας: στην πρώτη οι συγγραφείς διαπίστωσαν ότι η συμφωνία ήταν φτωχότεροι για τις μεταβλητές για τις οποίες απαιτείται ένας βαθμός interpretability (στοιχεία κρίση), ενώ ήταν υψηλότερα για τα δεδομένα, όπως δημογραφικά ή αριθμητικό χαρακτηριστικά [8]. Η ίδια βρέθηκε στην δεύτερη πολυκεντρική μελέτη με χρήση ιατρικών αφαίρεση ρεκόρ σε μια μελέτη σχετικά με το πρόγραμμα φροντίδας του άσθματος με βάση την κοινότητα [4]. Σε αυτή τη μελέτη οι ερευνητές διαπίστωσαν ότι η πολυκεντρική άντληση δεδομένων από ιατρικά αρχεία είναι αξιόπιστα και θα μπορούσαν να εξαχθούν συμπεράσματα από τα αποτελέσματα. Βρήκαν κάπα ενός συνολικού Κοέν για την ενδο-εκτιμητής της αξιοπιστίας των 0,81 (άριστα) και μια συνολική κάπα του Cohen 0,75 (ουσιαστική) στην ανάλυση μεταξύ των αξιολογητών.

Ερμηνεία των αποτελεσμάτων

Ακόμα κι αν εμείς δεν θα μπορούσε να φθάσει την τελειότητα στην αφαίρεση των στοιχείων, τα αποτελέσματά μας είναι καθησυχαστικά και έδειξε ικανοποιητικά επίπεδα της συμφωνίας. Επιπλέον, η βελτίωση των βαθμολογητών »στην κρίση μεταξύ του χρόνου 1 και χρόνο 2, πιθανόν να οφείλεται σε ένα φαινόμενο της μάθησης, επιτρέπει να υποθέσουμε ότι η άντληση τα υπόλοιπα 6 κλινικές που δεν περιλαμβάνονται στην παρούσα μελέτη, είναι τουλάχιστον παρόμοια ή υψηλότερη ποιότητα και την αξιοπιστία . Όπως ήταν αναμενόμενο, η συμφωνία ήταν υψηλότερη για τις μεταβλητές μη-κρίση όπως ημερομηνίες. Οι εν λόγω πληροφορίες ως επί το πλείστον δεν χρειάζονται ερμηνεία. Άλλα δεδομένα, όπως το μεταβλητές «μεταφορά» ή «προορισμού της μεταφοράς» ήταν να αναζητηθούν στην ελεύθερη κείμενα όπως επιστολές ή ιατρικές εκθέσεις και συχνά απαιτείται ένα διαφορετικό βαθμό προσοχής και ερμηνείας. Μάλιστα, η άντληση στοιχείων ήταν δύσκολο γιατί στην παιδιατρική ογκολογία ρύθμιση αρκετών άλλων ειδικών συχνά εμπλέκονται στην παρακολούθηση των ασθενών (π.χ. νευρολόγοι, ενδοκρινολόγοι). Έγγραφα που βρέθηκαν ήταν συχνά από διάφορους ειδικούς και οι βαθμολογητές έπρεπε να αποφασίσει αν, για παράδειγμα, ένας ασθενής μεταφέρθηκε από την παιδιατρική ογκολογία ή αν ο ασθενής είχε μεταφερθεί από άλλο ειδικό. Ένας ασθενής θα μπορούσε δηλαδή να είναι ακόμα στην παρακολούθηση στην παιδιατρική ογκολογία, αλλά θα μπορούσαν να έχουν μεταφερθεί από παιδιατρικής ενδοκρινολογίας στην ενήλικη ενδοκρινολογία. Αυτό ήταν συχνά μια πηγή σύγχυσης, όταν υδροληψίες δεδομένων.

Σε αντίθεση με άλλες μελέτες [4,7], βρήκαμε μεγαλύτερη αξιοπιστία μεταξύ των αξιολογητών από ενδο-εκτιμητής. Επειδή η αξιοπιστία μεταξύ εκτιμήθηκε σε χρονική στιγμή 2 μόνο αυτό μεγαλύτερη αξιοπιστία μπορεί να οφείλεται στο φαινόμενο της μάθησης θα μπορούσε να δείξει.

Συνέπειες για την πρακτική

Παρά τους γνωστούς περιορισμούς των αναδρομικών μελέτες που χρησιμοποιούν MR ή άλλα δευτερεύοντα στοιχεία, ένας αυξανόμενος αριθμός μελετών έχουν δείξει ότι μια τέτοια προσέγγιση μπορεί να παράγει αξιόπιστα αποτελέσματα αν η διαδικασία είναι συνεπής και τυποποιημένη, και αν βαθμολογητές είναι κατάλληλα εκπαιδευμένο. Θα ήταν ενδιαφέρον να διερευνηθεί αν τα αρχεία «οργάνωση, τα έγγραφα« η ηλικία και η μορφή αυτών των εγγράφων (π.χ. μικροφίλμ, ηλεκτρονικό, έντυπη μορφή) να επηρεάσει την ποιότητα των ανακτηθούν τα δεδομένα. Τέλος, μια τέτοια ανάλυση θα μπορούσε να βοηθήσει στον εντοπισμό πιθανών προβλημάτων, όπως δυσκολίες κατανόησης εκτιμητής ή αποκλίσεις και να βελτιώσει τη συνολική ποιότητα των αναδρομικών μελετών.

Συμπέρασμα

Η μελέτη μας έδειξε ότι παρά τις διάφορες περιορισμούς που αποδίδεται στα δεδομένα που αντλείται από τον κ, τα δεδομένα μας φαίνεται να είναι αξιόπιστη. Χάρη στην αξιολόγηση της εκμάθησης, τα συστηματικά λάθη θα μπορούσε να διορθωθεί και η ποιότητα γενικά στοιχεία βελτιωθεί. Με καλή εκπαίδευση και μια τυποποιημένη διαδικασία καλή αξιοπιστία μπορεί να επιτευχθεί.

Ευχαριστίες

Σας ευχαριστούμε την ομάδα μελέτης της μετάβασης μετά την παιδική ηλικία Μελέτη του Καρκίνου (Isabelle Brunner, Eliane Rupp και ο Σαμουήλ Wittwer) και η διαχειριστές των δεδομένων της Ογκολογικής Ομάδας ελβετική Παιδιατρική

ελβετική παιδιατρικής Ογκολογικής Ομάδας (SPOG) επιστημονική Επιτροπή: Καθ. Dr. med. R. Ammann, Βέρνη? Dr. med. R. Angst, Ααράου? Καθηγητής Dr. med. Μ Ansari, Γενεύη? PD Dr. med. Μ Beck Πόποβιτς, Λωζάνη? Dr. med. Ε Bergstraesser, Ζυρίχη? Dr. med. Π Brazzola, Μπελιντσόνα? Dr. med. J. Greiner, St. Gallen? Καθηγητής Dr. med. Μ Grotzer, Ζυρίχη? Dr. med. Η Hengartner, St. Gallen? Καθηγητής Dr. med. Τ Kuehne, Βασιλεία? Καθηγητής Dr. med. Γ Kuehni, Βέρνη? Καθηγητής Dr. med. Κ Leibundgut, Βέρνη? Καθηγητής Dr. med. ΣΤ Niggli, Ζυρίχη? PD Dr. med. J. Rischewski, Λουκέρνη? Καθηγητής Dr. med. N. von der Weid, Βασιλεία.

You must be logged into post a comment.