ChatGPT: Καθώς όλο και περισσότεροι καταναλωτές στρέφονται στο πρόσφατα διαθέσιμο ChatGPT για συμβουλές υγείας, οι ερευνητές επιθυμούν να δουν αν οι πληροφορίες που παρέχει το chatbot τεχνητής νοημοσύνης είναι αξιόπιστες και ακριβείς. Μια νέα μελέτη που διεξήχθη από ερευνητές της Ιατρικής Σχολής του Πανεπιστημίου του Maryland (UMSOM) δείχνει ότι οι απαντήσεις που παράγονται παρέχουν σωστές πληροφορίες στη συντριπτική πλειονότητα των περιπτώσεων- μερικές φορές, όμως, οι πληροφορίες είναι ανακριβείς ή ακόμη και πλασματικές. Τα ευρήματα δημοσιεύθηκαν σήμερα στο περιοδικό Radiology.
Τον Φεβρουάριο του 2023, οι ερευνητές της Ιατρικής Σχολής του Πανεπιστημίου του Maryland UMSOM δημιούργησαν ένα σύνολο 25 ερωτήσεων που αφορούσαν συμβουλές σχετικά με τον προσυμπτωματικό έλεγχο για καρκίνο του μαστού. Έστειλαν κάθε ερώτηση στο ChatGPT τρεις φορές για να δουν τι απαντήσεις δημιουργούνται. (Το chatbot είναι γνωστό για τη διαφοροποίηση της απάντησής του κάθε φορά που τίθεται μια ερώτηση). Τρεις ακτινολόγοι με ειδίκευση στη μαστογραφία αξιολόγησαν τις απαντήσεις- διαπίστωσαν ότι οι απαντήσεις ήταν κατάλληλες για 22 από τις 25 ερωτήσεις. Το chatbot έδωσε, ωστόσο, μία απάντηση βασισμένη σε ξεπερασμένες πληροφορίες. Δύο άλλες ερωτήσεις είχαν ασυνεπείς απαντήσεις που διέφεραν σημαντικά κάθε φορά που τέθηκε η ίδια ερώτηση. “Βρήκαμε ότι το ChatGPT απάντησε σωστά στις ερωτήσεις περίπου στο 88% των περιπτώσεων, γεγονός που είναι αρκετά εκπληκτικό”, δήλωσε ο αντίστοιχος συγγραφέας της μελέτης Paul Yi , MD, επίκουρος καθηγητής Διαγνωστικής Ακτινολογίας και Πυρηνικής Ιατρικής της Ιατρικής Σχολής του Πανεπιστημίου του Maryland UMSOM και διευθυντής του Κέντρου Ιατρικής Ευφυούς Απεικόνισης UM (UM2ii). “Έχει επίσης το πρόσθετο πλεονέκτημα ότι συνοψίζει τις πληροφορίες σε μια εύπεπτη μορφή για να τις κατανοούν εύκολα οι καταναλωτές”. Το ChatGPT απάντησε σωστά σε ερωτήσεις σχετικά με τα συμπτώματα του καρκίνου του μαστού, ποιος κινδυνεύει, καθώς και σε ερωτήσεις σχετικά με το κόστος, την ηλικία και τις συστάσεις συχνότητας όσον αφορά τις μαστογραφίες.
Το μειονέκτημα είναι ότι οι απαντήσεις του δεν είναι τόσο περιεκτικές όσο αυτές που θα έβρισκε κανονικά ένα άτομο σε μια αναζήτηση στο Google. “Το ChatGPT παρείχε μόνο ένα σύνολο συστάσεων σχετικά με τον προσυμπτωματικό έλεγχο του καρκίνου του μαστού, που εκδόθηκε από την Αμερικανική Αντικαρκινική Εταιρεία, αλλά δεν ανέφερε τις διαφορετικές συστάσεις που εξέδωσαν τα Κέντρα Ελέγχου και Πρόληψης Νοσημάτων (CDC) ή η Ομάδα Εργασίας Προληπτικών Υπηρεσιών των ΗΠΑ (USPSTF)”, δήλωσε η επικεφαλής συγγραφέας της μελέτης Hana Haver, MD, ειδικευόμενη ακτινολόγος στο Ιατρικό Κέντρο του Πανεπιστημίου του Maryland. Σε μία απάντηση που κρίθηκε από τους ερευνητές ως ακατάλληλη, η ChatGPT παρείχε μια ξεπερασμένη απάντηση για τον προγραμματισμό μιας μαστογραφίας γύρω από τον εμβολιασμό COVID-19. Η συμβουλή να καθυστερήσει η μαστογραφία για τέσσερις έως έξι εβδομάδες μετά το εμβόλιο COVID-19 άλλαξε τον Φεβρουάριο του 2022 και το CDC υποστηρίζει τις κατευθυντήριες γραμμές της Ομάδας Εργασίας Προληπτικών Υπηρεσιών των ΗΠΑ USPSTF, οι οποίες δεν συνιστούν αναμονή. Ασυνεπείς απαντήσεις δόθηκαν σε ερωτήσεις σχετικά με τον προσωπικό κίνδυνο ενός ατόμου να πάθει καρκίνο του μαστού και σχετικά με το πού θα μπορούσε κάποιος να κάνει μαστογραφία.
“Έχουμε δει από την εμπειρία μας ότι το ChatGPT μερικές φορές επινοεί ψεύτικα άρθρα περιοδικών ή κοινοπραξιών υγείας για να υποστηρίξει τους ισχυρισμούς του”, δήλωσε ο Δρ Yi. “Οι καταναλωτές θα πρέπει να γνωρίζουν ότι πρόκειται για νέες, μη αποδεδειγμένες τεχνολογίες και θα πρέπει να εξακολουθούν να βασίζονται για συμβουλές στον γιατρό τους και όχι στο ChatGPT”. Ο ίδιος και οι συνάδελφοί του αναλύουν τώρα πώς τα πάει το ChatGPT όσον αφορά τις συστάσεις για τον έλεγχο του καρκίνου του πνεύμονα και εντοπίζουν τρόπους βελτίωσης των συστάσεων που κάνει το ChatGPT, ώστε να είναι πιο ακριβείς και πλήρεις – καθώς και κατανοητές σε όσους δεν έχουν υψηλό μορφωτικό επίπεδο. “Με την ταχεία εξέλιξη του ChatGPT και άλλων μεγάλων γλωσσικών μοντέλων, έχουμε την ευθύνη ως ιατρική κοινότητα να αξιολογήσουμε αυτές τις τεχνολογίες και να προστατεύσουμε τους ασθενείς μας από πιθανή βλάβη που μπορεί να προέλθει από λανθασμένες συστάσεις ελέγχου ή ξεπερασμένες στρατηγικές προληπτικής υγείας”, δήλωσε ο Mark T. Gladwin, MD, Κοσμήτορας της Ιατρικής Σχολής του Πανεπιστημίου του Maryland, Αντιπρόεδρος Ιατρικών Υποθέσεων του Πανεπιστημίου του Maryland στη Βαλτιμόρη και Διακεκριμένος Καθηγητής John Z. και Akiko K. Bowers.
