Τα μεγάλα γλωσσικά μοντέλα (LLM) προσεγγίζουν γνώσεις και συλλογιστικές δεξιότητες σε επίπεδο ειδικών στην οφθαλμολογία, σύμφωνα με μια μελέτη που δημοσιεύτηκε διαδικτυακά στις 17 Απριλίου στο PLOS Digital Health. Ο Arun James Thirunavukarasu, M.B., B.Chir., από το Πανεπιστήμιο της Οξφόρδης στο Ηνωμένο Βασίλειο, και οι συνεργάτες του αξιολόγησαν τις κλινικές δυνατότητες των LLM τελευταίας τεχνολογίας στην οφθαλμολογία.
Οι απαντήσεις σε 87 ερωτήσεις συγκρίθηκαν για τα GPT-3.5, GPT-4, PalM 2, LLaMA, ειδικούς οφθαλμίατρους και εκπαιδευμένους γιατρούς. Οι ερευνητές διαπίστωσαν ότι η απόδοση του GPT-4 (69 τοις εκατό) ήταν ανώτερη από την απόδοση του GPT-3,5 (48 τοις εκατό), του LLaMA (32 τοις εκατό) και του PalM 2 (56 τοις εκατό) και συγκρίθηκαν ευνοϊκά με τους ειδικούς οφθαλμίατρους (διάμεσος, 76 τοις εκατό), ασκούμενους οφθαλμολογίας (μέσος όρος, 59 τοις εκατό) και μη ειδικευμένους κατώτερους γιατρούς (διάμεσος, 43 τοις εκατό).
Η χαμηλή συμφωνία μεταξύ των LLM και των γιατρών οφειλόταν σε ιδιοσυγκρασιακές διαφορές στη γνώση και τη λογική, με συνολική συνέπεια μεταξύ ατόμων και τύπου. Οι βαθμολογούμενοι οφθαλμίατροι προτίμησαν τις αποκρίσεις GPT-4 έναντι του GPT-3.5 λόγω υψηλότερης ακρίβειας και συνάφειας. «Οι LLM πλησιάζουν οφθαλμολογικές γνώσεις και συλλογισμούς σε επίπεδο ειδικών και μπορεί να είναι χρήσιμοι για την παροχή συμβουλών σχετικά με τα μάτια όπου η πρόσβαση σε επαγγελματίες υγείας είναι περιορισμένη», επισημαίνουν οι συγγραφείς. «Απαιτείται περαιτέρω έρευνα για τη διερεύνηση πιθανών οδών κλινικής ανάπτυξης».