Οι ερευνητές προειδοποιούν ότι αυτό δεν σημαίνει πως μπορεί να «διαγνώσει» ή να προβλέψει με ακρίβεια ένα συγκεκριμένο άτομο.
Τα μεγάλα γλωσσικά μοντέλα φαίνεται πως έχουν «απορροφήσει» περισσότερα για τον τρόπο με τον οποίο σκέφτονται και απαντούν οι άνθρωποι απ’ ό,τι θα περίμενε κανείς. Νέα μελέτη που δημοσιεύθηκε στο επιστημονικό περιοδικό iScience δείχνει ότι το GPT-4 μπορεί να προβλέπει με εντυπωσιακή ακρίβεια τα συλλογικά μοτίβα απαντήσεων ανθρώπων σε ερωτηματολόγια προσωπικότητας.
Ερευνητές από το Εβραϊκό Πανεπιστήμιο και την Ιατρική Σχολή Hadassah εξέτασαν κατά πόσον ένα μεγάλο γλωσσικό μοντέλο μπορεί να εκτιμήσει εκ των προτέρων πώς θα απαντούσε ένας πληθυσμός σε ψυχομετρικές ερωτήσεις.
Για το πείραμα, το GPT-4 κλήθηκε αρχικά να δημιουργήσει ερωτηματολόγια προσωπικότητας χρησιμοποιώντας δύο εντελώς διαφορετικές πηγές: το DSM-5, το διαγνωστικό εγχειρίδιο που χρησιμοποιείται στην ψυχιατρική, και ένα βιβλίο αστρολογίας.
Στη συνέχεια, τα ερωτηματολόγια δόθηκαν σε 600 πραγματικούς συμμετέχοντες, μαζί με το καθιερωμένο εργαλείο αξιολόγησης προσωπικότητας Big Five Inventory. Πριν ακόμη συγκεντρωθούν οι ανθρώπινες απαντήσεις, το GPT-4 είχε υπολογίσει τους μέσους όρους που ανέμενε να προκύψουν.
Οι εκτιμήσεις του παρουσίασαν ισχυρή συσχέτιση με τις πραγματικές απαντήσεις: 0,71 στις ερωτήσεις που βασίζονταν στο DSM-5 και 0,85 σε εκείνες που δημιουργήθηκαν με βάση το υλικό αστρολογίας.
Το εύρημα, σύμφωνα με τους ερευνητές, υποδηλώνει ότι τα γλωσσικά μοντέλα έχουν ενσωματώσει μέσα από την εκπαίδευσή τους στατιστικά μοτίβα σχετικά με το πώς περιγράφονται και συνδέονται μεταξύ τους ανθρώπινες συμπεριφορές και χαρακτηριστικά προσωπικότητας.
Αυτό, ωστόσο, δεν σημαίνει ότι το GPT-4 μπορεί να προβλέψει με ακρίβεια τι θα απαντήσει ένα συγκεκριμένο άτομο ούτε ότι τα ερωτηματολόγια που δημιουργεί έχουν αυτομάτως κλινική εγκυρότητα. Η μελέτη αφορά κυρίως την ικανότητά του να αναπαράγει γενικές τάσεις σε επίπεδο πληθυσμού.
Ιδιαίτερο ενδιαφέρον είχε και ένα δεύτερο πείραμα, στο οποίο οι επιστήμονες έδωσαν στο μοντέλο κείμενα που δεν είχαν καμία προφανή σχέση με την ψυχολογία.
Μεταξύ αυτών ήταν ένα εγχειρίδιο χρήσης φούρνου της Bosch και μια λογοτεχνική περιγραφή από τον «Άρχοντα των Δαχτυλιδιών». Ακόμη και τότε, το GPT-4 κατάφερε να παράγει ερωτήσεις που έμοιαζαν στη δομή και στη διατύπωση με ψυχομετρικά τεστ.
Οι ερευνητές εκτιμούν ότι το αποτέλεσμα δείχνει πόσο βαθιά έχουν ενσωματωθεί στα μεγάλα γλωσσικά μοντέλα οι γλωσσικές δομές και τα μοτίβα με τα οποία οι άνθρωποι περιγράφουν την προσωπικότητα και τη συμπεριφορά τους.
