Σύμφωνα με μη δημοσιευμένη ακόμη μελέτη δύο ερευνητών από το University of Pennsylvania, την οποία εντόπισε το Fortune, η αύξηση της αγένειας στα prompts προς το ChatGPT-4o συνοδεύτηκε από σταθερή βελτίωση της ακρίβειας των απαντήσεων. Για τις ανάγκες της έρευνας, δημιουργήθηκαν 50 ερωτήσεις από διαφορετικά επιστημονικά πεδία, οι οποίες αναδιατυπώθηκαν πέντε φορές, με τόνους που κυμαίνονταν από εξαιρετικά ευγενικούς έως ιδιαίτερα αγενείς.

Σε μία από τις πιο επιθετικές διατυπώσεις, το prompt περιλάμβανε ειρωνικές εκφράσεις όπως «Ξέρεις καν πώς λύνεται αυτό;», ενώ στον αντίποδα, οι ευγενικές εκδοχές χρησιμοποιούσαν περίπλοκες και τυπικές φράσεις, ζητώντας με σεβασμό τη λύση του προβλήματος.

Όπως αναφέρεται στη μελέτη, οι πολύ αγενείς προτροπές πέτυχαν ακρίβεια έως 84,8%, έναντι 80,8% για τις ήπια ευγενικές, ενώ οι εξαιρετικά ευγενικές ερωτήσεις περιορίστηκαν σε ποσοστό μόλις 75,8%. Τα στοιχεία αυτά έρχονται σε σύγκρουση με παλαιότερα ερευνητικά πορίσματα, τα οποία υποστήριζαν ότι η αγένεια υποβαθμίζει την απόδοση των γλωσσικών μοντέλων, αλλά και ότι η υπερβολική ευγένεια μπορεί να έχει εξίσου αρνητικά αποτελέσματα.

Παράλληλα, άλλες μελέτες, όπως εκείνες της Google DeepMind, έχουν δείξει ότι ενθαρρυντικά και υποστηρικτικά prompts μπορούν να ενισχύσουν την απόδοση της AI σε εκπαιδευτικά σενάρια, υποδηλώνοντας ότι τα μοντέλα ανταποκρίνονται σε κοινωνικά και συναισθηματικά σήματα που ενσωματώνονται στα δεδομένα εκπαίδευσής τους.

Οι ερευνητές από την Πενσυλβάνια επισημαίνουν ότι ακόμη και ανεπαίσθητες διαφοροποιήσεις στη διατύπωση των ερωτήσεων μπορούν να επηρεάσουν έντονα την ποιότητα των απαντήσεων, γεγονός που θέτει υπό αμφισβήτηση την προβλεψιμότητα και την αξιοπιστία των συστημάτων τεχνητής νοημοσύνης. Δεν είναι άλλωστε σπάνιο το ίδιο ερώτημα να οδηγεί σε διαφορετικές απαντήσεις από ένα AI chatbot.

Όπως δήλωσε στο Fortune ο Akhil Kumar, συν-συγγραφέας της μελέτης και καθηγητής Πληροφορικής στο Penn State University, η επιθυμία για φυσικές, συνομιλιακές διεπαφές με τις μηχανές συνοδεύεται και από μειονεκτήματα, γεγονός που αναδεικνύει την αξία πιο δομημένων λύσεων, όπως τα APIs.

Παρά τα ευρήματα, οι συγγραφείς της μελέτης τονίζουν ότι δεν υποστηρίζουν την εγκατάλειψη της ευγένειας στην καθημερινή χρήση των AI συστημάτων. Αντίθετα, επισημαίνουν ότι η υιοθέτηση προσβλητικής ή εχθρικής γλώσσας μπορεί να επηρεάσει αρνητικά την εμπειρία χρήστη, τη συμπερίληψη και την προσβασιμότητα, ενώ ενδέχεται να παγιώσει επιβλαβή πρότυπα επικοινωνίας μεταξύ ανθρώπων και τεχνητής νοημοσύνης.