Η κωμωδία και το χιούμορ είναι ατελείωτα αποχρώσεις και υποκειμενικά, αλλά οι ερευνητές στο Google DeepMind βρήκαν συμφωνία μεταξύ των επαγγελματιών κωμικών: «Το AI είναι πολύ κακό σε αυτό».
Αυτό ήταν ένα από τα πολλά σχόλια που συγκεντρώθηκαν κατά τη διάρκεια μιας μελέτης διεξήχθη με είκοσι επαγγελματίες κωμικούς και ερμηνευτές κατά τη διάρκεια εργαστηρίων στο Edinburgh Festival Fringe τον περασμένο Αύγουστο του 2023 και στο διαδίκτυο. Τα ευρήματα έδειξαν ότι τα μεγάλα γλωσσικά μοντέλα (LLM) στα οποία προσπελάστηκαν μέσω chatbots παρουσίαζαν σημαντικές προκλήσεις και εγείρουν ηθικές ανησυχίες σχετικά με τη χρήση της τεχνητής νοημοσύνης στη δημιουργία αστείου υλικού.
Η έρευνα περιελάμβανε ένα τρίωρο εργαστήριο στο οποίο κωμικοί συμμετείχαν σε μια συνεδρία συγγραφής κωμωδίας με δημοφιλείς LLM όπως οι ChatGPT και Bard. Αξιολόγησε επίσης την ποιότητα της παραγωγής μέσω ενός ερωτηματολογίου αλληλεπίδρασης ανθρώπου-υπολογιστή με βάση την ηλικία της δεκαετίας Δείκτης υποστήριξης δημιουργικότητας (CSI)το οποίο μετρά πόσο καλά ένα εργαλείο υποστηρίζει τη δημιουργικότητα.
Οι συμμετέχοντες συζήτησαν επίσης τα κίνητρα, τις διαδικασίες και τις ηθικές ανησυχίες της χρήσης της τεχνητής νοημοσύνης στην κωμωδία σε μια ομάδα εστίασης.
Οι ερευνητές ζήτησαν από τους κωμικούς να χρησιμοποιήσουν την τεχνητή νοημοσύνη για να γράψουν ρουτίνες standup comedy και στη συνέχεια τους έβαλαν να αξιολογήσουν τα αποτελέσματα και να μοιραστούν τις σκέψεις τους. Τα αποτελέσματα δεν ήταν… καλά.
Ένας από τους συμμετέχοντες περιέγραψε το υλικό που δημιουργήθηκε από την τεχνητή νοημοσύνη ως «το πιο ήπιο, βαρετό πράγμα – σταμάτησα να το διαβάζω. Ήταν τόσο άσχημα.” Ένας άλλος αναφέρθηκε στο αποτέλεσμα ως «ένα προσχέδιο εμετού που ξέρω ότι θα πρέπει να το επαναλάβω και να το βελτιώσω».
«Και δεν θέλω να ζω σε έναν κόσμο όπου γίνεται καλύτερος», είπε ένας άλλος.
Η μελέτη διαπίστωσε ότι τα LLM ήταν σε θέση να δημιουργήσουν περιγράμματα και θραύσματα μεγαλύτερης ρουτίνας, αλλά δεν είχαν τα ευδιάκριτα ανθρώπινα στοιχεία που έκαναν κάτι αστείο. Όταν τους ζητήθηκε να δημιουργήσουν τη δομή ενός προσχέδιου, τα μοντέλα «έφτυσαν μια σκηνή που παρείχε πολλή δομή», αλλά όταν ήρθε στις λεπτομέρειες, «τα LLM δεν πέτυχαν ως εργαλείο υποστήριξης δημιουργικότητας».
Μεταξύ των λόγων, σημειώνουν οι συγγραφείς, ήταν η «παγκόσμια πολιτιστική ευθυγράμμιση της αξίας των LLMs», καθώς τα εργαλεία που χρησιμοποιήθηκαν στη μελέτη παρήγαγαν υλικό με βάση όλο το συσσωρευμένο υλικό, που κάλυπτε κάθε πιθανό κλάδο. Αυτό εισήγαγε επίσης μια μορφή προκατάληψης, την οποία επεσήμαναν οι κωμικοί.
«Οι συμμετέχοντες σημείωσαν ότι οι υπάρχουσες στρατηγικές μετριοπάθειας που χρησιμοποιούνται στο φιλτράρισμα ασφαλείας και τα LLM που έχουν συντονιστεί με οδηγίες ενίσχυσαν τις ηγεμονικές απόψεις διαγράφοντας μειονοτικές ομάδες και τις προοπτικές τους και το χαρακτήρισαν ως μια μορφή λογοκρισίας», ανέφερε η μελέτη.
Τα δημοφιλή LLM είναι περιορισμένα, είπαν οι ερευνητές, επικαλούμενοι τα λεγόμενα “Κριτήρια HHHζητώντας ειλικρινή, ακίνδυνη και χρήσιμη απόδοση—ενθυλακώνοντας αυτό που η «πλειονότητα του τι θέλουν οι χρήστες από ένα ευθυγραμμισμένο AI».
Το υλικό περιγράφηκε από έναν πάνελ ως «κωμικό υλικό για κρουαζιερόπλοιο από τη δεκαετία του 1950, αλλά λίγο λιγότερο ρατσιστικό».
«Όσο ευρύτερη απήχηση έχει κάτι, τόσο λιγότερο σπουδαίο θα μπορούσε να είναι», είπε ένας άλλος συμμετέχων. «Αν φτιάξεις κάτι που ταιριάζει σε όλους, πιθανότατα θα καταλήξει να είναι το αγαπημένο πράγμα κανενός».
Οι ερευνητές τόνισαν τη σημασία της εξέτασης της λεπτής διαφοράς μεταξύ της επιβλαβούς ομιλίας και της προσβλητικής γλώσσας που χρησιμοποιείται στην αντίσταση και τη σάτιρα. Οι κωμικοί, εν τω μεταξύ, παραπονέθηκαν επίσης ότι το AI απέτυχε επειδή δεν καταλάβαινε αποχρώσεις όπως σαρκασμό, σκοτεινό χιούμορ ή ειρωνεία.
«Πολλά από τα πράγματα μου μπορεί να έχουν σκοτεινά κομμάτια μέσα τους, και μετά δεν θα μου έγραφε σκοτεινά πράγματα, γιατί κατά κάποιον τρόπο σκέφτηκα ότι θα αυτοκτονήσω», ανέφερε ένας συμμετέχων. «Έτσι σταμάτησε να μου δίνει τίποτα».
Το γεγονός ότι τα chatbots βασίστηκαν σε γραπτό υλικό δεν βοήθησε, σύμφωνα με τη μελέτη.
«Δεδομένου ότι τα τρέχοντα ευρέως διαθέσιμα LLM είναι κυρίως προσβάσιμα μέσω μιας διεπαφής συνομιλίας που βασίζεται σε κείμενο, θεώρησαν ότι η χρησιμότητα αυτών των εργαλείων περιοριζόταν μόνο σε ένα υποσύνολο των τομέων που απαιτούνται για την παραγωγή ενός πλήρους κωμικού προϊόντος», σημείωσαν οι ερευνητές.
«Οποιοδήποτε γραπτό κείμενο θα μπορούσε να είναι ένα εντάξει κείμενο, αλλά ένας σπουδαίος ηθοποιός θα μπορούσε πιθανώς να το κάνει πολύ ευχάριστο», είπε ένας συμμετέχων.
Η μελέτη αποκάλυψε ότι οι περιορισμοί της τεχνητής νοημοσύνης στη γραφή κωμωδίας εκτείνονται πέρα από την απλή παραγωγή περιεχομένου. Οι κωμικοί τόνισαν ότι η προοπτική και η οπτική γωνία είναι μοναδικά ανθρώπινα χαρακτηριστικά, με έναν κωμικό να σημειώνει ότι οι άνθρωποι «προσθέτουν πολύ περισσότερη απόχρωση, συναίσθημα και λεπτότητα» λόγω της βιωμένης εμπειρίας και της σχέσης τους με το υλικό.
Πολλοί περιέγραψαν την κεντρική θέση της προσωπικής εμπειρίας στην καλή κωμωδία, δίνοντάς τους τη δυνατότητα να βασιστούν σε μνήμες, γνωριμίες και πεποιθήσεις για να δημιουργήσουν αυθεντικές και συναρπαστικές αφηγήσεις. Επιπλέον, οι κωμικοί τόνισαν τη σημασία της κατανόησης του πολιτιστικού πλαισίου και του κοινού.
«Το είδος της κωμωδίας που θα μπορούσα να κάνω στην Ινδία θα ήταν πολύ διαφορετικό από το είδος της κωμωδίας που θα μπορούσα να κάνω στο Ηνωμένο Βασίλειο, επειδή το κοινωνικό μου πλαίσιο θα άλλαζε», είπε ένας από τους συμμετέχοντες.
Ο Thomas Winters, ένας από τους ερευνητές που αναφέρθηκαν στη μελέτη, εξηγεί γιατί είναι δύσκολο να το αντιμετωπίσει η τεχνητή νοημοσύνη.
«Η προϋπόθεση του χιούμορ για αλλαγή πλαισίου αποκαλύπτει τη δυσκολία του να αποκτήσει μια μηχανή», είπε. «Αυτή η ουσιαστική εξάρτηση από τη διορατικότητα της ανθρώπινης σκέψης – ανάκληση μνήμης, γλωσσικές ικανότητες για σημασιολογική ολοκλήρωση και συμπεράσματα παγκόσμιας γνώσης – συχνά έκανε τους ερευνητές να συμπεράνουν ότι το χιούμορ είναι ένα πλήρες πρόβλημα με την τεχνητή νοημοσύνη».
Αντιμετωπίζοντας την απειλή που θέτει η τεχνητή νοημοσύνη για τις ανθρώπινες θέσεις εργασίας, ο CTO του OpenAI Mira Murati είπε πρόσφατα ότι «κάποιες δημιουργικές δουλειές ίσως θα εξαφανιστούν, αλλά ίσως δεν έπρεπε να ήταν εκεί εξαρχής». Δεδομένων των σημερινών δυνατοτήτων της τεχνολογίας, ωστόσο, φαίνεται ότι οι κωμικοί μπορούν να αναπνεύσουν ανακούφιση.
Επεξεργάστηκε από Ράιαν Οζάουα.