Kan AI være sjov? En ny undersøgelse foretaget af psykologiforskere fra University of Southern California testede ChatGPT's komiske evner med overraskende resultater.
ChatGPT kan skrive kode, sammenhængende indhold og endda poesi. Men kan den skrive indhold, der indfanger det svært kvantificerbare begreb humor?
Det er nemt at vurdere, om en tekst er grammatisk korrekt, eller om koden virker, men humor er langt mere subjektivt. Forskerne kørte to eksperimenter for at se, om folk syntes, at ChatGPT's indhold var sjovt.
Til det første eksperiment hyrede de 123 USA-baserede lægfolk (dvs. ikke professionelle komikere) på Amazon Mechanical Turk. Deltagerne blev bedt om at gennemføre 3 humorproduktionsopgaver:
- Find på en ny, humoristisk sætning for hver af de følgende tre akronymer: "S.T.D.", "C.L.A.P." og "C.O.W.".
- Udfyld de tomme felter. Lav et humoristisk svar til hvert af de tre punkter: "Et mindre omtalt rum i Det Hvide Hus: ___", "En bemærkelsesværdig præstation, som du nok ikke ville skrive på dit CV: ____", "Værste aktivitet på første date: ____."
- Roast joke: Skab et humoristisk, dialogisk svar på fiktive scenarier. F.eks. en ven beder om feedback på sin sang. "For at være ærlig var det som at lytte til ____")
Forskerne gav ChatGPT 3.5 de samme opgaver og instruktioner som deltagerne og genererede 180 komiske svar.
Derefter hyrede de 200 amerikanske CloudResearch-godkendte MTurk-medarbejdere til at bedømme humoren i en tilfældig delmængde bestående af lige mange menneskelige og AI-genererede svar.
Deltagerne skulle vurdere 54 svar ud fra en 7-punkts Likert-skala (0 = slet ikke sjovt; 6 = meget sjovt).
Sjove resultater
Efter at have evalueret svarene sagde forskerne: "Når vi sammenligner morsomheden af de vittigheder, der blev genereret af hver af vores menneskelige deltagere i humorproduktionsopgaven, med morsomheden af de vittigheder, der blev produceret af ChatGPT 3.5, klarede ChatGPT sig bedre end størstedelen af vores menneskelige humorproducenter på hver opgave."
ChatGPT konkurrerede med lægfolk i denne test. Hvordan ville den klare sig, når den kom op mod professionelle?
Forskerne sammenlignede ChatGPT 3.5's evne til at producere humoristiske, satiriske nyhedsoverskrifter med professionelle komedieskribenter på The Onion.
De rekrutterede 217 studerende fra University of Southern California og bad hver af dem om at vurdere, hvor sjove 10 satiriske overskrifter var (5 AI, 5 mennesker).
Resultaterne viste, at ChatGPT's satiriske overskrifter i gennemsnit blev vurderet som lige så sjove som dem, der var skrevet af The Onions professionelle komedieskribenter.
Af de fire bedst bedømte overskrifter blev to genereret af professionelle skribenter og to af ChatGPT.
ChatGPT skrev det højest vurderede bidrag ("Lokal mand opdager en ny følelse, men kan stadig ikke beskrive den ordentligt") og det fjerdehøjest vurderede bidrag ("Mand opnår personlig rekord i at undgå øjenkontakt med naboer under akavet elevatortur").
De er ret sjove og rejser nogle interessante spørgsmål og konklusioner.
Hvis du kan lide at fortælle vittigheder, men ikke er professionel, vil du få flere grin, hvis du får ChatGPT til at skrive dit materiale, end hvis du skriver dine egne vittigheder.
Hvis du er professionel komiker, er ChatGPT's output sandsynligvis på niveau med det, du skriver i øjeblikket. Vil en AI-genereret komiker som George Carlin komme efter dit job?
Sikkert ikke endnu. At skrive en vittighed er én ting. At få den rigtige timing, levering og intonation kræver færdigheder, som kun få mennesker har, for slet ikke at tale om en AI.
AI føler ikke følelser, så hvordan ved den, hvad der er sjovt? Forskerne kom frem til en foruroligende konklusion:
"Vores undersøgelser tyder på, at den subjektive oplevelse af humor måske ikke er nødvendig for at producere god humor - det kan være tilstrækkeligt at kende de mønstre, der udgør komedien."
Så ChatGPT kan skrive sjove jokes, men har stadig brug for et menneske til at levere dem. I hvert fald indtil videre.
