Uno studio condotto dall'Università di Stavanger in Norvegia rivela che i modelli linguistici di grandi dimensioni (LLM) dell'intelligenza artificiale hanno superato gli esseri umani nei test progettati per misurare il pensiero creativo.
I ricercatori hanno messo 256 volontari umani contro tre chatbot AI - ChatGPT3, ChatGPT4 e Copy.Ai (basato su GPT-3) - nel generare usi alternativi per oggetti di uso quotidiano come corde, scatole, matite e candele.
Lo studio misura il pensiero divergente attraverso l'Alternate Uses Task (AUT), sviluppato dallo psicologo J.P. Guilford nel 1967.
L'idea è che i partecipanti escogitino il maggior numero possibile di usi per oggetti semplici in un periodo di tempo stabilito. Ad esempio, una graffetta può essere utilizzata come grimaldello o strumento per incidere.
In generale, le IA hanno superato gli esseri umani in questo compito. "In effetti, questo è un tipo di abilità notevole che i chatbot AI mostrano", ha dichiarato Simone Grassini, autore dello studio. "I risultati dimostrano che le IA sono migliori della maggior parte degli esseri umani nel pensiero creativo".
Sia i partecipanti umani che quelli dell'intelligenza artificiale hanno seguito le stesse istruzioni, sottolineando l'importanza della qualità creativa rispetto alla quantità di idee.
I chatbot sono stati testati 11 volte utilizzando quattro diversi prompt di oggetti. Sono state apportate alcune modifiche per equiparare il numero di idee generate dai chatbot a quelle dei partecipanti umani.
Sebbene i chatbot abbiano ottenuto un punteggio medio più alto nei compiti di pensiero divergente, la ricerca ha anche osservato che le idee più innovative generate dall'uomo corrispondevano o superavano quelle dei chatbot AI.
"I nostri risultati dimostrano che, almeno per ora, i migliori esseri umani continuano a superare l'IA", ha aggiunto Grassini.
Questo dato è rivelatore: gli esseri umani sono in grado di produrre una qualità reale, ma non con la stessa rapidità dell'intelligenza artificiale, che è ciò che ci si aspetterebbe di più.
Il studiopubblicato su Nature, evidenzia che le risposte generate dall'intelligenza artificiale hanno ottenuto punteggi più alti di quelle umane in categorie come la distanza semantica e la creatività.
Tuttavia, gli esseri umani hanno comunque superato i chatbot in sette delle otto categorie di punteggio relative alle migliori risposte individuali.
"Sapevo che il chatbot avrebbe dato buoni risultati, ma credo che abbia dato risultati ancora migliori di quelli che mi aspettavo", ha commentato Grassini.
Nonostante i risultati promettenti, i ricercatori hanno sottolineato che la complessità unica della creatività umana potrebbe essere difficile da replicare o superare per l'IA.
Grassini conclude: "È ancora da stabilire se queste capacità dell'IA si tradurranno direttamente nei sistemi di IA, sostituendo i lavori umani che richiedono il pensiero creativo. Preferisco pensare che l'IA aiuterà gli esseri umani a migliorare le loro capacità".
Per saperne di più sullo studio
Lo studio ha rivelato che l'intelligenza artificiale può adottare approcci nuovi e innovativi per rispondere alle domande in modo creativo.
Sebbene le risposte migliori fossero ancora di origine umana, gli esseri umani erano molto più soggetti a fluttuazioni di concentrazione e ad altri fattori che impedivano loro di raggiungere l'ampiezza delle risposte generate dall'intelligenza artificiale.
Ecco come funzionava:
- Metodologia: Lo studio ha utilizzato l'Alternate Uses Task (AUT), un test di lunga data sicuro per il pensiero divergente e la creatività. I partecipanti erano 256 persone e tre chatbot AI avanzati. È stato chiesto loro di pensare a usi insoliti e creativi per gli oggetti di uso quotidiano, e le risposte umane e dell'IA sono state valutate in base alla loro originalità e utilità.
- Confronto delle prestazioni: In media, i chatbot AI hanno superato i partecipanti umani sia nei punteggi medi che in quelli massimi di creatività. Tuttavia, gli esseri umani con le prestazioni più elevate potevano ancora eguagliare o superare i livelli di creatività dei chatbot AI.
- Differenze tra IA ed esseri umani: Lo studio ha rivelato che i partecipanti umani hanno spesso ottenuto prestazioni inferiori a causa della perdita di attenzione a metà del compito. Al contrario, l'intelligenza artificiale ha eseguito il compito senza stancarsi, contribuendo a ottenere prestazioni complessivamente superiori.
- Punti di forza e di debolezza dell'IA e della creatività umana: Lo studio ipotizza che l'accesso delle IA a maggiori risorse computazionali spieghi le loro elevate prestazioni medie. In sostanza, possono calcolare un numero maggiore di utilizzi alternativi plausibili per gli oggetti, con una maggiore possibilità di individuare gli usi più insoliti.
- Limiti e direzioni future: Lo studio riconosce i limiti, come la mancanza di diversità demografica tra i partecipanti umani. Inoltre, utilizza un solo test di creatività di età moderata, che naturalmente ha una portata limitata.
I ricercatori stanno creando nuovi metodi per confrontare gli approcci dell'IA e dell'uomo a test, domande e altri compiti.
Uno studio recente ha rilevato che la ChatGPT ha fatto eccellere gli studenti in nove soggetti su 32 - piuttosto solida, ma probabilmente una buona notizia per l'umanità.
Siamo ancora a una generazione di IA prima che la tecnologia ci batta completamente.
