Een nieuw onderzoek toont aan dat AI sneller en beter is dan mensen in het oplossen van CAPTCHAs.
Bijna twintig jaar lang zijn CAPTCHA's gebruikt om websites te beschermen tegen bots, maar de resultaten van dit onderzoek laten zien dat die dagen wellicht voorbij zijn.
De onderzoekers liet 1400 mensen 14.000 CAPTCHA's oplossen, waaronder de lastigere reCAPTCHA-uitdagingen van Google. De deelnemers wisten niet dat ze deel uitmaakten van een onderzoek omdat de onderzoekers gewoon werknemers op MTurk inhuurden om de CAPTCHA's op te lossen.
Ironisch genoeg heeft een GPT-4 bot in maart van dit jaar naar verluidt een werknemer op MTurk ingehuurd om een CAPTCHA op te lossen. Maar nu lijkt het erop dat AI-bots dit niet meer hoeven uit te besteden aan mensen op freelance platforms.
Toen de onderzoekers de prestaties van mensen met die van bots vergeleken, ontdekten ze dat AI beter presteerde dan mensen bij alle soorten CAPTCHA's die ze testten. De bots waren niet alleen sneller, maar ze waren ook veel nauwkeuriger bij het oplossen van de "bewijs dat je een mens bent"-tests.
Bij de eenvoudigere reCAPTCHA klikuitdagingen hadden de mensen gemiddeld een nauwkeurigheid tussen 71%-85% en losten ze deze op in 3,1 tot 4,9 seconden.
De bots slaagden erin deze op te lossen met een nauwkeurigheid van 100% en een gemiddelde van 1,4 seconden.
Voor de lastigere reCAPTCHA-afbeeldingsuitdagingen was de race een stuk hechter, maar kwam AI nog steeds als beste uit de bus. Dit zijn de tests van het type "klik op alle brandkranen".
De mensen bereikten een nauwkeurigheid van 81% met een oplostijd tussen 15 en 26 seconden. De bots behaalden een nauwkeurigheid van 85% bij 17,5 seconden.
Dit betekent dat de methoden die websites gebruiken om bots buiten te houden eigenlijk beter zijn om mensen buiten te houden.
Mensen hebben er een hekel aan om CAPTCHA's in te vullen en nu lijkt het erop dat we onze tijd er toch mee verdoen.
CAPTCHA is een van mijn favoriete acroniemen. Het staat voor "Completely Automated Public Turing test to tell Computers and Humans Apart". Behalve dat het dat niet meer kan.
We zouden moeilijkere puzzels kunnen verzinnen om "te bewijzen dat je een mens bent", maar dan komen er allerlei ethische kwesties naar boven. Ben je alleen een mens als je slim genoeg bent om een puzzel op te lossen?
En terwijl AI slimmer wordt, worden mensen dat over het algemeen niet. Als je ze een complexere CAPTCHA voorschotelt, doen ze gewoon geen moeite.
We zullen een slimmere manier moeten vinden om onderscheid te maken tussen echte mensen en AI die steeds meer op mensen gaat lijken. Voor nu lijkt het erop dat de bots CAPTCHA's hebben verwezen naar de groeiende lijst van uitgestorven internet curiosa.
