Grote taalmodellen zoals GPT-4 worden steeds vaker geïntegreerd in ons dagelijks leven, van het opstellen van e-mails tot het ondersteunen van medische beslissingen. Nu deze AI-systemen steeds gangbaarder worden, is inzicht in hun sociale vaardigheden van cruciaal belang voor een effectieve samenwerking tussen mens en AI.
Een baanbrekende studie, gepubliceerd in Nature Human Behaviour door onderzoekers van Helmholtz Munich, het Max Planck Instituut voor Biologische Cybernetica en de Universiteit van Tübingen, heeft systematisch geëvalueerd hoe LLM's presteren in sociale situaties met behulp van gedragsspeltheorie.
Het onderzoeksteam, onder leiding van Dr. Eric Schulz, liet verschillende AI-modellen deelnemen aan klassieke speltheoretische scenario's, ontworpen om samenwerking, competitie en strategisch beslissen te testen. Hun bevindingen schetsen een genuanceerd beeld van de sociale vaardigheden van AI.
"In sommige gevallen leek de AI bijna té rationeel voor zijn eigen bestwil," legt Dr. Schulz uit. "Het kon direct een dreiging of een egoïstische zet herkennen en daarop reageren met vergelding, maar had moeite om het grotere plaatje van vertrouwen, samenwerking en compromis te zien."
Uit het onderzoek blijkt dat LLM's bijzonder goed presteren in zelfzuchtige spellen zoals het herhaalde Prisoner's Dilemma, waar het beschermen van het eigen belang centraal staat. In spellen die coördinatie en wederzijds compromis vereisen, zoals het Battle of the Sexes, handelen ze echter suboptimaal.
Het meest veelbelovend is de ontwikkeling van een techniek genaamd Social Chain-of-Thought (SCoT), waarbij AI wordt aangespoord om het perspectief van anderen te overwegen voordat er een beslissing wordt genomen. Deze simpele interventie verbeterde de samenwerking en aanpassingsvermogen aanzienlijk, zelfs in interactie met menselijke spelers. "Toen we het model aanzetten tot sociaal redeneren, begon het zich op een veel menselijkere manier te gedragen," merkt Elif Akata op, eerste auteur van de studie.
De implicaties reiken verder dan alleen speltheorie. Naarmate LLM's meer worden geïntegreerd in de gezondheidszorg, het bedrijfsleven en sociale omgevingen, zal hun vermogen om menselijke sociale dynamiek te begrijpen essentieel zijn. Dit onderzoek biedt waardevolle inzichten in hoe AI-systemen kunnen functioneren in complexe sociale situaties en reikt praktische methoden aan om hun sociale intelligentie te vergroten.