Pluribus AI verslaat pokerspelsprofessionals – industriestilte wekt zorgen

• Onderzoekers ontwikkelen de eerste AI genaamd Pluribus die menselijke experts kan verslaan in een multiplayer-spel.
• Hoewel het specifiek ontworpen is voor het populairste pokerformaat, kan het mensen verslaan in andere multiplayer-spellen.
• De AI kan gebruikt worden in andere velden, waaronder cybersecurity, fraudepreventie, productprijzen, en routing van zelfrijdende voertuigen.

In het afgelopen decennium hebben er grote vooruitgang plaatsgevonden in kunstmatige intelligentie (AI). Spellen als Go en Schaken zijn een standaardmanier geworden om de vooruitgang in AI te evalueren.

Tot nu toe hebben bijna alle AI-modellen tweepersoonsspelen veroverd waarin de tegenstanders zetten duidelijk zichtbaar zijn. De populairste vormen van poker, aan de andere kant, omvatten meerdere spelers en combineren gokken, strategie en vaardigheid.

Nu hebben onderzoekers van Facebook en Carnegie Mellon University een AI-bot ontwikkeld die een hele tafel pokersprofessionals kan uitspelen met strategische instellingen. Dit is de eerste AI-bot — genaamd Pluribus — die menselijke experts in een zes-persoonsspel, no-limit Hold'em, het populairste pokerformaat, kan out-bluffen en out-betten.

Pluribus speelde 5.000 handen tegen pokerexperts (inclusief twee winnaars van de World Series) en won beslissend. De AI was in staat om indrukwekkende strategieën (zoals donk betting) aan te nemen en te bluffen als een doorgewinterde pro.

Feitelijk was het zo succesvol dat de ontwikkelaars besloten de code niet te publiceren uit vrees dat het de online pokerindustrie zou kunnen verwoesten. Het algoritme was zo sterk dat menselijke experts niets konden vinden om te exploiteren.

Dit is de eerste keer dat AI top-professionals in een benchmarkspel met twee of meer spelers heeft verslagen. Het team werkt al jaren aan dit project. In 2017 brachten ze een bot uit die in staat was om one-on-one poker te spelen. Pluribus is een veel complexere versie van die bot.

Pluribus Is Meer Dan Alleen Brute Berekening

De kern van Pluribus' spelplan wordt gegenereerd via zelfspel: het algoritme speelt tegen kopieën van zichzelf en verbetert geleidelijk naarmate het bepaalt welke acties leiden tot betere uitkomsten.

Referentie: ScienceMag | DOI:10.1126/science.aay2400 | Facebook AI

Deze zelfspelbenadering genereert een blauwdrukstrategie voor het hele spel offline. Tijdens de daadwerkelijke spel tegen mensen verbetert de AI de strategie in real-time door te zoeken naar een strategie voor vergelijkbare situaties waarin het zich tijdens het spel bevindt.

Pluribus' blauwdrukstrategie verbetert geleidelijk tijdens training op een 64-core processor

De AI bestaat uit nieuwe online zoekalgoritmen om de opties efficiënt te berekenen door slechts een beperkte set volgende zetten te doorzoeken in plaats van alle mogelijke zetten. Het bevat ook snellere zelfspelenalgoritmen voor spellen met verborgen informatie.

Samen stellen deze algoritmes Pluribus in staat om getraind te worden op een minder krachtige computer met minder bronnen. Om dit in context te plaatsen, vereist het ongeveer $150 aan cloud computing bronnen om Pluribus te trainen, terwijl andere recente AI-doorbraakmodellen miljoenen dollars aan computebronnen vereisen om te trainen.

Lees: Speedgate | Werelds Eerste Sport Uitgevonden Door Kunstmatige Intelligentie

De algoritmes gebruikt om poker te veroveren, kunnen ook geïmplementeerd worden in andere gebieden, zoals productprijzen, handel, en routing van zelfrijdende voertuigen door drukke verkeerssituaties. Deze algoritmes kunnen ook toegepast worden om mensen in andere multiplayer-spellen te verslaan en meer interessante computerspellen te ontwikkelen.