Nieuwe poker-playing AI kan veel online bedrijven vernietigen - dus ontwikkelaars brengen het niet uit

• Onderzoekers ontwikkelen de eerste AI genaamd Pluribus die menselijke experts kan verslaan in een multiplayer-game.
• Hoewel het speciaal is ontworpen voor het meest populaire pokerformaat, kan het mensen verslaan in andere multiplayer-spellen.
• De AI kan worden gebruikt op andere gebieden, waaronder cyberbeveiliging, fraudepreventie, prijsbepaling van producten en het routeren van zelfrijdende voertuigen.

De afgelopen tien jaar zijn er grote stappen gezet op het gebied van kunstmatige intelligentie (AI). Games zoals Go en Chess zijn een standaardmanier geworden om de voortgang in AI te evalueren.

Tot nu toe hebben bijna alle AI-modellen games voor twee spelers veroverd waarin de bewegingen van de tegenstander duidelijk zichtbaar zijn. Bij de meest populaire vormen van poker zijn meerdere spelers betrokken en combineren ze gokken, strategie en vaardigheden.

Nu hebben onderzoekers van Facebook en Carnegie Mellon University een AI-bot ontwikkeld die een hele tafel pokerprofessionals te slim af kan zijn met behulp van strategische instellingen. Dit is de eerste AI-bot - Pluribus genaamd - die menselijke experts te slim af is en beter inzet in een spel met zes spelers, no-limit Hold'em, de meest populaire pokervariant.

Pluribus speelde 5.000 handen tegen pokerexperts (waaronder twee winnaars van de World Series) en won resoluut. De AI was in staat om indrukwekkende strategieën toe te passen (zoals donk-betten) en te bluffen als een doorgewinterde pro.

Het was zelfs zo succesvol dat de ontwikkelaars hebben besloten de code niet te publiceren uit angst dat het de online pokerindustrie zou verwoesten. Het algoritme was zo sterk dat menselijke experts niets konden vinden om te misbruiken.

Dit is de eerste keer dat AI topprofessionals heeft verslagen in een benchmarkgame met twee of meer spelers. Het team werkt al jaren aan dit project. In 2017 kwamen ze met een bot die één-op-één poker kan spelen. Pluribus is een veel complexere versie van die bot.

Pluribus is meer dan alleen brute berekeningen

De kern van het spelplan van Pluribus wordt gegenereerd via zelfspelen:het algoritme speelt tegen kopieën van zichzelf en verbetert geleidelijk naarmate het bepaalt welke acties tot betere resultaten leiden.

Referentie:ScienceMag | DOI:10.1126/wetenschap.aay2400 | Facebook-AI

Dit soort self-play-aanpak genereert een blauwdrukstrategie voor de hele game offline. Tijdens het daadwerkelijke spel tegen mensen verbetert de AI de strategie in realtime door te zoeken naar een strategie voor vergelijkbare situaties waarin het zich tijdens het spel bevindt.

De blauwdrukstrategie van Pluribus verbetert geleidelijk tijdens training op een 64-coreprocessor 

De AI bestaat uit nieuwe online zoekalgoritmen om de opties efficiënt te berekenen door slechts een beperkte reeks volgende zetten te zoeken in plaats van alle mogelijke zetten. Het bevat ook snellere self-play-algoritmen voor games met verborgen informatie.

Samen maken deze algoritmen het mogelijk om Pluribus te trainen op een minder krachtige computer met minder middelen. Om dit in context te plaatsen:er zijn ongeveer $ 150 aan cloud computing-bronnen nodig om Pluribus te trainen, terwijl andere recente AI-doorbraakmodellen miljoenen dollars aan computerresources nodig hebben om te trainen.

Lees:Speedgate | 'S Werelds eerste sport uitgevonden door kunstmatige intelligentie

De algoritmen die worden gebruikt om poker te overwinnen, kunnen ook op andere gebieden worden geïmplementeerd, zoals het prijzen van producten, handel en het leiden van zelfrijdende voertuigen door druk verkeer. Deze algoritmen kunnen ook worden toegepast om mensen te verslaan in andere multiplayer-games en om interessantere computergames te ontwikkelen.