technologie

Kunstmatige intelligentie verslaat poker man, wat nu?

Kunstmatige intelligentie versloeg opnieuw de mens. Deze keer won de AI het pokerspel. En dit lijkt niet verrassend, omdat in dit spel kunstmatige intelligentie de eerste was. Maar nu is alles anders: de auto won onmiddellijk vijf spelers in Texas Hold'em en was tegelijkertijd gericht op de hoogst mogelijke winst.

Wat is Texas Hold'em?

Als je niet ingaat op de details van de spelregels, danDit is een van de meest voorkomende soorten poker. In diezelfde scènes die je in veel films zag toen spelers om de tafel zaten en om de beurt gokten, is het hold'em dat verschijnt. Er zijn 6 spelers aan de tafel en zij maken geleidelijk aan weddenschappen. Je kunt op elk moment het spel verlaten, maar dan krijg je het geïnvesteerde geld niet terug. Dit gaat door tot een gespannen "gevecht" één op één, waarin de winnaar alles neemt.

In een recent experiment ontwikkelaarsDe AI van Facebook en Carnegie Mellon University hebben kunstmatige intelligentie aan tafel gelegd voor de spelers, die één taak hadden: zoveel mogelijk geld winnen.

Waarom kunstmatige intelligentie een man zou kunnen verslaan

Een winstgevend pokeralgoritme ontwikkelengelijktijdig met meerdere spelers (en in theorie en aan meerdere tafels tegelijkertijd) - de taak is veel moeilijker dan het leren van de AI om te schaken of te gaan. In feite komt dit omdat in poker slechts zeer beperkte informatie wordt gegeven over wat er aan de pokertafel gebeurt. Dat wil zeggen, als de computer in hetzelfde schaak het hele plaatje "ziet", inclusief de dispositie van de stukken van de tegenstander, in AI weet de poker alleen welke kaarten in zijn handen zijn en die op de tafel liggen. Het is ook mogelijk om, zoals ze zeggen, "de kaarten te tellen", te hebben voorzien welke van hen al zijn "gegaan", wat het mogelijk zal maken om mogelijke combinaties te voorspellen. Maar het is nog steeds moeilijker dan het analyseren van het "open" schaakveld.

Dankzij de nieuwe leeralgoritmen is het systeem datDe naam Pluribus voor 12 dagen en 10.000 handen vocht met 12 professionele pokerspelers. Als resultaat won Pluribus gemiddeld $ 5 per hand en ongeveer $ 1000 per uur.

Zie ook: Hoe kunstmatige intelligentie de beste pokerspelers verslaat.

Hoe AI poker leerde spelen

Om te beginnen dwongen de ontwikkelaars de AI om te spelentegen jezelf en met vallen en opstaan ​​om de meest geschikte tactieken te kiezen. Dit is over het algemeen de standaard manier van leren. Een ander ding is interessant hier: Pluribus werd in slechts acht dagen gemaakt met behulp van een 64-core serverstation uitgerust met slechts 512 GB RAM. Deze training kostte het bedrijf slechts ongeveer $ 150.

Maar de AI-training eindigde hier niet. Programmeurs bedachten een manier om kunstmatige intelligentie te bedrijven, waardoor hij extreem effectief kon spelen. In plaats van te proberen voorspellen hoe zijn tegenstanders zich zullen gedragen tot het einde van het spel, is Pluribus ontworpen om slechts twee of drie zetten vooruit te kijken. Hierdoor konden de systeembronnen worden gebruikt voor meer nuttige acties. Bijvoorbeeld over het ontwikkelen van kansen om te bluffen.

"Het vermogen om opzettelijk te bluffen wordt overwogenhet exclusieve voorrecht van de mensen, "- de auteurs van de publicatie The Verge. "Tegelijkertijd blufte Pluribus zonder strategisch langetermijndenken, zoals opgemerkt door bijna alle deelnemers aan het experiment. Voor het algoritme was dit slechts een van de manieren om de distributie te winnen, maar verre van de meest elementaire. "

Onderzoekers hebben aangekondigd dat ze niet zullen lay-outhet algoritme en alles met betrekking tot de ontwikkeling ervan is vrij beschikbaar. Tegelijkertijd zijn de ontwikkelingen die tijdens het recente experiment zijn opgedaan erg belangrijk: ze zullen het bijvoorbeeld mogelijk maken om financiële fraude op de effectenmarkt te identificeren, automatische verkeerscontrolesystemen te helpen en zullen zelfs nuttig zijn bij het ontwikkelen van efficiëntere stuurautomaten.

U kunt nog interessantere materialen lezen in ons nieuwskanaal van Telegram.