Veda o pokri: Čo sa môžeme naučiť od umelej inteligencie?

Tentoraz sa budeme zaoberať trochu iným článkom, ktorého autori sa snažia vytvoriť pravidlá vhodné pre poker na základe algoritmov deep-learning programov. Po hre umelej inteligencie Claudico a Libratus sa zistilo, že ich najsilnejšou časťou sú riešenia situácií na riveri. Autori článku sa snažia preskúmať rozhodnutia programov na riveri a vytvoriť zrozumiteľné pravidlá.

Pre tento experiment boli napísané dva identické umelé inteligencie, ktoré nemali žiadne predbežné pravidlá, okrem pochopenia sily kariet. Takéto podmienky umožňujú objaviť nové spôsoby riešenia pokerových situácií, pretože nezahŕňajú znalosti pravidelných hráčov. Samotné programy sa učili len jedna od druhej, hrajúc 100 000 Heads-Up No-Limit partií.

Pravda, autori trochu obmedzili možnosti hry, takže závery by sa mali prijímať s určitou rezervou. Dodatočné obmedzenia hry boli takéto:

  1. Analyzované ruky podľa svojej a súperovej sily v situáciách na riveri percentuálne (t.j. koľko časti súperovho range je prekonané).
  2. Riešené sú len situácie na riveri. Toto obmedzenie sa veľmi nemení kvôli prvému obmedzeniu.
  3. Analyzované sú len check/call a check/fold. Pravdepodobne najviac meniace obmedzenie, pretože sú vylúčené donk a raise situácie.
  4. Hrá sa s meniacim sa balíčkom 10 kariet. Toto obmedzenie v podstate nič nemení kvôli druhému a prvému obmedzeniu, len znižuje rozhodovací strom.
  5. Analyzovaná je hra in position.

Po 100 000 simuláciách bol pozorovaný naučený spôsob hry, ktorý je uvedený v zložitom rozhodovacom strome:

Autori z hry umelej inteligencie vyvodzujú dve hlavné pravidlá:

  1. Ak hand na riveri prekonáva od 20% do 80% súperových rúk, najčastejšie sa robí check back alebo sa dáva malý sizing.
  2. Ak hand na riveri prekonáva 95% súperových rúk a súper má aspoň 10% veľmi silných rúk, dáva sa all-in.

Tieto pravidlá sú viac vhodné pre shortstacked hru, ale myšlienku možno zachovať. Brať thin value na riveri často neprinesie veľa zisku kvôli možnosti byť prekonaný. Naopak, keď máte aspoň druhú najsilnejšiu ruku na riveri a súper má silné ruky vo svojom range v takejto situácii, môžete dať viac ako pot bet alebo ísť all-in. Samozrejme, v hrách, kde sú stacky väčšie ako 50 BB, často nebudete musieť ísť all-in.

Niekoľko vedľajších vecí z rozhodovacieho stromu – umelá inteligencia takmer nikdy nejde do showdownu (necheckbackuje), ak ich ruka neprekonáva 16% súperových rúk. Zvyčajne to budú len slabé high cards. V takom prípade dávajú aspoň polovicu banku. V iných situáciách si umelá inteligencia vyberá veľmi variabilný bet sizing. Jeden spoločný prvok sa objavuje len zo silnej value hry – ak majú silnú ruku, takmer vždy dávajú aspoň pot bet sizing.

Samozrejme, hra umelej inteligencie má mnoho obmedzení, takže tieto pravidlá by sa nemali prijímať bezhlavo. Vo väčšine prípadov budeme hrať proti slabším alebo stredne silným pravidelným hráčom, nie proti super-GTO najvyššej úrovne pokerových majstrov. Tieto pravidlá by sa mali mať na pamäti, ale treba si uvedomiť, že viac zisku vždy prinesie exploitative hra.

Kde najlepšie hrať poker?