Poker bilimi: Yapay zekadan ne öğrenebiliriz?

Bu kez, yazarların derin öğrenme algoritmaları kullanarak poker için kurallar geliştirmeye çalıştıkları biraz farklı bir makaleye bakacağız. Claudico ve Libratus adlı yapay zeka oyunu oynandıktan sonra, oyunun en güçlü kısmının nehir durumlarının çözümü olduğu keşfedildi. Bu makalenin yazarları, nehirde programlar tarafından verilen kararları analiz etmeyi ve anlaşılabilir kurallar oluşturmayı amaçlamaktadır.

Bu deney için, kartın gücünü anlamak dışında önceden tanımlanmış kuralları olmayan iki özdeş yapay zeka yazıldı. Bu tür koşullar, normal oyuncuların bilgisini içermediğinden, poker durumlarını çözmenin yeni yollarının keşfedilmesine olanak tanır. Programlar 100.000 Heads-Up No-Limit oyunu oynayarak sadece birbirlerinden öğrendiler.

Yazarların oyunun olanaklarını bir dereceye kadar sınırladıkları doğrudur, bu nedenle sonuçlar bir tuz tanesi ile alınmalıdır. Oyunun ek sınırlamaları aşağıdaki gibidir:

  1. Eller, nehir durumlarında kendilerinin ve rakibin gücüne göre yüzde olarak analiz edilir (yani rakibin menzilinin ne kadarının aşıldığı).
  2. Sadece nehir durumları ele alınmaktadır. Bu kısıtlama, ilk kısıtlama hakkında pek bir şey değiştirmez.
  3. Sadece şah/çek ve şah/kat durumları analiz edilir. Donk ve yükseltme durumları hariç tutulduğu için muhtemelen en değişken kısıtlamadır.
  4. Dönen 10 kartlık bir deste ile oynanır. Bu kısıtlama, ikinci ve birinci kısıtlamaya göre prensipte hiçbir şeyi değiştirmez, sadece karar ağacını azaltır.
  5. Pozisyon oyununun analizi.

100.000 simülasyondan sonra, öğrenilen oyun gözlemlendi ve karmaşık bir karar ağacında sunuldu:

Yazarlar yapay zeka oyunundan iki temel kural türetmektedir:

  1. Nehir eli rakibin elini 20% ile 80% arasında yenerse, genellikle bir çek geri veya küçük boyutlandırma yapılır.
  2. Eğer nehir eli rakibin ellerinin 95%'sini yenerse ve rakibin en az 10% çok güçlü eli varsa, oyuncu all-in'dir.

Bu kurallar daha çok kısa desteli bir oyuna uygundur, ancak fikir korunabilir. Nehirde ince değer almak, yenilme olasılığı nedeniyle genellikle fazla kar getirmez. Oysa nehirde en azından ikinci en güçlü ele sahipseniz ve rakibinizin bu durumda menzilinizde güçlü elleri varsa, ya pottan daha fazla bahis oynayabilir ya da all-in yapabilirsiniz. Elbette, 50 BB'den fazla desteye sahip oyunlarda, genellikle all-in yapmak zorunda kalmazsınız.

Karar ağacından birkaç yan nokta - AI, elleri 16% rakibin eline değmiyorsa neredeyse hiçbir zaman bir hesaplaşmaya (necheckbackina) girmez. Genellikle sadece zayıf yüksek kartlar olacaktır. Bu durumda potun en az yarısına bahse gireceklerdir. Diğer durumlarda, yapay zeka çok güçlü bir şekilde değişen bir bahis boyutu seçer. Bir diğer ortak nokta da sadece güçlü bir değer oyunundan gelir - eğer güçlü bir el varsa, neredeyse her zaman en azından pot bahsi boyutlandırması vardır.

Elbette, yapay zekanın birçok sınırlaması vardır, bu nedenle bu kurallar hafife alınmamalıdır. Çoğu durumda, süper GTO üst düzey poker ustalarına karşı değil, daha zayıf veya orta güçlü normal oyunculara karşı oynayacağız. Bu kurallar akılda tutulmalıdır, ancak sömürücü oyunun her zaman daha fazla kar getireceğini unutmayın.

Poker oynamak için en iyi yer neresidir?