Die Wissenschaft des Pokerns: Was können wir von künstlicher Intelligenz lernen?

Diesmal betrachten wir eine etwas andere Arbeit, in der die Autoren versuchen, mithilfe von Deep-Learning-Algorithmen Regeln für das Pokern zu entwickeln. Nach dem Spielen des Spiels der künstlichen Intelligenz Claudico und Libratus wurde festgestellt, dass der stärkste Teil des Spiels die Lösung von River-Situationen ist. Die Autoren dieser Arbeit haben sich zum Ziel gesetzt, die von den Programmen in River getroffenen Entscheidungen zu analysieren und verständliche Regeln zu erstellen.

Für dieses Experiment wurden zwei identische künstliche Intelligenzen geschrieben, die außer dem Wissen um die Stärke der Karte keine vordefinierten Regeln haben. Solche Bedingungen ermöglichen es, neue Wege zur Lösung von Pokersituationen zu entdecken, da sie nicht das Wissen von regulären Spielern erfordern. Die Programme selbst lernten nur voneinander, indem sie 100 000 Heads-Up No-Limit-Spiele spielten.

Es stimmt, dass die Autoren die Möglichkeiten des Spiels in gewissem Maße eingeschränkt haben, daher sollten die Schlussfolgerungen mit Vorsicht genossen werden. Zusätzliche Einschränkungen des Spiels waren wie folgt:

1. Die Hände werden nach ihrer eigenen und der Stärke des Gegners in River-Situationen prozentual analysiert (d.h. wie viel von der gegnerischen Range überholt wird).
2. Es werden nur Flusssituationen angesprochen. Diese Einschränkung ändert nicht viel an der ersten Einschränkung.
3. Es werden nur Check/Call und Check/Fold analysiert. Wahrscheinlich die am meisten verändernde Einschränkung, da Donk- und Raise-Situationen ausgeschlossen sind.
4. Gespielt wird mit einem rotierenden Stapel von 10 Karten. Diese Einschränkung ändert prinzipiell nichts an der zweiten und ersten Einschränkung, sondern reduziert nur den Entscheidungsbaum.
5. Analyse des Positionsspiels.

Nach 100.000 Simulationen wurde das erlernte Spiel beobachtet und in einem komplexen Entscheidungsbaum dargestellt:

Die Autoren leiten zwei Grundregeln aus dem KI-Spiel ab:

1. Wenn die River-Hand die Hand des Gegners zwischen 20% und 80% schlägt, wird in der Regel ein Checkback oder Small Sizing gemacht.
2. Wenn die River-Hand 95% der Hände des Gegners schlägt und der Gegner mindestens 10% sehr starke Hände hat, ist der Spieler All-in.

Diese Regeln sind eher für ein Shortstack-Spiel geeignet, aber die Idee kann beibehalten werden. Im River einen geringen Wert zu nehmen, bringt oft keinen großen Gewinn, da die Möglichkeit besteht, geschlagen zu werden. Wenn Sie hingegen mindestens die zweitstärkste Hand im River haben und Ihr Gegner in dieser Situation starke Hände in Ihrem Bereich hat, können Sie entweder mehr als den Pot setzen oder All-in gehen. Natürlich müssen Sie in Spielen mit mehr als 50 BB Stacks oft nicht All-in gehen.

Ein paar Nebenpunkte aus dem Entscheidungsbaum - die KI geht fast nie in einen Showdown (necheckbackina), wenn ihre Hand die Hand des 16%-Gegners nicht berührt. Normalerweise werden es nur schwache hohe Karten sein. In diesem Fall wird sie mindestens die Hälfte des Pots setzen. In anderen Situationen wählt die KI eine sehr stark variierende Einsatzhöhe. Eine weitere Gemeinsamkeit gibt es nur bei einem starken Value Game - wenn es ein starkes Blatt gibt, gibt es fast immer mindestens eine Pot Bet Sizing.

Natürlich gibt es viele Einschränkungen für die KI, daher sollten diese Regeln nicht auf die leichte Schulter genommen werden. In den meisten Fällen werden wir gegen schwächere oder mittelstarke reguläre Spieler spielen, nicht gegen Super-GTO-Pokermeister auf höchstem Niveau. Diese Regeln sollten Sie im Hinterkopf behalten, aber denken Sie daran, dass ausbeuterisches Spiel immer mehr Gewinn bringt.

Wo ist der beste Ort zum Pokerspielen?