Искусственный интеллект обыграл в покер профессиональных игроков

«В последние два десятилетия системы ИИ осваивали все более сложные формы покера. Однако все предыдущие прорывы были ограничены участием только двух игроков», — сказано в публикации. Отметим, что сам событие произошло еще в 2017 году, однако сейчас о нем заговорили с новой силой.

По сравнению с парными играми, партии с большим количеством игроков вызывали у ИИ трудности. Чтобы преодолеть их ученые оснастили систему «абстрактным действием» и «абстрактной информацией». Эти свойства необходимы, чтобы помочь системе сократить количество вариантов и выделить те, которые нужны для принятия решения.

Для этого специалисты разработали программу под названием Pluribus, которая научилась играть в Техасский холдем с пятью своими копиями. Играя раз за разом наугад, Pluribus постепенно определял, какие действия и с какой вероятностью дают лучшие результаты. Анализируя эти данные, система постепенно улучшала свою стратегию.

Метод самообучения ранее использовался в играх на двоих с нулевой суммой, таких как нарды, Dota 2, Starcraft 2 и парный покер. Но как отмечают специалисты, применяемые там алгоритмы значительно отличались от Pluribus.

Игру компьютера оценивали в двух форматах: пять игроков против Pluribus и один игрок против пяти копий Pluribus.

Каждый из принявших участие в эксперименте заработал на покере более $ 1 млн. Участниками стали игроки Джимми Чоу, Сет Дэвис, Майкл Гальяно, Энтони Грегг, Донг Ким, Джейсон Лес, Линус Лелигер, Дэниел МакАулей, Грег Мерсон, Николас Петранжело, Шон Руан, Тревор Саваж, Джейкоб Тул.

Каждый день для игры отбирались пять профессионалов. При этом они не знали других участников. Каждому человеку давался псевдоним, который оставался неизменным на протяжении всего эксперимента. По нему можно было отслеживать успехи игроков. Между людьми разделили $ 50 тыс., чтобы мотивировать их на игру с полной отдачей. Игрокам гарантировали не менее $ 0,40 за раздачу. Сумма могла увеличиться до $ 1,60 за раздачу в зависимости от результатов игры.

В матче с пятью профессиональными игроками в покер или с пятью копиями Pluribus, играющими против одного игрока, ИИ за 12 дней эксперимента показал лучшие результаты в более чем 10 тыс. раздач.

Источник