A Evolução dos Bots de Póquer: De Programas Simples a Inteligência Artificial Avançada

O póquer online revolucionou o jogo, tornando-o acessível a milhões de novos jogadores que nunca entraram num casino e provavelmente nunca o farão. Quer se trate de Texas Hold’em, Omaha ou qualquer outra variante de póquer, todos podem agora desfrutar do jogo em casa quando quiserem e, graças às aplicações móveis, onde quiserem.

Mas a tecnologia percorreu um longo caminho desde que os primeiros jogos de póquer digital foram introduzidos em 1998, e os jogos que temos atualmente são irreconhecíveis quando comparados com as primeiras ofertas. Como em tudo o que tem dinheiro em jogo, os jogadores procuram maximizar as suas hipóteses de ganhar, e os bots de póquer são uma forma de o fazer nos jogos de cartas online.

Tal como o próprio póquer, estes evoluíram rapidamente ao longo dos anos, mas como é que surgiram, o que são e como é que os bots de póquer se irão desenvolver?

Os primórdios da inteligência artificial simples nos bots de póquer

Poker bots predate online poker: One of the first known bots created in 1981 was Orac. After years of testing and learning the software, he used a bot to play with Bob Stupak, the owner of the casino, and directed the game for national television. Orac lost.

In the two decades since, before the advent of online poker, scientists have used card games as a learning tool for AI. Using data from previous games to determine odds in current games and make decisions based on this analysis makes machine learning and artificial intelligence ideal for poker applications. As technology developed, bots also developed.

Embora a maioria dos primeiros bots usasse o blackjack como um jogo de desenvolvimento, pois é controlado pela simples probabilidade de uma carta específica aparecer em um baralho de cartas bem conhecido, o poker muito mais sofisticado permaneceu um assunto de pesquisa frequente. O desenvolvimento foi iniciado por Darce Billings, um professor dos Estados Unidos que escolheu o poker para pesquisa porque qualquer jogador tem informações incompletas, ele não sabe quais cartas outros jogadores têm.

Os primeiros bots usavam exclusivamente sistemas de software que analisavam probabilidades baseadas em um grande banco de dados de jogos, e não eram “inteligentes” no sentido em que os conhecemos hoje. Ou seja, eles não se adaptaram ou aprenderam, mas simplesmente usaram soluções lógicas específicas aplicadas pelo bot em cada estágio do jogo.

Progresso tecnológico e seu impacto na estratégia do poker com robôs e na World Series of Poker

Em 1998, com o advento das mesas de poker online, o trabalho feito pela Billings foi a base dos primeiros bots como os conhecemos hoje – soluções de software de poker online. Conhecido como Vexbot, este primeiro bot para poker online foi um jogador relativamente fraco e facilmente derrotou a maioria dos oponentes humanos que tinham algum conhecimento do jogo. Outros bots que apareceram neste estágio tinham características semelhantes, mas os cientistas, incluindo Billings, continuaram a refiná-los.

Em 2005, Las Vegas sediou o primeiro torneio de bots de poker do mundo, com um número incrível de jogadores. Esses bots eram semelhantes em design às primeiras frases e não eram sistemas de auto-aprendizagem, como entendemos a IA hoje. Essas soluções foram novamente baseadas em algoritmos e análise de dados, embora mais complexas, e os sistemas eram limitados a entender o jogo a partir do banco de dados de jogos anteriores aos quais tinham acesso.

No final do conteúdo, o vencedor do bot foi facilmente derrotado pelo jogador humano, sugerindo que, apesar do progresso feito, a ideia de um bot capaz de jogar regularmente e ganhar contra o homem ainda está longe de ser realizada.

Avanços em Inteligência Artificial e Bots de Poker da Polaris à Libratus

O primeiro avanço real veio em 2007, quando Polaris foi introduzido. Foi criado por um grupo de pesquisa na Universidade de Alberta sob Billings. Comparado aos bots de poker modernos, o Polaris ainda oferecia jogabilidade relativamente básica, mas usava uma nova lógica de decisão em tempo real. Ele foi capaz de modelar o comportamento individual dos jogadores, o que foi um avanço significativo na tecnologia de bots e um dos primeiros exemplos de aprendizado em tempo real com IA.

Embora o refinamento adicional tenha dado a vantagem aos bots subsequentes, o próximo avanço real ocorreu apenas em 2015. Cepheus foi o primeiro bot a “resolver” o problema No Limit Texas Hold’em. Usando 200 CPUs e uma grande quantidade de memória, ele calculou todas as variantes possíveis do jogo, todos os 316 quadrilhões, em 2 meses, e foi programado para jogar uma “estratégia equilibrada”. O resultado foi um programa insuperável, mas a maneira como ele jogava significava que, se o objetivo fosse ganhar dinheiro, não ajudaria muito.

Cepheus foi seguido em 2015 por Claudico, que foi o primeiro verdadeiro bot do No Limit Poker e o desenvolvimento do Cepheus, mas não conseguiu vencer contra nenhum jogador profissional, mas o próximo progresso real ocorreu em 2017, com o Libratus.

Liberatus tornou-se a evolução do Libratus, ainda exigindo mais recursos para trabalhar e utilizando programas de aprendizagem avançada que se adaptam ao cenário à medida que se desenvolve. Foi o primeiro bot de poker a vencer regularmente adversários humanos jogando durante todo o dia e depois analisando cada movimento da noite para melhorar suas decisões no dia seguinte.

Libratus é a base de um robô de poker moderno, o primeiro dos quais apareceu em 2019 – Pluribus. Esses bots diferem muito uns dos outros e têm capacidades impressionantes que excedem em muito tudo o que foi criado antes deles.

Bots de Poker Modernos Hoje: Pluribus e Outros Recursos e Estratégias de IA de Poker

O Pluribus e outros bots de poker modernos usam algoritmos avançados e sofisticados de inteligência artificial para aprendizado e adaptação em tempo real, então eles não precisam mais dos grandes recursos usados para executar bots anteriores. Na verdade, o Pluribus só pode ser executado em 128 GB de RAM e dois processadores, por isso pode ser executado a partir de um host de nuvem, se necessário.

Ele também não aprendeu com os jogos. Em vez disso, o programa foi ensinado as regras do poker e, em seguida, permitiu-lhe jogar e aprender no processo. Esses bots não apenas entendem o jogo, mas também podem optar por abordar cada mão rapidamente para maximizar suas chances de ganhar enquanto analisam outros jogadores.

O resultado é um bot de poker que pode facilmente jogar contra vários adversários ao mesmo tempo, o que imaginamos quando pensamos sobre o bot de poker. O Pluribus se tornou o primeiro bot da história a vencer vários jogadores de poker profissionais ao mesmo tempo, jogando cinco profissionais por dez mil mãos e vencendo.

O futuro dos bots de poker e da pesquisa de IA

Então, desde que a Pluribus mostrou que os modernos sistemas avançados de inteligência artificial são capazes de aprender regras de poker e se transformar em um jogador que pode vencer vários profissionais ao mesmo tempo, com recursos mínimos, Onde mais os bots de poker iriam?

As pessoas que usam bots para jogar mesas de poker online têm sido um problema para diferentes plataformas de poker, mas se não era um problema tão grande antes, porque os bots eram inexperientes e eram relativamente fáceis de vencer quando os bots dominavam jogos, que pode facilmente bater um profissional na mesa é outra coisa. Especialmente quando algo como o Pluribus pode ser executado em uma plataforma de nuvem no valor de menos de US $ 100 por mês, e quase ninguém terá problemas para criar esse sistema.

Os bots de poker nunca se sentem conectados, eles nunca ficam nervosos com o pote, então com o tempo eles podem sobrecarregar os jogadores se não forem controlados. Portanto, o futuro dos bots na arena comercial será sempre fortalecer os sistemas de verificação e segurança nas plataformas para detê-los. E a própria tecnologia?

A inteligência artificial está evoluindo rapidamente em todos os campos, e seria tolice pensar que o poker será diferente. O software de aprendizagem continuará a se tornar cada vez mais complexo tanto em sua compreensão do jogo quanto em suas estratégias.

Em uma década, em vez de uma competição para ver se um bot pode vencer um jogador profissional, vamos realizar uma competição para ver se um profissional pode vencer um bot.

Conclusão

Não há dúvida de que os bots percorreram um longo caminho, desde sistemas que mal podiam jogar até algoritmos de auto-aprendizagem que não só aprendem, mas também se adaptam a jogadores em tempo real. Para o poker online, o rápido crescimento no uso de bots pode ser devastador, porque se cada mesa está cheia de bots que facilmente vencem os recém-chegados, por que alguém ficaria aqui o tempo suficiente para aprender?

O aspecto técnico dos bots é muito interessante, e a observação de seu desenvolvimento é um bom indicador de como a IA se desenvolve em outras áreas também, mas devemos ter em mente seu uso no poker online e como isso pode afetar o jogo em todo o mundo.

FAQ

Quais eram as capacidades iniciais dos primeiros bots de poker e como eles evoluíram?

Os primeiros bots de poker eram baseados em sistemas lógicos e exigiam programação estratégica. Portanto, eles eram previsíveis e facilmente derrotados. Com o tempo, a IA se tornou mais complexa, primeiro permitindo a análise dos resultados e o ajuste da estratégia entre os jogos e agora – analisar e tomar decisões em tempo real.

Como o avanço em IA e machine learning influenciou o desenvolvimento de bots avançados de poker?

Os primeiros sistemas não só não eram treináveis, isto é, não podiam se adaptar além das estratégias programadas, mas também exigiam um grande hardware para operar. À medida que os recursos de inteligência artificial foram desenvolvidos, os bots foram capazes de se adaptar e aprender, e adotaram soluções de software que exigiam significativamente menos recursos para operar.

Quais são os bots de poker mais desafiadores disponíveis no momento e o que os torna tão avançados?

Pluribus é o bot de poker mais avançado até hoje, capaz de jogar No Limit Hold’em contra vários jogadores profissionais simultaneamente e derrotá-los. Pluribus é uma solução de aprendizagem totalmente desenvolvida, foi programada com regras de poker em mente e desde então desenvolveu suas estratégias com base em sua experiência de jogo.

Qual é o futuro dos bots de poker e seu papel no poker online e ao vivo?

Graças ao software em constante desenvolvimento com inteligência artificial, bots capazes de jogar em torneios e muito mais estão se tornando mais acessíveis e acessíveis. É óbvio que eles se tornarão jogadores cada vez mais perfeitos, eles serão cada vez mais difíceis de distinguir da pessoa média e, eventualmente, o melhor jogador do mundo provavelmente se tornará um bot de poker.