ChatGPT хорошо объясняет покер, но плохо в него играет
Новый бенчмарк показал странную вещь: языковые модели уже умеют разбирать покерные раздачи и объяснять ходы почти как тренер, но за столом продолжают проигрывать даже очень простым стратегиям. Для тех, кто хочет использовать ИИ в аналитике, это хороший пример того, где у ChatGPT сильная сторона, а где ему всё ещё не хватает настоящего игрового опыта.
Что показал свежий тест
В бенчмарке GTO Wizard проверили, как языковые модели играют в хедз-ап но-лимит холдем против сильного покерного агента, близкого к равновесной стратегии. Условия были честные: модели получали только описание раздачи и должны были сами назвать действие, размер ставки и объяснение, без калькуляторов эквити и других инструментов.
Результат оказался неожиданно слабым. GPT-4o закончила тест с показателем минус 64.9 bb/100, GPT-4 — минус 136, а Grok 4 с включённым high reasoning — минус 60. Это значит, что даже модель, которая хорошо пишет про диапазоны, блокеры и защиту рук, в самой игре нередко уступает боту, который вообще всегда фолдит.
Почему модели умеют объяснять, но не выигрывать
Главная причина в том, что языковая модель знает язык покера, но не проживает покер как систему решений. Она читала статьи, разборы и учебники, поэтому может связно рассуждать о блефах, позиции и частоте защиты, но это ещё не делает её сильным игроком за столом.
Для сравнения авторы материала напоминают про специализированные покерные программы. Libratus и Pluribus не учили текстовые объяснения — они много раз играли сами с собой и искали решения через расчёты. Поэтому они умеют принимать решения, но не умеют внятно рассказать, почему сыграли именно так.
Что это значит для работы и обучения
У покера тут есть полезная для обычной работы аналогия. ChatGPT может быть отличным собеседником для разбора задачи, написания объяснения или поиска слабых мест в логике, но в ситуациях, где нужна реальная практика и точный расчёт, его ответы надо перепроверять.
Если вы учитесь, готовите разбор сделки, анализируете маркетинговую гипотезу или просите ИИ помочь с планом действий, лучше использовать его как сильного объясняющего помощника, а не как автоматического исполнителя. В сложных решениях особенно важно отделять красивый текст от реально работающей стратегии.