Разработчики крупнейшей социальной сети создали собственную систему искусственного интеллекта, поддерживающую игры в кости, техасском холдеме с игрой 1 на 1. Знаний в предметных областях используется немного, решения принимаются буквально за доли секунды. Также программа подойдет для усиленного обучения на основании популярных убеждений. Название проекта выглядит как РэБэЛ. Сможет ли нейросеть заменить онлайн-казино с живыми дилерами? Это навряд ли, но первые шаги к этому уже делают и делают довольно успешно.
Согласно внутренним исследованиям Facebook, создатели ReBeL сделали значимый шаг к изобретению универсальных методик взаимодействия, реализации мультипользовательских программ. Общие алгоритмы ведут учет масштабных настроек всех участников, по результатам осуществляют масштабные генерации требуемых решений.
Более старые покерные системы искусственного интеллекта работали на основе систем усиленного поиска, обучения. Алгоритмы запоминали получаемые данные, фиксировали поведенческие паттерны пользователей, применяли данные по прогнозированию хода дальнейшей работы с агентами.
Вообще такой подход является действенным, но в играх с несовершенными информационными данными не вполне эффективен. Проблемы могут возникать даже с простыми вариантами вроде камня-ножниц-бумаги. Исход в итоге определяют индивидуальные сценарии, общая игровая стратегия. Оказывает на него влияние выбор определенного хода покеристом.
РэБэЛ основан на игровом состоянии пользователей. Кроме основной информации, которая относится к категории общеизвестной, учитываются мнение игрока, его настроение по поводу конкретного турнира, его исхода, сеть политики, философия заведения. В итоге программа просто генерирует гибкий и простой набор решений, которые может принимать игрок в режиме реального времени.
В рамках научного эксперимента программу протестировали по техасскому холдему в хедз-апе, на костях, безлимитном холдеме. Всего пара секунд на одну руку – и 7.5 тыс. раздач, согласитесь, впечатляет. Процесс принятия решений занимает не больше 5 секунд времени.
Разработчики говорят, что у системы большое будущее, но пока что напоминают о необходимости соблюдать осторожность. Ожидается, что приложение понравится секторам переговоров, аукционов, интернет-безопасности и производства авто, но в работу популярных онлайн казино с покером интегрировать бот не станут.
Не исключены мошеннические действия на базе нового алгоритма, поэтому доступ пока что действует ограниченный. Компания предлагает тестировать работу нового ПО на костях. Она говорит, что последние ИИ уже действительно достигли сверхчеловеческой производительности в покере, которую получить другими способами просто не выйдет. Такие алгоритмы предполагают, что у участников есть определенный набор фишек, применяются те или иные размеры ставок. Переобучение алгоритмов в целях учета произвольных стеков фишек, непредвиденных размеров ставок требуют выполнения серьезных калькуляций. Программы старших поколений подобные задачи выполнять просто не способны. РэБэЛ работает с учетом политики конкретного заведения, выполняя необходимые расчеты за считанные секунды.
Технологии прорываются в мир гемблинга стремительно быстро. Еще буквально пару лет назад новость о том, что Tesla установила ПО для игры в покер, взорвала все соц. сети и новостные сайты. Но развитие технологий идет слишком интенсивно и даже такие существенные изменения уже не вызывают такого ажиотажа. А что же нас ожидает в будущем? Покер, в котором вам и не нужно принимать участие?