Современные модели искусственного интеллекта, включая ChatGPT и Claude, склонны переоценивать рациональность человеческих оппонентов и из-за этого проигрывают в стратегических играх. К такому выводу пришли исследователи из НИУ ВШЭ. Результаты работы опубликованы в Journal of Economic Behavior & Organization.
Ученые изучали поведение ИИ в рамках так называемого кейнсианского конкурса красоты — классической модели из теории игр, предложенной Джон Мейнард Кейнс. В одной из популярных версий участники должны выбрать число от 0 до 100, а выигрывает тот, чье значение ближе всего к заданной доле (например, двум третям) от среднего ответа всех игроков. Задача требует многоуровневого стратегического мышления: нужно предугадать не только действия других, но и то, как они сами будут рассуждать.
Команда под руководством Дмитрия Дагаева протестировала несколько крупных языковых моделей, в том числе ChatGPT-4o и Claude-Sonnet-4, воспроизведя данные 16 классических экспериментов с участием людей. Моделям подробно описывали правила игры и характеристики оппонентов — от студентов первого курса до опытных ученых, а также людей с разным типом мышления и эмоциональным состоянием.
Результаты показали, что ИИ последовательно выбирает «слишком рациональные» стратегии. Алгоритмы предполагают, что люди будут рассуждать глубже и логичнее, чем это происходит в реальности. В итоге модели выбирают числа, оптимальные для игры с высокоразумным соперником, но проигрывают людям, которые действуют проще и менее последовательно.
При этом в экспериментах с участием людей даже игроки с низким уровнем подготовки демонстрировали способность адаптироваться к разным соперникам, хотя и не всегда находили доминирующую стратегию. ИИ же, напротив, демонстрировал стабильную переоценку когнитивных возможностей человека.
Авторы отмечают, что полученные результаты важны не только для теории игр, но и для практического применения ИИ в экономике и бизнесе. Во многих задачах принятия решений требуется, чтобы алгоритмы вели себя «по-человечески», а не исходили из идеализированной модели рационального агента. По словам исследователей, изучение различий между стратегическим мышлением человека и ИИ станет одной из ключевых тем в экономике и прикладных исследованиях искусственного интеллекта в ближайшие годы.