Искусственный интеллект в действии: Claude 3.7 Sonnet играет в Pokemon Red

Claude 3.7 Sonnet продемонстрировал свои возможности, играя в Pokemon Red.

Совсем недавно мы упоминали о новой функции ‘расширенного мышления’ в Claude 3.7 Sonnet, и вот теперь она проявила себя в самой удивительной форме! На платформе Twitch стартовала трансляция, в ходе которой искусственный интеллект самостоятельно управляет классической игрой Pokemon Red, позволяя зрителям наблюдать за ходом его размышлений в режиме реального времени.

Канал ClaudePlaysPokemon демонстрирует, как новейшая модель от компании Anthropic не просто жмет кнопки, а по-настоящему осмысленно воспринимает события на экране, разрабатывает стратегии и принимает решения, аналогично человеческому игроку. В отдельном окне видно, как Claude анализирует текущее состояние игры и планирует свои дальнейшие действия.

Что поразительно, Claude не проходил специального обучения для игры в Pokemon. Он применяет свои общие навыки мышления, чтобы разобраться с правилами, исследовать мир Канто и понимать механизмы боев. Система включает в себя несколько элементов: интерфейс для управления игрой, анализ изображений с экрана, обширную базу знаний, которую Claude постоянно обновляет, систему навигации и механизм для считывания информации из памяти игры. Искусственный интеллект способен нажимать кнопки, перемещаться по экрану и запоминать новую информацию.