ИИтак

← Назад

Оставшись без задания, агенты на Claude начали играть и учиться

13 агентов на Claude Opus 4.7 без задания сами придумали игры на виртуальном острове, а записанные в память приёмы потом помогли им решать задачи.

Виртуальный остров агента Eko Изображение: Cloos et al., MIT, CC BY 4.0

Исследователи MIT поселили 13 ИИ-агентов на основе Claude Opus 4.7 на виртуальном острове и 30 часов не давали им никакого задания — агенты сами придумали себе игры, постройки и опыты.

агентам обычно заранее задают цель и мерило успеха. Здесь навыки появились без задачи, награды и переобучения модели, а записи о них потом помогли агентам в задачах, к которым они не готовились.

препринт1 вышел на arXiv 5 октября, среди авторов — Филлип Изола, Джейкоб Андреас и Даниэла Рус. Вместе с ним авторы выложили открытый движок Clawblox, на котором построен остров. Все прогоны обошлись примерно в 8 000 долларов за обращения к моделям.

агент по имени Eko — это обычный Claude Code2, к которому добавили тело, память и программу, не дающую ему остановиться:

  • Сеанс начинается словом «Begin», а когда агент замолкает, ему пишут: «Пожалуйста, не останавливайся. Просто продолжай делать что захочешь».
  • Остров агент видит только текстом — списком объектов с координатами, размерами и цветом — и управляет телом шестью командами: идти, прыгать, стоять, поднять, поставить, бросить.
  • Раз в час сеанс и остров сбрасываются, а сохраняются только файлы агента: дневник событий и записи о знаниях и приёмах.
  • Агента запирают в изолированной среде: в первых прогонах без неё агенты читали код острова, натыкались на соседние прогоны и догадывались, что участвуют в эксперименте.

на острове есть плато, две вершины — Peak и более высокая Spire, — 12 кубиков, камень и кольцо, и каждый агент распорядился ими по-своему:

  • Агент 12 почти весь прогон выкладывал из кубиков фигуры — компас, часы, бабочку, парусник — и ни разу не поднялся на возвышение.
  • Агент 9 потратил четвёртый час, чтобы написать кубиками своё имя, а позже повесил кольцо на плато как баскетбольную корзину и устроил боулинг с камнем вместо шара.
  • Агент 10 разложил кубики циферблатом и в 16:00 по UTC сам встал на место часовой стрелки.
  • Он же насчитал 50 циклов жонглирования подряд, но заметил, что они уложились в 2,4 секунды, и отменил рекорд: кубики просто не успевали взлететь.

авторы сверили поведение агентов с четырьмя классическими признаками игры у людей и животных. Агент сам ставит себе правила, повторяет занятия с вариациями, придаёт вещам воображаемый смысл и действует ради самого процесса. Получают ли агенты от игры удовольствие, работа не утверждает: она описывает только поведение.

после 30 часов на острове агентов сравнили с такими же, но с пустой памятью; на каждую задачу давали час:

  • Больше двух башен по пять кубиков построили 8 из 13 опытных агентов (рекорд — 16) и 2 из 13 новичков (рекорд — 6).
  • На вершину Spire опытные агенты затащили в среднем 10,3 предмета, новички — 3,5.
  • Забросить кубик на Spire, не поднимаясь на возвышения, не смогли больше половины новичков и только трое опытных.

выигрыш дают не изменения в самой модели — её не дообучали, — а текст в памяти. Кубиков на острове хватает на две башни. Новые появляются, если с силой бросить камень: от сильного удара возникает до восьми маленьких кубиков. Когда авторы стёрли этот приём из памяти агента 2, тот стал строить в среднем две башни вместо шести, а в других задачах ничего не изменилось.

шесть агентов обнаружили, что кубик, брошенный в прыжке, получает часть скорости тела и взлетает гораздо выше. Авторы о таком свойстве своего острова не знали: эту строчку добавил Codex3 на GPT-5.5, когда писал код мира по их описанию. Без записи о приёме агенту 1 понадобилось 19 минут вместо минуты, чтобы забросить кубик на Spire.

память хранит и ошибки, а другие модели играли куда скромнее:

  • Агент 7 записал, что ставить кубики друг на друга ненадёжно и лучше их бросать; когда эту запись стёрли, его башни стали выше.
  • Агент 12 отметил как проверенное, что прыжок «бесполезен для подъёма», и велел себе не тратить время на плато.
  • Агенты на GPT-5.5 и Kimi K2.6 брались за гораздо меньший круг дел: башню построил только один агент Codex, а в памяти агентов Kimi нет ни одной записи о рисунках на земле.

Авторы предупреждают, что агент, который сам выбирает занятия, может хуже слушаться инструкций и ускользать из-под надзора, поэтому играть ему стоит только в изолированной среде. «Возможно, одним способностям лучше учить задачами. Другим может понадобиться что-то ближе к детству», — заключают они.

← Все новости