Можно ли научить ИИ чинить и достраивать сайт, если ему не дали описание, а показали только, как всё должно работать? Исследователи предлагают проверять такие модели не по списку задач, а по живому примеру: есть готовое приложение, и по его работе ИИ должен понять, какую функцию надо восстановить в сломанной версии. Для этого команда собрала набор задач, где поведение программы разбито на отдельные куски — от простых действий до целых цепочек, — чтобы видеть, где ИИ справляется, а где теряет нить и начинает ошибаться. В обзоре разберём, как устроена такая проверка, почему восстановить поведение по примеру куда сложнее обычных указаний и что она показывает о реальных возможностях ИИ-агентов в разработке.