Исследователи из нескольких университетов и Google с компанией Цукерберга не стали сами писать алгоритмы для улучшения работы языковых моделей — они поручили это самому ИИ. И получили результат, который превзошёл всё написанное людьми вручную.
Система называется AutoTTS. Задача — оптимизировать так называемое масштабирование на этапе вывода: это когда модель тратит больше вычислений на сложный вопрос, например, запуская несколько вариантов решения параллельно и выбирая лучший.
Обычно правила — сколько путей запускать, когда обрывать тупиковые, когда удваивать ставку на перспективный — пишут люди. AutoTTS предлагает другой подход: люди задают только «игровое поле», то есть состояния, действия и обратную связь. А Claude Code самостоятельно ищет алгоритм внутри этого пространства.
Агент смотрит, что пробовали раньше, находит слабые места и пишет новый алгоритм прямо в коде. Чтобы поиск не застрял в тысячах мелких настроек, каждый вариант предоставляет снаружи только один высокоуровневый контроллер — он сам выставляет все остальные пороги.
На математических тестах AIME и HMMT найденный алгоритм сокращает расход токенов примерно на 70% по сравнению со стандартным подходом self-consistency — когда модель просто генерирует 64 ответа и выбирает большинством голосов. Точность при этом не падает. Алгоритм также работает на других моделях и задачах за пределами математики.
Стандартные методы останавливаются, как только среди ответов появляется большинство — найденный алгоритм устроен иначе. Алгоритм отслеживает, как уверенность модели меняется между раундами: если она почти не растёт, открывает новые пути решения; если быстро набирает — обрывает лишние. Пути, чей промежуточный результат совпадает с текущим большинством, получают дополнительные вычисления. Авторы признают: придумать такую схему вручную было бы практически невозможно.
Всё открытие обошлось в $40 и заняло 160 минут.
Авторы ставят AutoTTS в один ряд с FunSearch и AlphaEvolve — системами, где языковые модели сами ищут программы. Новизна здесь — применение идеи к области, которую до сих пор делали только руками.