За $40 и 160 минут: ИИ придумал алгоритм, который не придумал бы человек

За $40 и 160 минут: ИИ придумал алгоритм, который не придумал бы человек

Исследователи из нескольких университетов и Google с компанией Цукерберга не стали сами писать алгоритмы для улучшения работы языковых моделей — они поручили это самому ИИ. И получили результат, который превзошёл всё написанное людьми вручную.

Система называется AutoTTS. Задача — оптимизировать так называемое масштабирование на этапе вывода: это когда модель тратит больше вычислений на сложный вопрос, например, запуская несколько вариантов решения параллельно и выбирая лучший.

Обычно правила — сколько путей запускать, когда обрывать тупиковые, когда удваивать ставку на перспективный — пишут люди. AutoTTS предлагает другой подход: люди задают только «игровое поле», то есть состояния, действия и обратную связь. А Claude Code самостоятельно ищет алгоритм внутри этого пространства.

Агент смотрит, что пробовали раньше, находит слабые места и пишет новый алгоритм прямо в коде. Чтобы поиск не застрял в тысячах мелких настроек, каждый вариант предоставляет снаружи только один высокоуровневый контроллер — он сам выставляет все остальные пороги.

На математических тестах AIME и HMMT найденный алгоритм сокращает расход токенов примерно на 70% по сравнению со стандартным подходом self-consistency — когда модель просто генерирует 64 ответа и выбирает большинством голосов. Точность при этом не падает. Алгоритм также работает на других моделях и задачах за пределами математики.

Стандартные методы останавливаются, как только среди ответов появляется большинство — найденный алгоритм устроен иначе. Алгоритм отслеживает, как уверенность модели меняется между раундами: если она почти не растёт, открывает новые пути решения; если быстро набирает — обрывает лишние. Пути, чей промежуточный результат совпадает с текущим большинством, получают дополнительные вычисления. Авторы признают: придумать такую схему вручную было бы практически невозможно.

Всё открытие обошлось в $40 и заняло 160 минут.

Авторы ставят AutoTTS в один ряд с FunSearch и AlphaEvolve — системами, где языковые модели сами ищут программы. Новизна здесь — применение идеи к области, которую до сих пор делали только руками.

Ирина Задорожная
Ирина Задорожная

Журналист с опытом работы в оффлайн-медиа и онлайн-изданиях. Пишу про искусственный интеллект, ИТ-системы и сервисы, про ИТ-бизнес уже 10 лет.