Asana удешевила browser-агента в 76 раз — эксперименты Astra в Codex

На 144 прогонах Asana снизила оценочную стоимость browser-агента StackAI в 76 раз и ускорила run в 5 раз — за счёт оптимизированного сценария на GPT-6.1 Sol. В бенчмарке агент собирал по шесть полей для 32 книг с публичного демо-каталога, как в типичных no-code-сценариях клиентов.

Направление задал техдиректор StackAI Frank Hidalgo: GPT-6 Astra в Codex разобрала код, предложила правки и сравнила модели. По его словам, руками ушёл бы один–два месяца; с агентом в Codex — около недели: цель перед сном, утром разбор в Command.

Где утекали деньги

Кэшировались фиксированные инструкции и описания инструментов, но не растущая история текста страниц и скриншотов — каждый запрос снова платил за неё полностью. Старые кадры и текст обрезались почти на каждом шаге, история менялась, одного кэша истории было мало, а факты с уже просмотренных страниц терялись.

Что тестировали

• кэш на историю просмотра;
• больше удерживаемого текста — бюджеты 120 000 и 480 000 символов;
• скриншоты убирают пачками: до 20 кадров, потом остаётся последний.

Лучшая связка с большим бюджетом истории на GPT-6.1 Sol дала в среднем $0.47 за прогон и около четырёх минут. Прод на Model B — минимум $36.21 (часть run билась о лимит шагов) и не меньше 22,5 минут. На Sol одна смена политики кэша и скриншотов сжала цену с $1.97 до $0.47: 89% входа шло из кэша по цене около 5% от некэшированного.

При бюджете 480 000 символов все 18 прогонов Sol завершились с верным ответом; при малом — три из 18. Правки уже в проде для навигации в StackAI.

Источник: Asana cuts model costs 76x in browser tests with GPT-6.1 Sol.