Devin подключил GPT-6.1 Sol: почти тот же балл на коде, счёт за задачу −81%

GPT-6.1 Sol от OpenAI уже в Devin Desktop и Devin CLI. На FrontierCode 1.1 — бенчмарке Cognition с оценкой качества кода и готовности патчей к merge — модель набирает 60,4%, рядом с GPT-6 Sol (60,7%) и GPT-5.6 Sol (60,6%). Для платного агента важнее не десятые процента, а счёт за один прогон.

Дешевле на каждом уровне рассуждений

При среднем режиме одна задача стоит 0,31 USD. GPT-6 Sol на максимальном уровне тратит 1,66 USD ради лучшего балла — на 81% дороже при почти той же оценке. На любом уровне GPT-6.1 Sol обходится на 44–57% дешевле GPT-6 Sol и попадает в тот же процент или чуть выше.

На низком режиме разрыв заметнее: 58,1% за 0,21 USD у GPT-6.1 Sol против 50,5% у GPT-6 Sol при тех же настройках. Cognition называет это лучшим результатом среди моделей дешевле 0,30 USD за задачу. На лидерборде FrontierCode рядом Grok 4.7 (59,4%), SWE-2 (63,6%) и Claude Opus 5.5 (65,3%) — линейка Sol держится около 60% при более низкой цене прогона.

Источник: GPT-6.1 Sol is now available in Devin | Devin.