Parameter Golf: 1000+ участников, 2000+ сабмишена и AI в ML-исследованиях

Состязание Parameter Golf собрало 1000+ участников и 2000+ сабмишена, а OpenAI сводит картину по AI-assisted исследованиям в машинном обучении: как связка coding agents, квантизации и поиска нестандартных архитектур работает под жёсткими лимитами на параметры и ресурсы.

Название с «гольфом» намекает на игру в минимум ударов: участники укладываются в узкий коридор ограничений и всё равно должны выдавать исследовательский или инженерный сигнал, а не просто наращивать размер модели. Такой сетап ближе к бою за память и вычислительный бюджет в реальных пайплайнах, где ассистент генерит код, подбирает квантизацию и держит цикл экспериментов.

Массовый заход в тысячу человек и двойной объём работ наглядно показывает спрос на форматы, где соревнование измеряет не только точность на бенчмарке, но и умение ужать и переосмыслить архитектуру в заданных рамках. Для команд, которые уже мешают человеческое исследование с агентами, это ориентир, где искать узкие места — от постановки задачи до инфраструктуры прогонов и прозрачности метрик.

Источник: What Parameter Golf taught us about AI-assisted research.