OpenAI превращает сжатие моделей в охоту за талантами с соревнованием «Parameter Golf» на 16 МБ

OpenAI бросила вызов исследователям: создать лучшую языковую модель, уложившись всего в 16 МБ. Компания использует это соревнование для поиска кадров.

В открытом исследовательском конкурсе «Parameter Golf» разработчикам предлагают построить максимально качественную языковую модель при жёстких ограничениях. Веса модели (её обучаемые параметры) и обучающий код вместе не должны превышать 16 МБ. Обучение должно занимать не больше десяти минут на восьми GPU H100. Результаты оцениваются по качеству сжатия относительно фиксированного набора данных FineWeb.

OpenAI выделила миллион долларов в вычислительных кредитах через партнёра Runpod. Лучшим участникам могут предложить собеседования. Компания планирует в июне нанять небольшую группу младших исследователей, включая студентов и победителей олимпиад. В репозитории на GitHub доступны baseline-модели (базовые модели для старта), скрипты для оценки и публичный leaderboard (таблица рейтинга). Участвовать могут все старше 18 лет из поддерживаемых стран. Срок приёма заявок — до 30 апреля.

Борьба за AI-таланты среди крупных технологических компаний сейчас обострилась как никогда. Meta неоднократно переманивала ведущих исследователей из OpenAI. В некоторых случаях им предлагали компенсационные пакеты якобы на сумму до 300 миллионов долларов.