На мой взгляд, самый важный вывод из этого результата заключается в том, что наша модель золота @OpenAI Международной Олимпиады по математике (IMO) также является нашей лучшей моделью для соревновательного программирования. 🧵

После IMO мы провели полные оценки модели IMO gold и обнаружили, что, помимо конкурентной математики, она также была нашей лучшей моделью во многих других областях, включая кодирование. Поэтому люди решили взять ту же самую модель IMO gold, без каких-либо изменений, и использовать ее в системе для IOI.

Система IOI включала выборку из нескольких различных моделей, а затем использование другой модели и эвристики для выбора решений для подачи. Эта система достигла золотой медали, заняв 6-е место среди людей. Модель IMO действительно показала лучшие результаты среди всех моделей, из которых мы брали выборку.

Чтобы прояснить, эта система использовала каркас, хотя и более легкий, чем в прошлом году. Она только решала, какие образцы из универсальных моделей отправить. Я оптимистично настроен, что в следующем году мы будем уверены, что сама модель может справиться лучше, чем любой каркас, который мы могли бы придумать.

Я не участвовал в этой работе. Большие поздравления @sherylhsu02, @alexwei_, @bminaiev и Oleg Murk, а также @_lorenzkuhn, @MostafaRohani, @clavera_i, @andresnds, @ahelkky и многим другим за этот результат!