Я давно не писал о модельных спецификациях, но Дин упомянул меня в своем раннем тексте о них, так что пришло время снова сказать определенно, что каждая пограничная лаборатория должна иметь модельную спецификацию. Это создает долгосрочное доверие между пользователями, разработчиками и регуляторами. Модельная спецификация устанавливает намерения того, как модель должна себя вести, независимо от того, удастся ли ей это. Снова рад обсудить это с лабораториями в качестве бесплатной консультации, так как считаю это важным для мира. В основном, это кажется заблокированным политикой — как внутренней, когда команды на самом деле не могут согласовать, что должна делать модель, так и внешней, когда лаборатории боятся негативной реакции. Поведение этих моделей на самом деле удивительно управляемо (скоро поделюсь дополнительными исследованиями, в которых я участвую!) и отсутствие модельных спецификаций довольно ужасно как стандарт для сообщества. Ссылки на статью Дина и мои старые статьи о модельных спецификациях приведены ниже. По мере того как Ольмо становится лучше, это было в моем списке, чтобы создать одну и поделиться процессом, трудностями следования ей и так далее. Я приветствую давление на необходимость предоставить это, чтобы установить лучший пример.

OpenAI заслуживает ОЧЕНЬ много похвалы за это, еще раз спасибо @joannejang + @johnschulman2