Ik heb een tijdje niet over Model Specificaties gepost, maar Dean heeft me een shoutout gegeven voor mijn eerdere schrijven hierover, dus het is tijd om opnieuw definitief te zeggen dat elk frontier lab een model specificatie zou moeten hebben. Het bouwt langdurig vertrouwen op bij gebruikers, ontwikkelaars en regelgevers. De model specificatie stelt de intenties vast van hoe het model zou moeten functioneren, ongeacht of het daarin slaagt. Nogmaals, ik ben blij om dit met labs te bespreken als een gratis consult, omdat ik denk dat het geweldig is voor de wereld. Over het algemeen lijken deze geblokkeerd te zijn door politiek -- zowel intern waar teams het eigenlijk niet eens kunnen worden over wat het model zou moeten doen -- als extern, waar labs bang zijn voor tegenreacties. Het gedrag van deze modellen is eigenlijk opmerkelijk stuurbaar (ik deel binnenkort meer onderzoek waar ik bij betrokken ben hierover!) en het gebrek aan model specificaties is behoorlijk verschrikkelijk als een gemeenschapsstandaard. Links naar Dean's stuk en mijn oudere stukken over model specificaties staan allemaal hieronder. Naarmate Olmo beter wordt, staat dit op mijn lijst om er een te maken en het proces, de moeilijkheden van het volgen ervan, enzovoort te delen. Ik verwelkom druk om dit te moeten leveren om een beter voorbeeld te stellen.

OpenAI verdient hier VEEL krediet voor, nogmaals hulde aan @joannejang + @johnschulman2