Představujeme NitroGen, open-source základní model vycvičený pro hraní 1000+ her: RPG, plošinovky, battle royale, závody, 2D, 3D, cokoliv si vzpomenete! Jsme na cestě za univerzálními ztělesněnými agenty, kteří ovládnou nejen fyziku reálného světa, ale i veškerou možnou fyziku napříč multivesmírem simulací. Zjistili jsme, že naše architektura GR00T N1.5, původně navržená pro robotiku, lze snadno přizpůsobit pro hraní mnoha her s naprosto odlišnými mechanikami. Náš recept je jednoduchý a hořký ponaučení: (1) 40 000+ hodin, vysoce kvalitní datová sada veřejné hry v přírodě; (2) vysoce schopný základní model pro kontinuální motorické řízení; (3) API v tělocvičně, které zabalí libovolný herní binární soubor pro provádění rolloutů. Naše kurátorství dat je opravdu zábavné: ukazuje se, že hráči rádi předvádějí své dovednosti tím, že na video stream překryjí ovládání gamepadem v reálném čase. Proto trénujeme segmentační model, který tyto gamepadové displeje detekuje a extrahuje a přeměňuje je na expertní akce. Poté tuto oblast maskujeme, aby model nevyužil zkratku. Během tréninku se varianta GR00T N1.5 učí mapovat z 40 000 hodin pixelů na akce pomocí difuzních transformátorů. NitroGen je teprve začátek a je před ním ještě dlouhá cesta k dosažení této schopnosti. Záměrně se zaměřujeme pouze na stránku Systému 1: "herní instinkt" rychlé motorické kontroly. Otevíráme *všechno*, co si můžete pohrát: předtrénované váhy modelů, celý dataset akcí, kód a whitepaper s pevnými detaily. Dnes je robotika jen nadmnožinou obtížných AI problémů. Zítra se může stát podmnožinou, tečkou v mnohem větším latentním prostoru ztělesněné AGI. Pak jen vyzvete a "požádáte o" robotický ovladač. To by mohl být konečný cíl (slovní hříčka zamýšlena). NitroGen je spoluveden našimi brilantními mozky: Loic Magne, Anas Awadalla, Guanzhi Wang. Je to spolupráce více institucí. Podívejte se níže na Guanzhiho technické vlákno a odkazy na repozitáře!