Memperkenalkan NitroGen, model foundation open-source yang dilatih untuk memainkan 1000+ game: RPG, platformer, battle royale, balap, 2D, 3D, sebut saja! Kami sedang dalam pencarian agen berwujud tujuan umum yang menguasai tidak hanya fisika dunia nyata, tetapi juga semua fisika yang mungkin di multiverse simulasi. Kami menemukan bahwa arsitektur GR00T N1.5 kami, yang awalnya dirancang untuk robotika, dapat disesuaikan dengan mudah untuk memainkan banyak game dengan mekanisme yang sangat berbeda. Resep kami sederhana dan pahit: (1) kumpulan data gameplay publik di alam liar selama 40K+ jam; (2) model pondasi yang sangat mumpuni untuk kontrol motor berkelanjutan; (3) API Gym yang membungkus biner game apa pun untuk menjalankan peluncuran. Kurasi data kami sangat menyenangkan: ternyata gamer suka memamerkan keahlian mereka dengan melapisi kontrol gamepad real-time pada streaming video. Jadi kami melatih model segmentasi untuk mendeteksi dan mengekstrak tampilan gamepad tersebut dan mengubahnya menjadi tindakan ahli. Kami kemudian menutupi wilayah itu untuk mencegah model mengeksploitasi pintasan. Selama pelatihan, varian GR00T N1.5 belajar memetakan dari 40K jam piksel ke tindakan melalui transformator difusi. Nitrogen hanyalah permulaan, dan ada jalan panjang untuk mendaki bukit pada kemampuannya. Kami sengaja hanya fokus pada sisi Sistem 1: "naluri gamer" dari kontrol motor cepat. Kami membuka sumber *semuanya* untuk Anda utak-atik: bobot model yang telah dilatih sebelumnya, seluruh kumpulan data tindakan, kode, dan whitepaper dengan detail yang solid. Saat ini, robotika adalah superset dari masalah AI yang sulit. Besok, itu mungkin menjadi subset, titik di ruang laten yang jauh lebih besar dari AGI yang diwujudkan. Kemudian Anda cukup meminta dan "meminta" pengontrol robot. Itu mungkin permainan akhir (permainan kata-kata). Nitrogen dipimpin bersama oleh pemikiran brilian kami: Loic Magne, Anas Awadalla, Guanzhi Wang. Ini adalah kolaborasi multi-institusi. Lihat utas teknis Guanzhi dan tautan repo di bawah ini!