Tag 2 von NeurIPS - - habe Sutton gehört, der die Oak-Architektur erklärt hat - viele coole Forscher vom Qwen-Team, Reflection, NVIDIA, Google DeepMind getroffen und über die Kuratierung von Pretraining-Datensätzen gesprochen - über RL-Umgebungen und Post-Training mit Databricks und Forschern von Stealth-Startups gesprochen Tag 3 begann mit einem Vortrag von @YejinChoinka Wenn ich nur ein Stück Information von NeurIPS behalten kann, wird es diese Folie sein

Tag 1 bei NeurIPS - Zufällig nach 8 Jahren auf Freunde gestoßen - Eine Produktthese mit einigen potenziellen Käufern validiert - Erfahren, wie groß der Markt für Umweltinfrastruktur ist und wie LLM + RL generative Empfehlungen prägt - Über das Aryabhata LLM mit @dylan522p und @lexfridman geplaudert Starte Tag 2 mit Sutton und Oak Architektur

Der Grund, warum ich Anthropic nicht mag - dieses Video zeigt pure Arroganz und Verachtung für alle anderen, die keine großen Labore sind. Ihre Worte und Taten rund um das Thema Sicherheit spiegeln dasselbe wider - nur wir können die Modelle trainieren und ihr Bauern könnt das nicht. Open Source KI ist eine wunderbare Sache und wird neben Closed Source KI gewinnen.