Rozlouskli jsme vágní příspěvek @sama's death star. Od spuštění GPT-5 uběhl týden a myslíme si, že konečně chápeme Samův vágní příspěvek o hvězdě smrti. Před uvedením GPT-4 na trh proběhla vizualizace dat, která ukazovala počet parametrů modelu ve srovnání s GPT-3, která se stala virální. Z toho vyplývá, že větší předtrénink znamenal mnohem lepší model. Ukázalo se, že to platí i pro skok z GPT-3 na GPT-4. GPT-4.5 nás však naučil, že rozsah předtréninku nestačí – potřebujete také směs technik, odborníků, výzkumníků atd. Příspěvek o hvězdě smrti představuje ještě větší kruh z memu GPT-3 -> GPT-4, ale OpenAI tento metaforický velký kruh vyhodila do povětří modelem, který je nejen větší, ale také lépe zkonstruovaný – "router je vydání", jak to vyjádřila společnost SemiAnalysis. Někteří očekávali, že GPT-5 bude superinteligence, a byli zklamáni tím, co jim připadalo postupné. Zde však existuje spousta důvodů k optimismu. GPT-5 byl zjevně RL upraven způsobem, který snižuje halucinace, pravděpodobně tréninkem na nepoznatelných/nemožných výzkumných úkolech a zahrnutím příkladů, kdy odborníci modelovali a říkali: "Dobrá odpověď na tuto otázku prostě není venku." To je obrovský upgrade. V pořadu jsme také mluvili o tom, jak router GPT-5 nastavuje OpenAI tak, aby skutečně dominovala v agentském obchodování / zpeněžitelné bezplatné úrovni – býčí argument pro superinteligenci. Kartu Masa lze skutečně zahrát pouze jednou a singularita nebude dotována rizikovými kapitalisty. Bude financován volným peněžním tokem. Bude vybudován klastr v hodnotě bilionu dolarů, který bude placen vysoce ziskovou technologickou společností, která může přímo zaručit investici se sladěným obchodním modelem. Singularita je stále tisíce dní daleko, ale obecně je na dobré cestě.
19,4K