Eğer a16z, yc veya sequoia olsaydım, gerçek dünya verilerini toplamak ve açıklamak için yeni yollar geliştiren girişimlere agresif bir şekilde yatırım yapardım. > Milyarlarca saatlik sürüş verisi > Fabrika işçilerinin beyaz eşyalar ve ağır makinelerle etkileşimi > Derin diyalektik ve kültürel anlayışla ses segmentasyonu > Islak laboratuvar deneysel verileri > Ajan izlerinin hesaplama ölçeğinde sürekli toplanması ve notlanması LLM'ler kurduğumuzda, verilerin çoğu zaten internette mevcuttu. Sadece kazımamız, temizlememiz ve ölçeklendirmemiz gerekiyordu. Ancak dünya temel modellerine doğru ilerlerken, dar boğaz yüksek kaliteli, gerçek dünyadan, iyi açıklamalı verilerdir. Ve annotasyon kalitesi önemlidir. Bunlar arasında büyük bir fark var: "Ağaçta elma" ve "Ağaçta olgun elmalar. Rüzgar saatte 2 mil hızla esiyor. Sıcaklık yaklaşık 18°C'dir. ” Soru basit. Dünyanın ne kadarını gerçekten yakalayabilirsiniz? Bugün LLM'ler, elmaların yerçekiminden kaynaklandığını biliyor; nedenselliği anladıkları için değil, dil korelasyonlarını çok iyi anladıkları için. Nedensel yapıyı anlamak ise sırada gelir. O geleceğe doğru ilerleseydim, veri toplamayı Hindistan ve diğer Güney ve Güneydoğu Asya bölgelerinde desteklerdim. Donanım dağıtır, binlerce saatlik insan aktivite verisi, sağlık sinyalleri ve hayati veriler toplar, sürekli olarak annotasyon hatları çalıştırırdım. Gündüz gece. Ben a16z olsaydım, kuruculara bunu yapmaları için fon verirdim. Belki de kendim yapma isteğim var.

Bu yılki tahmin OpenAI'nin AMD'yi satın alacağı. Sama 4D sacmet oynuyor ve zaten kazanıyor. AMD'nin OpenAI'ye ihtiyacı olduğu gibi AMD'ye de ihtiyacı var. Bu süreç, AMD'nin 160 milyon hisse için $0.01 fiyatından OpenAI varrantları çıkarmasıyla başladı. Hisseler OpenAI'nin 6GW AMD GPU dağıtmasıyla devreye giriyor. Hisse senedi 600 dolara ulaşırsa ve OpenAI tam anlamıyla kullanırsa, bu warrantlar 96 milyar dolar değerinde olur (aynı değerde de anlaşmanın donanımıyla yaklaşık aynı değerde). Bu, OpenAI'nin Nvidia ile yaptığı anlaşmadan farklı. Nvidia, OpenAI'ye 100 milyar dolar yatırım yaptı ve OpenAI en az 10 GW Nvidia donanımı dağıtmayı taahhüt etti. OpenAI müşteridir. Nvidia yatırımcı. OpenAI'nin Nvidia'da hiçbir payı yok. AMD'de yapı ters çevriliyor. OpenAI, AMD'nin kurumsal stratejisi üzerinde etkili olabilecek potansiyel bir ortak sahibi haline gelir. Satıcı ilişkisini böyle kurmazsınız. Bu, satın alma için bir öncül yapılandırmak istediğinizde ortaya çıkar. Zamanlama anahtardır. OpenAI da kar amacı gütmeyen bir şirketten kar amacı güden bir şirkete yeni dönüştü. Yeniden yapılandırma asla bağış toplama ile ilgili değildi, Sama sonsuz sermaye toplayabilir. Amacı gütmeyen kuruluşların kolayca yapamadığı karmaşık M&A'ları etkinleştirmekti. Görünüşü şöyle: > OpenAI, Samsung/SK Hynix anlaşmaları aracılığıyla küresel DRAM arzının %40'ını kontrol ediyor > OpenAI, AMD'de %10 hisseye sahip > OpenAI, Broadcom ile özel çipler geliştiriyor > OpenAI, TSMC ile kendi çıkarım çiplerini inşa ediyor > OpenAI, Nvidia ile 100 milyar dolarlık bir ortaklığa sahiptir Bu dikey bir entegrasyon gibi görünebilir, ancak Sama aslında tüm yapay zeka hesaplama yığınını yatay olarak yakalamaya çalışıyor. AMD, hiper ölçekleme için Nvidia'ya alternatif olan tek güvenilir alternatif. Ayrıca ZT sistemlerini satın alarak rack ölçekli sunucu üretimi sağladılar. Rekabetçi GPU'ları var. Ama garantili bir talep çapı yok. OpenAI bunu (ve potansiyel olarak çok daha fazlasını sağlıyor) sağlıyor. OpenAI AMD'yi satın alırsa, modeller tasarlayan, çip tasarlayan ve bellek beslemesini kontrol eden dikey entegre bir yapay zeka şirketi oluşur. Şu anda böyle bir şirket yok. Google'da TPU'lar ve DeepMind ile bunların bazı bölümleri var, ancak TPU'lar sadece dahil. Bir OpenAI-AMD kuruluşu, tescilli avantajlarını koruyarak piyasaya satabilir. Intel'in burada daha çılgın bir kart olarak ortaya çıkmasına şaşırmam. AMD ve Nvidia'nın sahip olmadığı yerel dökümhane kapasitesine sahipler. Ayrıca hâlâ kurumsal bilişim üzerinde hakim olan x86 mimarisine sahipler. Nvidia, Intel'e 5 milyar dolar yatırım yaptı, ancak dökümhane işleri Nvidia tarafından çip üretimi için kullanılmıyor, sadece CPU'ları birlikte geliştiriyorlar. Bu da bir açıklık bırakıyor. OpenAI, özel çipleri için yerel üretim kapasitesi istiyorsa, Intel'in Foundry'si Amerika'nın ölçekli tek seçeneğidir. Sama, AGI'yi kurmak için 5-7 trilyon dolara ihtiyacı olduğunu söylediğinde, bu onun küresel bir fabraz ağı kurma arzusunu haklı çıkarıyor. CHIPS Yasası ile zamanlaması çok iyiydi. Eğer hükümetin yarı iletken bağımsızlığını sağlamak için ihtiyaç duyduğu şirket sizseniz, farklı muamele görürsünüz. Son amaç "OpenAI AMD'yi satın alıyor" ya da "OpenAI Intel'i satın alıyor" olmayabilir. Ama bu "OpenAI, yerli çip şirketlerini birleşik bir yapay zeka tedarik zincirine bağlayan entegrasyon katmanı olur" olacak. Bu, eskiden ayrı sektörler olan sektörler arasında koordinasyon yapan yeni bir kuruluş olacak. Sama model katmanını, çip katmanını, bellek katmanını kontrol etmeye çalışıyor ve biri tüm yapıyı haritaladığında, siz o kadar entegre oluyorsunuz ki çözemeyeceksiniz.

Eğer Steve Jobs hâlâ hayatta olsaydı, Apple bunu yapardı, gerçekten harika bir teknoloji parçası.