Küresel yapay zeka eğitim pazarı aslında küresel değil. @SentientAGI'un kurucusu Himanshu Tyagi (@hstyagi), bugün büyük ölçekli eğitim koşularının neden küresel müşteriler değil, egemen yapay zeka geliştiricileri olduğunu anlatıyor. "ABD'de oturup Hindistan'da eğitim alamazsın. Etrafında düzenleyici unsurlar var — kim yönetiyor, nerede işletiyor." Ve ekonomi meselesi: "20 milyon dolarlık bir yatırım. Küresel piyasalar açık olsaydı küresel getiri elde edebilirdiniz. Ama bugün değiller." "Mevcut alanda, asıl alıcılar egemen yapay zeka yapıcılarıdır." Ve birçok hükümet yerel eğitimi zorunlu kılar: "Kore ve Hindistan gibi ülkeler, yerel modelleri oluştururken sadece yerel bulutlara izin veriyor. Ekosistemlerini kendi başından oluşturmak için ve bu hızla gerçekleşiyor."

2 milyar dolar toplamanın ardından, @reflection_ai CEO'su @MishaLaskin, şirketin sonraki gidişatı hakkında şunları söylüyor: "Amerikan açık modelini ön ve sonradan eğitmek için gereken hesaplamayı elde etmek için sermaye kullandık ve bu modeli dünyanın geri kalanına ihrac edebileceğimiz." Ayrıca Laskin'in 'frontier-lab' dediği yetenek bench'i oluşturdular: "Frontier Labs'ta bu çalışmayı yöneten kritik bir kitleye sahibiz — ön eğitim modelleme ve veri, eğitim sonrası akıl yürütme, kodlama, RLHF — tüm yığın boyunca ekipler oluşturduk." Yansıtma artık her ciddi öncü laboratuvarın geçmesi gereken aşamada: "Ölçeklenme merdivenindeyiz, modelleri küçükten büyüğe sistematik olarak eğitiyoruz, çünkü her ölçekte şeyler yeni şekillerde kırılır." Ve Laskin, ön eğitim ile sonrası eğitim arasında keskin bir çizgi çiziyor: "İnsanlar yapay zekada YOLO koşularından bahsediyor ama bu sadece antrenman sonrası dönemde işe yarıyor. Ekip üyelerimizden birinin dediği gibi: ön eğitim YOLO yapamazsınız, son derece hassas ve metodik olmalı." Şu anda durum nere: "Şimdi tırmanma merdiveninden geçiyoruz. Heyecan verici erken sonuçlar görüyoruz ve gelecek yıl harika modeller piyasaya süreceğiz."

Merkeziyetsiz yapay zeka düşündüğümüz gibi görünmeyecek. @SentientAGI'un kurucusu Himanshu Tyagi (@hstyagi, merkezi olmayan eğitimin insanların düşündüğünden daha gerçekçi olduğunu şöyle açıklıyor: "İnsanlar eğitimi merkeziyetsiz hale getirmenin imkansız olduğunu, bunu milyonlarca küçük cihaza yaymak zorunda kalacağını düşünüyor. Ama işler böyle yürümek zorunda değil." "Akademik hayatımda federasyon öğrenimi üzerine çalıştım. Eskiden merkeziyetsiz öğrenmenin asla gerçek olmayacağına inanırdım. Ama çok önemli bir noktayı kaçırdım: tamamen merkeziyetsizleştirmek zorunda değilsin." Temel içgörüler: "Kümeler — cihazlar değil — merkeziyetsizliğin birimidir. 500 GPU'luk podları bulmak o kadar zor değil. Birçok kişi onları asabilir. İyi bir emlak projesi gibi." Ve büyük oyuncular zaten bunu yapıyor: "Google ve diğerleri bu şekilde dahili merkeziyetsizliği yapar. Böyle bir merkeziyetsizlik mümkün." Peki gerçek engel nedir? "Zor olan eğitim yöntemi değil, çip dağıtımının düzenleyici ve tarife çerçevesi."