"Yüksek puanlı ancak düşük yetenekli" olsa bile, Grok2, X (Twitter) platformundan kullanımını desteklemek için büyük miktarda yüksek kaliteli birinci taraf verisine sahipti. Ancak, Grok3'ün eğitiminde, xAI doğal olarak OpenAI'nin şu anda karşı karşıya olduğu "tavan" ile karşılaştı - premium eğitim verilerinin eksikliği, modelin yeteneklerinin marjinal faydasını hızla ortaya koyuyor.

Grok3 ve Musk geliştiricileri muhtemelen bu gerçekleri derinlemesine anlayan ve tanımlayan ilk kişilerdir, bu yüzden Musk sosyal medyada kullanıcıların şu anda deneyimlediği sürümün "hala sadece beta" olduğunu ve "tam sürümün önümüzdeki aylarda yayınlanacağını" sürekli olarak belirtmiştir. Musk, Grok3'ün ürün yöneticisi rolünü üstlenmiş ve kullanıcıların yorumlar bölümünde karşılaşılan çeşitli sorunlar hakkında geri bildirim sağlamalarını önermiştir. Dünya'nın en çok takip edilen ürün yöneticisi olabilir.

Yine de, bir gün içinde, Grok3'ün performansı şüphesiz daha güçlü büyük modeller eğitmek için "muazzam hesaplama gücüne" güvenmeyi uman kişiler için alarmları çaldı: halka açık Microsoft bilgilerine göre, OpenAI'nin GPT-4'ü 1,8 trilyon parametrelik bir parametre boyutuna sahip, bu da GPT-3'ün on katından fazla. Söylentiler, GPT-4.5'in parametre boyutunun daha da büyük olabileceğini öne sürüyor.

Model parametre boyutları yükseldikçe, eğitim maliyetleri de fırlıyor. Grok3'ün varlığıyla, parametre boyutu aracılığıyla daha iyi model performansı elde etmek için "para harcamaya" devam etmek isteyen GPT-4.5 ve diğerleri gibi rakipler, artık açıkça görünen tavanı dikkate almalı ve bunu nasıl aşacaklarını düşünmelidir. Bu anda, OpenAI'nin eski baş bilim insanı Ilya Sutskever, geçen Aralık ayında daha önce "Alıştığımız ön eğitim sona erecek" demişti ve bu, tartışmalarda yeniden gündeme gelerek büyük modeller eğitmek için gerçek yolu bulma çabalarını teşvik etti.